爬取簡書全站文章并生成 API（五）

簡書

看完前面的四篇文章，就已經(jīng)可以爬取簡書全站的文章做成 API，并且可以部署上線了。但是我對 Docker 這個很火的東西非常感興趣，前段時間學(xué)了 Docker 的基本操作，正好可以用上。這也時我第一次用 Docker 部署 Django 應(yīng)用，若有不正確的地方，還望指出。

使用 Docker 部署 Django 應(yīng)用程序

由于 Docker Hub 的鏡像在國內(nèi)下載速度非常慢，所以此次使用的都是 daocloud 提供的鏡像。Docker 的基本操作可以參考 http://www.tianfeiyu.com/?cat=159.

Docker 部署 Django 應(yīng)用可以通過兩種方式來完成：迭代構(gòu)建和容器互聯(lián)。以下使用容器互聯(lián)的方式搭建 Django 容器棧。

注意：以下所有操作步驟均在 CentOS 6.6 x86_64 下完成。

所需鏡像

  • Docker version 1.7.1
  • daocloud.io/nginx:1.11
  • daocloud.io/python:2.7
  • daocloud.io/mysql:5.6
  • daocloud.io/django:1.9

容器創(chuàng)建的順序：

mysql --> redis --> django --> nginx
架構(gòu)圖

構(gòu)建鏡像前請先下載好所有所需的鏡像。

1. 創(chuàng)建 mysql 容器

首先創(chuàng)建一個用于構(gòu)建容器的目錄：

# mkdir /docker
# cd /docker/

然后創(chuàng)建好以下幾個目錄用于存放相應(yīng)的文件：

├── mysql  
│   ├── conf.d    
│   │   ├── jianshu.sql       ---對應(yīng)的 django 數(shù)據(jù)庫文件，需要手動導(dǎo)入
│   │   ├── character.cnf  ---設(shè)定字符集
│   │   └── my.cnf         ---額外配置
│   ├── data               ---掛載數(shù)據(jù)庫文件的目錄
│   └── start.sh           ---容器啟動腳本

以下是 mysql 容器的啟動腳本：

#!/bin/bash 
#

echo "---------------start mysql image-------------------"
docker run --name mysql \
-v $(pwd)/conf.d:/etc/mysql/conf.d \
-v $(pwd)/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
-p 3307:3306 \
-d daocloud.io/mysql:5.6.30

上述腳本創(chuàng)建一個名為 mysql 的容器，掛載容器的配置文件目錄與數(shù)據(jù)目錄并且初始化 mysql 的密碼。

2. 創(chuàng)建 redis 容器

使用 redis 緩存后端數(shù)據(jù)。

redis 容器不需要特別的處理。

├── redis
│   └── start.sh

啟動腳本：

#!/bin/bash 
#

docker run --name redis -d daocloud.io/redis:3.0.7

3. 創(chuàng)建 django 容器

要創(chuàng)建 django 容器，首先需要一個 django 鏡像，即在 daocloud.io/python:2.7 鏡像中安裝 django 所需的環(huán)境。再將 django 容器與 mysql 和 redis 容器進(jìn)行互聯(lián)。

└── web
    ├── jianshu.tar.gz       ---app 打包文件
    ├── Dockerfile          ---構(gòu)建 django 鏡像所使用的 Dockerfile
    ├── requirements.txt  ---app 依賴的庫
    ├── start.sh          ---啟動腳本
    └── stop.sh

以下為 Dockerfile 文件信息：

# 基礎(chǔ)鏡像
FROM daocloud.io/python:2.7

# 維護(hù)者信息
MAINTAINER tianfeiyu <www.tianfeiyu.com>

ADD blog.tar.gz /usr/src/ 

# app 所在目錄
WORKDIR /usr/src/jianshu

# 安裝 app 所需依賴
RUN pip install --no-cache-dir -r requirements.txt -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com

啟動腳本：

#!/bin/bash 
# 
docker exec -d mysql mysql -uroot -p123456 -e "create database blog;"
docker build -t feiyu/django-app .
docker run --name django \
-v /usr/src/jianshu \
-v /usr/src/jianshu/static \                                                                                         
--link mysql:mysql \
--link redis:redis \
-p 12000:8000 \
-d feiyu/django-app /usr/local/bin/uwsgi --http :8000 --chdir /usr/src/jianshu -w jianshu.wsgi

上面使用 --link 選項(xiàng)來能夠進(jìn)行容器間安全的交互通信，使用格式 name:alias,可在一個 docker run 命令中重復(fù)使用該參數(shù)，使用 --link 時，連接通過容器名來確定容器，建議啟動容器時自定義容器名。

通過 --link 選項(xiàng)來建立容器間連接，不但可以避免容器的 IP 和端口暴露到外網(wǎng)所導(dǎo)致的安全問題，還可以防止容器在重啟后 IP 地址變化導(dǎo)致的訪問失效，它的原理類似于 DNS 服務(wù)器的域名和地址映射。當(dāng)容器的 IP 地址發(fā)生變化時，Docker 將自動維護(hù)映射關(guān)系中 IP 地址。

Docker 通過 2 種方式為容器公開連接信息：環(huán)境變量和更新 /etc/hosts 文件。

依舊使用 uwsgi來啟動 django 應(yīng)用程序，也可以使用 gunicorn 來啟動。

4. 創(chuàng)建 nginx 容器

nginx 容器的創(chuàng)建比較簡單，先在構(gòu)建鏡像時將 nginx 的配置文件復(fù)制到鏡像，再將 nginx 容器與 django 容器進(jìn)行互聯(lián)并且掛載 django 容器中的數(shù)據(jù)卷。

├── nginx
│   ├── Dockerfile                 ---構(gòu)建 nginx 鏡像的 Dockerfile
│   ├── nginx-conf                    
│   │   └── django_project.conf       ---提供的 nginx 配置文件 
│   ├── restart.sh
│   ├── start.sh
│   └── stop.sh

Dockerfile 文件：

FROM daocloud.io/nginx
 
MAINTAINER tianfeiyu <www.tianfeiyu.com>                                                                            
 
RUN rm /etc/nginx/conf.d/default.conf
ADD nginx-conf/ /etc/nginx/conf.d/

啟動腳本：

#!/bin/bash 
#                                                                                                                   
docker build -t nginx .        
docker run --name nginx-server \
--link django:web \            
-v /www/static \               
--volumes-from django \        
-p 8888:80 \
-d nginx

到此，所有容器的創(chuàng)建過程都已經(jīng)了解清楚，所有文件的目錄樹如下所示：

目錄樹

5. 啟動容器棧

為了方便測試，每個需要創(chuàng)建的容器下面都會有一個啟動腳本，并且有一個控制所有容器的啟動腳本與停止腳本：

#!/bin/bash
#
cd mysql                                                                                                            
echo "start mysql----------------"
./start.sh
 
cd ../redis  
echo "start redis---------------------"
./start.sh
 
cd ../web 
echo "start web ---------------------"
./start.sh
 
cd ../nginx
echo "start nginx-------------------"
./start.sh
啟動完成

然后進(jìn)入到 mysql 容器中將 django 數(shù)據(jù)庫文件導(dǎo)入：

# docker inspect --format "{{.State.Pid}}" mysql
12674
# nsenter --target 12674 --mount --uts --ipc --net --pid
root@91308514f209:/# cd /etc/mysql/conf.d/
root@91308514f209:/etc/mysql/conf.d# mysql -uroot -p jianshu < jianshu.sql

完整的代碼請查看 github 項(xiàng)目地址 ！

最后編輯于 ：
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成，瀏覽時請結(jié)合常識與多方信息審慎甄別。
平臺聲明：文章內(nèi)容（如有圖片或視頻亦包括在內(nèi)）由作者上傳并發(fā)布，文章內(nèi)容僅代表作者本人觀點(diǎn)，簡書系信息發(fā)布平臺，僅提供信息存儲服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容