爬取簡(jiǎn)書(shū)全站文章并生成 API(五)

簡(jiǎn)書(shū)

看完前面的四篇文章,就已經(jīng)可以爬取簡(jiǎn)書(shū)全站的文章做成 API,并且可以部署上線(xiàn)了。但是我對(duì) Docker 這個(gè)很火的東西非常感興趣,前段時(shí)間學(xué)了 Docker 的基本操作,正好可以用上。這也時(shí)我第一次用 Docker 部署 Django 應(yīng)用,若有不正確的地方,還望指出。

使用 Docker 部署 Django 應(yīng)用程序

由于 Docker Hub 的鏡像在國(guó)內(nèi)下載速度非常慢,所以此次使用的都是 daocloud 提供的鏡像。Docker 的基本操作可以參考 http://www.tianfeiyu.com/?cat=159.

Docker 部署 Django 應(yīng)用可以通過(guò)兩種方式來(lái)完成:迭代構(gòu)建和容器互聯(lián)。以下使用容器互聯(lián)的方式搭建 Django 容器棧。

注意:以下所有操作步驟均在 CentOS 6.6 x86_64 下完成。

所需鏡像

  • Docker version 1.7.1
  • daocloud.io/nginx:1.11
  • daocloud.io/python:2.7
  • daocloud.io/mysql:5.6
  • daocloud.io/django:1.9

容器創(chuàng)建的順序:

mysql --> redis --> django --> nginx
架構(gòu)圖

構(gòu)建鏡像前請(qǐng)先下載好所有所需的鏡像。

1. 創(chuàng)建 mysql 容器

首先創(chuàng)建一個(gè)用于構(gòu)建容器的目錄:

# mkdir /docker
# cd /docker/

然后創(chuàng)建好以下幾個(gè)目錄用于存放相應(yīng)的文件:

├── mysql  
│   ├── conf.d    
│   │   ├── jianshu.sql       ---對(duì)應(yīng)的 django 數(shù)據(jù)庫(kù)文件,需要手動(dòng)導(dǎo)入
│   │   ├── character.cnf  ---設(shè)定字符集
│   │   └── my.cnf         ---額外配置
│   ├── data               ---掛載數(shù)據(jù)庫(kù)文件的目錄
│   └── start.sh           ---容器啟動(dòng)腳本

以下是 mysql 容器的啟動(dòng)腳本:

#!/bin/bash 
#

echo "---------------start mysql image-------------------"
docker run --name mysql \
-v $(pwd)/conf.d:/etc/mysql/conf.d \
-v $(pwd)/data:/var/lib/mysql \
-e MYSQL_ROOT_PASSWORD=123456 \
-p 3307:3306 \
-d daocloud.io/mysql:5.6.30 

上述腳本創(chuàng)建一個(gè)名為 mysql 的容器,掛載容器的配置文件目錄與數(shù)據(jù)目錄并且初始化 mysql 的密碼。

2. 創(chuàng)建 redis 容器

使用 redis 緩存后端數(shù)據(jù)。

redis 容器不需要特別的處理。

├── redis
│   └── start.sh

啟動(dòng)腳本:

#!/bin/bash 
#

docker run --name redis -d daocloud.io/redis:3.0.7

3. 創(chuàng)建 django 容器

要?jiǎng)?chuàng)建 django 容器,首先需要一個(gè) django 鏡像,即在 daocloud.io/python:2.7 鏡像中安裝 django 所需的環(huán)境。再將 django 容器與 mysqlredis 容器進(jìn)行互聯(lián)。

└── web
    ├── jianshu.tar.gz       ---app 打包文件
    ├── Dockerfile          ---構(gòu)建 django 鏡像所使用的 Dockerfile
    ├── requirements.txt  ---app 依賴(lài)的庫(kù)
    ├── start.sh          ---啟動(dòng)腳本
    └── stop.sh              

以下為 Dockerfile 文件信息:

# 基礎(chǔ)鏡像
FROM daocloud.io/python:2.7

# 維護(hù)者信息
MAINTAINER tianfeiyu <www.tianfeiyu.com>

ADD blog.tar.gz /usr/src/ 

# app 所在目錄
WORKDIR /usr/src/jianshu

# 安裝 app 所需依賴(lài)
RUN pip install --no-cache-dir -r requirements.txt -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com

啟動(dòng)腳本:

#!/bin/bash 
# 
docker exec -d mysql mysql -uroot -p123456 -e "create database blog;"
docker build -t feiyu/django-app .
docker run --name django \
-v /usr/src/jianshu \
-v /usr/src/jianshu/static \                                                                                         
--link mysql:mysql \
--link redis:redis \
-p 12000:8000 \
-d feiyu/django-app /usr/local/bin/uwsgi --http :8000 --chdir /usr/src/jianshu -w jianshu.wsgi

上面使用 --link 選項(xiàng)來(lái)能夠進(jìn)行容器間安全的交互通信,使用格式 name:alias,可在一個(gè) docker run 命令中重復(fù)使用該參數(shù),使用 --link 時(shí),連接通過(guò)容器名來(lái)確定容器,建議啟動(dòng)容器時(shí)自定義容器名。

通過(guò) --link 選項(xiàng)來(lái)建立容器間連接,不但可以避免容器的 IP 和端口暴露到外網(wǎng)所導(dǎo)致的安全問(wèn)題,還可以防止容器在重啟后 IP 地址變化導(dǎo)致的訪(fǎng)問(wèn)失效,它的原理類(lèi)似于 DNS 服務(wù)器的域名和地址映射。當(dāng)容器的 IP 地址發(fā)生變化時(shí),Docker 將自動(dòng)維護(hù)映射關(guān)系中 IP 地址。

Docker 通過(guò) 2 種方式為容器公開(kāi)連接信息:環(huán)境變量和更新 /etc/hosts 文件。

依舊使用 uwsgi來(lái)啟動(dòng) django 應(yīng)用程序,也可以使用 gunicorn 來(lái)啟動(dòng)。

4. 創(chuàng)建 nginx 容器

nginx 容器的創(chuàng)建比較簡(jiǎn)單,先在構(gòu)建鏡像時(shí)將 nginx 的配置文件復(fù)制到鏡像,再將 nginx 容器與 django 容器進(jìn)行互聯(lián)并且掛載 django 容器中的數(shù)據(jù)卷。

├── nginx
│   ├── Dockerfile                 ---構(gòu)建 nginx 鏡像的 Dockerfile
│   ├── nginx-conf                    
│   │   └── django_project.conf       ---提供的 nginx 配置文件 
│   ├── restart.sh
│   ├── start.sh
│   └── stop.sh

Dockerfile 文件:

FROM daocloud.io/nginx
 
MAINTAINER tianfeiyu <www.tianfeiyu.com>                                                                            
 
RUN rm /etc/nginx/conf.d/default.conf
ADD nginx-conf/ /etc/nginx/conf.d/

啟動(dòng)腳本:

#!/bin/bash 
#                                                                                                                   
docker build -t nginx .        
docker run --name nginx-server \
--link django:web \            
-v /www/static \               
--volumes-from django \        
-p 8888:80 \
-d nginx

到此,所有容器的創(chuàng)建過(guò)程都已經(jīng)了解清楚,所有文件的目錄樹(shù)如下所示:

目錄樹(shù)

5. 啟動(dòng)容器棧

為了方便測(cè)試,每個(gè)需要?jiǎng)?chuàng)建的容器下面都會(huì)有一個(gè)啟動(dòng)腳本,并且有一個(gè)控制所有容器的啟動(dòng)腳本與停止腳本:

#!/bin/bash
#
cd mysql                                                                                                            
echo "start mysql----------------"
./start.sh
 
cd ../redis  
echo "start redis---------------------"
./start.sh
 
cd ../web 
echo "start web ---------------------"
./start.sh
 
cd ../nginx
echo "start nginx-------------------"
./start.sh
啟動(dòng)完成

然后進(jìn)入到 mysql 容器中將 django 數(shù)據(jù)庫(kù)文件導(dǎo)入:

# docker inspect --format "{{.State.Pid}}" mysql
12674
# nsenter --target 12674 --mount --uts --ipc --net --pid
root@91308514f209:/# cd /etc/mysql/conf.d/
root@91308514f209:/etc/mysql/conf.d# mysql -uroot -p jianshu < jianshu.sql

完整的代碼請(qǐng)查看 github 項(xiàng)目地址 !

最后編輯于
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請(qǐng)聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請(qǐng)結(jié)合常識(shí)與多方信息審慎甄別。
平臺(tái)聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡(jiǎn)書(shū)系信息發(fā)布平臺(tái),僅提供信息存儲(chǔ)服務(wù)。

相關(guān)閱讀更多精彩內(nèi)容

友情鏈接更多精彩內(nèi)容