docker容器化python服務部署（supervisor-gunicorn-flask）

2020 年 7 月 4 日
筆記
docker容器化服務部署

docker容器化python服務部署（supervisor-gunicorn-flask）

本文系作者原創，轉載請註明出處: //www.cnblogs.com/further-further-further/p/13223767.html

certifi==2020.4.5.2
chardet==3.0.4
click==7.1.2
cycler==0.10.0
Flask==1.1.2
gevent==20.6.0
gpg==1.10.0
greenlet==0.4.16
gunicorn==20.0.4
idna==2.9
interval==1.0.0
itsdangerous==1.1.0
Jinja2==2.11.2
kiwisolver==1.2.0
MarkupSafe==1.1.1
matplotlib==3.2.1
meld3==2.0.1
numpy==1.18.5
opencv-python-headless==4.2.0.32
Pillow==7.1.2
pyparsing==2.4.7
python-dateutil==2.8.1
requests==2.23.0
rpm==4.14.2
six==1.15.0
supervisor==4.0.0
urllib3==1.25.9
Werkzeug==1.0.1
zope.event==4.4
zope.interface==5.1.0

EOF

查看：cat requirements.txt

一鍵安裝：pip3 install -r requirements.txt

如果已安裝完所有庫，需要移植到其他機器中，打包所有 python 庫：pip3 freeze > requirements.txt

> supervisor & gunicorn 配置

gunicorn 可以理解為 WSGI 協議的一個實例，WSGI(Web Server Gateway Interface)：就是一個網關，是 web 伺服器與應用程式之間通訊的協議介面。

supervisor 提供了統一的方式來控制（start，stop，restart）進程，類似於 systemctl（在 docker 容器中 systemctl 命令是無效的）。

>> 生成 supervisord.conf

echo_supervisord_conf > /etc/supervisord.conf

>> 修改 supervisord.conf 配置

vi /etc/supervisord.conf

在文件最底部，去掉 include , files 注釋，並將 files 修改為

[include]
files = /etc/supervisor/*.conf

>> 添加 gunicorn.conf

創建路徑：mkdir /etc/supervisor

創建配置文件 gunicorn.conf：vi /etc/supervisor/gunicorn.conf

內容為：

[program:gunicorn]
command = gunicorn -c /opt/app/darknet_captcha/gunicorn.conf.py wsgi:application
autostart = true
startsecs = 5
autorestart = true
startretries = 3
redirect_stderr = true
stdout_logfile=/opt/app/logs/gunicorn.log

>> 配置文件生效：supervisorctl update

>> 先測試 gunicorn 啟動 flask 服務

gunicorn -c /opt/app/darknet_captcha/gunicorn.conf.py wsgi:application

psc -ef|grep gunicorn

說明啟動正常

刪除 gunicorn 進程，改由 supervisord 啟動

kill -9 55

>> 用 supervisord 啟動 gunicorn

supervisord -c /etc/supervisord.conf

如果出現如下問題，說明已有進程啟動，佔用了埠號。

解決辦法：刪除已啟動進程即可

ps -ef|grep supervisord

kill -9 pid

啟動後，查看 gunicorn 是否啟動。

ps -ef|grep gunicorn

如果服務啟動失敗，在日誌里查看原因。

日誌查看：vi /opt/app/logs/gunicorn.log

後面就可以使用如下命令操作gunicorn
supervisorctl start gunicorn
supervisorctl stop gunicorn
supervisorctl restart gunicorn

到此，在單機上 docker 容器下 flask 服務部署已完成，接下來就是

基本鏡像的製作，通過 dockerfile 創建最終鏡像，本地鏡像倉庫創建，鏡像 push 到本地倉庫，區域網內其他機器 pull 鏡像，一鍵部署服務。

> 基本鏡像製作

退出容器，但容器需處於運行（up)狀態：Ctrl + p，Ctrl + q

查看容器ID: docker container ls

製作鏡像（鏡像名稱：weixw/python-server-mirror:v1）：docker commit c96c249cf2bd weixw/python-server-mirror:v1

用 docker image ls 查看新鏡像是否已存在

> 通過 dockerfile 創建最終鏡像

為什麼還要通過 dockerfile 製作鏡像呢，因為上面生成的基礎鏡像只能保存靜態文件，資源，不能保存動態命令，比如 shell 相關命令，應用程式命令，

而這些命令可以通過 dockerfile 寫入進來，從而達到一鍵創建容器就能自動啟動服務的目的。

>> 創建 Dockerfile （規範名稱必須是 Dockerfile 或 dockerfile）

在應用程式服務的根目錄下創建 Dockerfile :

cd /opt/app/darknet_captcha

vi Dockerfile

>> Dockerfile 內容

FROM: 基礎鏡像

WORKDIR: 指定當前路徑

COPY: 複製文件

ADD : 添加文件，有 COPY 功能，還有解壓，從網站下載文件作用

EXPOSE: 暴露容器埠

CMD : shell 以及應用程式命令

>> init.sh（）

CMD 一般只能運行一條命令，對於多個命令，採用腳本方式運行。

>> 創建最終鏡像

cd /opt/app/darknet_captcha

docker image build -t weixw/python-server-mirror:v1.2 ./

查看：docker image ls

> 本地鏡像倉庫創建（其他埠不太行，需要開啟外網訪問埠5000）：

>> 下載 registry 鏡像

docker pull registry

>> 啟動registry容器：docker run -d -p 5000:5000 –restart=always –name registry -v /opt/registry/:/var/lib/registry registry

–restart=always : docker 啟動，容器自啟動

>> 修改docker 配置文件 daemon.json

vim /etc/docker/daemon.json
{
“registry-mirrors”:[“//uoggbpok.mirror.aliyuncs.com”],
“insecure-registries”:[“120.132.8.180:5000”]
}

>> 本地倉庫加安全認證

>>> 生成密碼：username: root password: 123456

yum install httpd-tools -y
mkdir /opt/registry-auth/ -p
htpasswd -Bbn root 123456 > /opt/registry-auth/htpasswd

>>> 修改密碼：
cd /opt/registry-auth/
vim htpasswd

>>> 重新啟動帶有秘鑰功能的registry容器
docker rm -f containerID
docker run -d -p 5000:5000 -v /opt/registry-auth/:/auth/ -v /opt/registry:/var/lib/registry –restart=always –name register-auth -e “REGISTRY_AUTH=htpasswd” -e “REGISTRY_AUTH_HTPASSWD_REALM=Registry Realm” -e “REGISTRY_AUTH_HTPASSWD_PATH=/auth/htpasswd” registry

>>> 規範本地鏡像名稱：docker tag imageID 120.132.8.180:5000/weixw/captcha

docker tag weixw/python-server-mirror:v1 120.132.8.180:5000/weixw/python-server-mirror:v1.2

>>> 登錄（一定要先登錄校驗，否則無法 push）：
docker login 120.132.8.180:5000
username: root
password: 123456

>>> 上傳鏡像到本地倉庫（埠5000能被外網訪問）：docker push 120.132.8.180:5000/weixw/python-server-mirror:v1.2

有一個 harbor 服務用來可視化管理鏡像的，大家感興趣的話可以玩玩，因為我的Linux宿主機本來就是虛擬機，配置比較低，這裡就不安裝了。

> 另外一台機器獲取鏡像（ 120.132.8.180:5000）步驟：

>> 修改docker 配置文件 daemon.json
vim /etc/docker/daemon.json
{
“registry-mirrors”:[“//uoggbpok.mirror.aliyuncs.com”],
“insecure-registries”:[“120.132.8.180:5000”]
}

>> 重啟 docker : systemctl restart docker

>> 登錄（pull 一般不需要登錄，可以直接下載）：

docker login 120.132.8.180:5000
username: root
password: 123456

>> 向鏡像倉庫（120.132.8.180:5000）獲取鏡像： docker pull 120.132.8.180:5000/weixw/python-server-mirror

>> 一鍵啟動服務：docker container run -d -p 80:8080 –restart=always –name=captcha_server 120.132.8.180:5000/weixw/python-server-mirror

-d: 表示在後台啟動

-p: 表示埠映射（80：宿主機埠，8080：容器埠）

–restart=always：表示開機自啟動容器

啟動容器後查看 flask 服務是否啟動：ps -ef|grep gunicorn

用 curl 或 postman 向 120.132.8.180:80/服務名稱發送請求，查看結果。

如果服務沒有起來，查看日誌/opt/app/logs/gunicorn.log 定位問題，然後解決問題。

遇到的問題以及解決辦法

> 無法強制刪除鏡像

原因：該鏡像下有容器創建，有可能不是運行狀態（exit），所以需要先刪除容器，再刪除鏡像。

解決方案：

查找所有容器：dokcer container ls -a

刪除該鏡像下所有容器：docker container rm -f containerID

刪除鏡像：docker image rm -f imageID

> 鏡像也可以保存文件，然後將文件導入

>> 將鏡像保存在本地：docker save -o 本地名字 image/name

例如： docker save -o python-server.tar 120.132.8.180:5000/weixw/python-server-mirror

>> 將本地鏡像文件載入進docker: docker load -i python-server.tar

不要讓懶惰佔據你的大腦，不要讓妥協拖垮了你的人生。青春就是一張票，能不能趕上時代的快車，你的步伐就掌握在你的腳下。

Tags: docker容器化服務部署