Docker构建python Flask+ nginx+uwsgi容器
导读
安装Nginx
首先拉下centos镜像docker pull centos
我们安装最新的nginx1.19版本:下载地址
将centos镜像运行起来并进入:
docker run --name ver -d -p 8051:80 -it nginx_start
将nginx-1.19.0.tar.gz这个包放入容器里面:
docker cp nginx-1.19.0.tar.gz 10e87af84c05:/root
(10e87af84c05为centos容器id)
安装nginx前先装一些依赖:
yum -y install gcc gcc-c++ autoconf automake make yum -y install zlib zlib-devel openssl openssl-devel pcre pcre-devel
解压:
tar -zxvf nginx-1.19.0.tar.gz
#进入到nginx-1.10.1 ,并配置nginx cd nginx-1.19.0 #配置nginx #--prefix 指定安装的目录 #/usr/local/nginx 是安装目录,不能和自己下载的文件目录重了 #./configure --prefix=/usr/local/nginx #带ssl stub_status模块 添加strem模块 –with-stream,这样就能传输tcp协议了 #http_stub_status_module 状态监控 #http_ssl_module 配置https #stream 配置tcp得转发 #http_gzip_static_module 压缩 #http_sub_module 替换请求 ./configure --prefix=/usr/local/nginx --with-http_stub_status_module --with-http_ssl_module --with-stream
注:
在这里我出现了pcre和zlib缺失的错,可以使用yum -y install zlib zlib-devel openssl openssl--devel pcre pcre-devel
命令,安装所有依赖。
再 make & make install
进行编译安装
安装成功后,在./configure --prefix=/usr/local/nginx
指定目录会生成四个文件,我们也只需要输入/usr/local/nginx/sbin/nginx
来启动nginx服务即可。
要验证是否成功,可以输入curl localhost
来查看是否启动成功。
生成镜像
10. 将装有nginx的centos容器打包为镜像docker commit ba5ba0d81912 nginx_centos
(ba5ba0d81912 为容器ID,重命名为nginx_centos)
11. 重新运行新的镜像:docker run --name ver -d -p 8051:80 -it nginx_centos
12. 而此时的镜像,则是有我们安装好的nginx,我们就可以拿他开始为所欲为,做一些其他的骚操作了。
安装python2.7环境
yum install gcc openssl-devel bzip2-devel
用 wget 下载 python 2.7 并解压
yum -y install wget
进入目录 /usr/src 再用 wget 下载 python 2.7
cd /usr/src wget https://www.python.org/ftp/python/2.7.15/Python-2.7.15.tgz
再解压 python2.7
tar -zxvf Python-2.7.15.tgz
安装 python 2.7
进入上面解压的 Python-2.7.15 解压文件中使用下面命令行安装
cd Python-2.7.15 ./configure --enable-optimizations make altinstall
安装 PIP
curl "https://bootstrap.pypa.io/get-pip.py" -o "get-pip.py" python2.7 get-pip.py
因为版本为2.7,且requirements.txt里面有一个 MYSQL-python
的库,会报一个找不到libmysqlclient-dev
的错,执行yum install mysql-devel
即可解决。
安装UWSGI
pip install uwsgi
的时候会报一个错:
plugins/python/uwsgi_python.h:2:20: fatal error: Python.h: No such file or directory
#include <Python.h>
运行yum install python-devel.x86_64
即可解决,并重新pip install即可下载。
配置uWSGI服务器
相关uwsgi.ini
文件内容如下:
[uwsgi] socket = /tmp/uwsgi.sock chown-socket = nginx:nginx chmod-socket = 664 # Graceful shutdown on SIGTERM, see https://github.com/unbit/uwsgi/issues/849#issuecomment-118869386 hook-master-start = unix_signal:15 gracefully_kill_them_all
在项目目录下/app/创建uwsgi.ini
文件:
[uwsgi] uwsgi-socket = /tmp/uwsgi.sock chmod-socket = 777 callable = app wsgi-file = main.py buffer-size = 65535 processes = %(%k * 2) threads = %(%k * 20
其中每个参数的意思:
uwsgi-socket:将uwsgi-socket这个配置项指定了一个文件,这个文件是Unix套接字,即通过文件系统
(而非网络地址)进行寻址和访问的套接字。配置uwsgi-socket之后,还需要配置chmod-socket,
Unix socket是个文件,所以会受到Unix系统的权限限制,可以配置成660或者777,
使得uwsgi客户端能够访问这个Unix socket文件,这里配置为777。
callable:设置在收到请求时,uwsgi加载的模块中哪个变量将被调用,默认是名字为“application”的变量。
wsgi-file:加载指定的wsgi文件。
buffer-size:设置用于uwsgi包解析的内部缓存区大小。默认是4k。
processes和threads,分别是开启的进程数和线程数,而%k是魔数变量,代表CPU核数,如果我们是双核CPU,
那这里的processes和threads分别为4和40,即有4个进程,每个进程有40个线程。
安装Supervisor(可选)
直接yum安装会报一个No package supervisor available.
的错误,那是因为CentOS是RedHat企业版编译过来的,去掉了所有关于版权问题的东西。只需要执行yum install epel-release
即可解决。安装好后会生成如下目录:
现在我们将配置supervisor,使得supervisor监听nginx和uwsgi服务。
首先在/etc
目录下创建supervisor
文件,然后创建supervisord.conf
文件和conf.d目录:
supervisord.conf目录配置如下:
; supervisor config file [unix_http_server] file=/var/run/supervisor/supervisor.sock ; (the path to the socket file) chmod=0700 ; sockef file mode (default 0700) [supervisord] logfile=/var/log/supervisor/supervisord.log ; (main log file;default $CWD/supervisord.log) pidfile=/var/run/supervisord.pid ; (supervisord pidfile;default supervisord.pid) childlogdir=/var/log/supervisor ; ('AUTO' child log dir, default $TEMP) ; the below section must remain in the config file for RPC ; (supervisorctl/web interface) to work, additional interfaces may be ; added by defining them in separate rpcinterface: sections [rpcinterface:supervisor] supervisor.rpcinterface_factory = supervisor.rpcinterface:make_main_rpcinterface [supervisorctl] serverurl=unix:///var/run/supervisor.sock ; use a unix:// URL for a unix socket ; The [include] section can just contain the "files" setting. This ; setting can list multiple files (separated by whitespace or ; newlines). It can also contain wildcards. The filenames are ; interpreted as relative to this file. Included files *cannot* ; include files themselves. [include] files = /etc/supervisor/conf.d/*.conf
再在conf.d目录下创建supervisord.conf
文件并编辑:
[supervisord] nodaemon=true [program:uwsgi] command=/usr/bin/uwsgi --ini /etc/uwsgi/uwsgi.ini --die-on-term --need-app stdout_logfile=/dev/stdout stdout_logfile_maxbytes=0 stderr_logfile=/dev/stderr stderr_logfile_maxbytes=0 [program:nginx] command=/usr/local/nginx/sbin/nginx stdout_logfile=/dev/stdout stdout_logfile_maxbytes=0 stderr_logfile=/dev/stderr stderr_logfile_maxbytes=0 # Graceful stop, see http://nginx.org/en/docs/control.html stopsignal=QUIT
以上路径均为实际目录配置,如果有不一样则需要更改。
然后将supervisor启动:
以上配置弄好后,我们将容器重新打包生成一个新的镜像,记为base_v3
,我们写一个打包docker应用的Dockerfile:
FROM base_v3 # 创建工作路径 RUN mkdir /app # 指定容器启动时执行的命令都在app目录下执行 WORKDIR /app # 替换nginx的配置 COPY nginx.conf /etc/nginx/nginx.conf # 将本地app目录下的内容拷贝到容器的app目录下 COPY ./app/ /app/
这里,在Dockerfile和app同级目录下,再建立一个nginx.conf文件,并将nginx.conf内容修改如下:
user nginx; worker_processes 1; error_log /usr/local/nginx/logs/error.log warn; pid /usr/local/nginx/logs/nginx.pid; worker_rlimit_nofile 20480; events { use epoll; worker_connections 20480; multi_accept on; } http { include /usr/local/nginx/conf/mime.types; default_type application/octet-stream; log_format main '$remote_addr - $remote_user [$time_local] "$request" ' '$status $body_bytes_sent "$http_referer" ' '"$http_user_agent" "$http_x_forwarded_for"'; #请求量级大建议关闭acccess_log #access_log /var/log/nginx/access.log main; sendfile on; #tcp_nopush on; keepalive_timeout 300s; client_header_timeout 300s; client_body_timeout 300s; gzip on; gzip_min_length 1k; gzip_buffers 4 16k; gzip_types text/html application/javascript application/json; include /usr/local/nginx/conf.d/*.conf; server { listen 6666; charset utf-8; client_max_body_size 75M; location / { include uwsgi_params; uwsgi_pass unix:///tmp/uwsgi.sock; uwsgi_send_timeout 300; uwsgi_connect_timeout 300; uwsgi_read_timeout 300; } } }
接下来只需要docker build -t new_project .
并docker run --name test -d -p 8055:6666 -v /root/web/mim_backend/data:/app/static -v /root/logs/mim_backend:/app/log -it new_project
即可。
当然,这个时候进去nginx和uwsgi没有自动启动,需要手动拉起来,如想自动拉起服务,可选用supervisor或者在dockerfile里面加一个ENTRYPOINT nginx -g "daemon on;" && uwsgi --ini /app/uwsgi.ini
然后随便跑一个接口测试: