记录一次makefile + dockerfile + dockerfile-compose + shell 部署项目

项目主要是算法功能，所依赖的环境比较麻烦

Dockerfile

FROM python:3.7

# 替换linux默认源为阿里云
# 构建镜像时换源  Linux默认源类型   替换的源                源所处的位置                   
RUN sed -i 's/deb.debian.org/mirrors.aliyun.com/g' /etc/apt/sources.list

WORKDIR /app

#容器时间修改为系统时间  因为刚起的容器需要修正时间
ENV TZ=Asia/Shanghai \
    DEBIAN_FRONTEND=noninteractive

RUN ln -fs /usr/share/zoneinfo/${TZ} /etc/localtime \
    && echo ${TZ} > /etc/timezone \
    && dpkg-reconfigure --frontend noninteractive tzdata \
    && rm -rf /var/lib/apt/lists/*

# 项目依赖java包，这里是安装其环境
# 安装 jdk8
RUN wget -qO - https://adoptopenjdk.jfrog.io/adoptopenjdk/api/gpg/key/public | apt-key add - && \
    apt -y update && apt -y install software-properties-common && \
    add-apt-repository --yes https://adoptopenjdk.jfrog.io/adoptopenjdk/deb/ && \
    apt-get -y update && \
    apt-get -y install adoptopenjdk-8-hotspot && \
    mkdir /root/nltk_data

#该项目所依赖的包在install中导入，看有没有报错，以确认其是否确认安装
COPY install.py .
# 项目的依赖是一个压缩包，该文件是为了解压
COPY unzipNltk.py .
COPY requirements.txt .
# unzipNltk.py 解压后将其移动到指定文件夹下
COPY nltk_data/packages /root/nltk_data

# 使用下载好的依赖
# 因为该依赖拉取的比较慢，所有直接手动下载到项目中，然后再复制到项目需要的地方
COPY data-for-1.7.5.zip /usr/local/lib/python3.7/site-packages/pyhanlp/static/data-for-1.8.3.zip
COPY hanlp-1.8.3-release.zip /usr/local/lib/python3.7/site-packages/pyhanlp/static/hanlp-1.8.3-release.zip

RUN pip install -U pip -i https://pypi.mirrors.ustc.edu.cn/simple/
RUN pip install -r requirements.txt -i https://pypi.mirrors.ustc.edu.cn/simple/

# 使用在线的文件，缺点是有点慢
# RUN wget https://file.hankcs.com/hanlp/data-for-1.7.5.zip -O /usr/local/lib/python3.7/site-packages/pyhanlp/static/data-for-1.8.3.zip
# RUN wget https://file.hankcs.com/hanlp/hanlp-1.8.3-release.zip -O /usr/local/lib/python3.7/site-packages/pyhanlp/static/hanlp-1.8.3-release.zip

# 在构建期间主动去初始化依赖
RUN python3 ./install.py && \
    python3 ./unzipNltk.py

EXPOSE 8000

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52

docker-compose

这里需要注意的是可以把export FLASK_APP=app && gunicorn -t 300 -w 4 -b 0.0.0.0:8000 'app:create_app(“dev”)'注释掉
执行tail -f /dev/null，这样容器启动就会阻塞，然后进到docker中再执行该条命令，以确认该启动命令是否有误

version: "3.8"
services:
  allergies-flask:
    image: allergies:1.0
    restart: always
    container_name: "compose-allergies"
    volumes:
      - "./:/app:rw"
    command:
      - /bin/sh
      - -c
      - |
          export FLASK_APP=app && gunicorn -t 300 -w 4 -b 0.0.0.0:8000 'app:create_app("dev")'
          tail -f /dev/null
    ports:
      - "8191:8000"
    networks:
      - app_net

networks:
  app_net:

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22

Makefile

直接执行make会 执行all: download build up log

all: download build up log

# 下载pyhanlp依赖
download:
	chmod +x ./build.sh && /bin/bash ./build.sh install_lib

# 构建镜像
build:
	docker build -t allergies:1.0 .

# 拉起容器
up:
	docker compose up -d

# 删除容器
down:
	docker compose down

# 查看容器日志
log:
	docker compose logs -f allergies-flask

# 进入容器内部
exec:
	docker exec -it compose-allergies bash
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25

shell脚本

# 固定写法
#!/bin/sh

# pyhanlp data 依赖文件名称/版本  定义变量保存该字符串
pyhanlp_data=data-for-1.7.5.zip
# pyhanlp data 依赖文件下载地址 $提取变量中的值
pyhanlp_data_url=https://file.hankcs.com/hanlp/$pyhanlp_data

# pyhanlp hanlp 依赖文件名称/版本
pyhanlp_hanlp=hanlp-1.8.3-release.zip
# pyhanlp hanlp 依赖文件下载地址
pyhanlp_hanlp_url=https://file.hankcs.com/hanlp/$pyhanlp_hanlp

# 下载pyhanlp数据依赖(当然要先检查文件是否存在，默认在当前目录下查找)如果没有就执行下载命令 
function install_lib() {
    if [ ! -f $pyhanlp_data ];then
        wget $pyhanlp_data_url
    fi
    if [ ! -f $pyhanlp_hanlp ];then
        wget $pyhanlp_hanlp_url
    fi
}

# 提取makefile中的第一个参数 然后执行安装命令
if [ "$1" == "install_lib" ]; then
    install_lib
fi


1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29

直接启动make会依次执行 download build up log
这里先执行download 给build.sh脚本赋予可执行权限，然后启动该脚本

目录结构