k8s自动化运维八-如何清理docker存储的大文件

承接上文k8s自动化运维七

docker文件简介

• containers

  里面都是容器，每启动一个容器便会在这里记录

进到某一个容器目录中，可以看到容器的日志文件
1

如果文件比较大的话，就可以清空该文件
1

cat /dev/null > xxx-json.log
1

• image

默认里面只有一个overlay2目录，存储镜像管理数据的目录，以使用的存储驱动命名，这是Centos系统，使用的驱动为overlay2。

1、/var/lib/docker/image/overlay2/distribution

从远端拉到本地的镜像相关元数据
1
2
3
4
5

2、/var/lib/docker/image/overlay2/imagedb

镜像数据库
1
2
3

3、/var/lib/docker/image/overlay2/imagedb/content

每一个镜像都会配置digest，也就是镜像ID。Content目录里会看到一个sha256的目录，进入到该目录下，看到都是以镜像ID命名的文件，docker images看到的镜像ID的前12位就来自这个文件。

4、/var/lib/docker/image/overlay2/ layerdb
1
2
3
4
5

5、/var/lib/docker/image/overlay2/layerdb/ mounts
1

每启动一个容器，该目录都会将容器的container ID记录下来，当容器被停止了，container ID依旧存在，当容器被删除了，container ID才会被清除。

6、/var/lib/docker/image/overlay2/layerdb/sha256
1
2
3

只记录镜像的信息，不记录容器的信息，当镜像有添加或删除时，此目录的信息会有更新

7、/var/lib/docker/image/overlay2/repositories.json
1
2
3

记录了镜像的tag、镜像ID等信息
1

• network

docker的网关、容器的IP地址等信息
1

网关和网络的名称均与上面的配置文件里一致，可见上面的network目录就是记载着docker的网络信息。
1

• overlay2

  Docker存储驱动，常见的有overlay、overlay2、aufs

每启动一个容器就会有一个docker存储挂载，如上所示，他们是共用宿主机的存储，也就是这些docker存储的挂载除了挂载点不一样其他的都一样。所有容器都共用一个存储，当一个容器有数据变化，那么连接容器的所有存储的挂载信息都会更新产生变化。
1

可通过执行docker system prune 命令可用于清理磁盘，删除关闭的容器、无用的数据卷和网络，以及dangling镜像（即无tag的镜像）

查看磁盘使用情况

磁盘马上满了，

• 定位大文件

du -sh /* |sort -rn | head
1

这样一层一层查看

du -sh /var/lib/docker/* |sort -rn | head
1

就可以定位到这2个文件夹比较大

• 清理volumes应用日志

查看volumes文件

# 查看该目录下前N个大文件
du -am ./* | sort -nrk 1 | head -n 20
1
2

最终定位到./diff/app/logs/这个目录下的文件比较大

这个文件下是应用的日志目录,对应到pod容器里面的这些日志

然后把大的日志文件清空即可

# 这种方式把日志文件清空，不会影响docker的正常运行

cat /dev/null > xibaoxiao-bwy_info.log
1
2
3

• 清理containers容器日志

  1、查找占用空间最大的目录是属于哪个容器的

docker ps -q | xargs docker inspect --format '{{.State.Pid}}, {{.Name}}, {{.GraphDriver.Data.WorkDir}}' | grep "c1dc42ba3167ece0894405870176847e912afd9151a0adb77691ac51663b942f"
1

2、知道了是哪个容器之后，进入到该容器目录，其中若有容器日志大文件，清空即可