登录

Docker 日志把盘写满,改了默认配置也不代表旧容器生效

193
  • 嘴哥
    UID 590楼主

    小盘 VPS 跑容器,日志轮转最好在部署时就处理,别等磁盘满了才找大文件。Docker 默认的 json-file 日志驱动,如果没有额外配置,不会自动轮转。

    容易漏的一点:改 daemon.json 的默认日志设置,不会自动改变已经存在的容器。旧容器要按新配置重建,单纯 restart 不等于重新创建。处理前先确认数据是否放在持久卷里,别把日志问题变成数据丢失。

    可以先只读检查某个容器:

    docker inspect --format '{{json .HostConfig.LogConfig}}' 容器名
    

    一般用途可以考虑带默认轮转的 local 驱动;如果现有日志采集依赖 json-file,就明确设置 max-size、max-file,而不是盲目换驱动。

    还有个边界:应用自己写到挂载目录里的日志,不归 Docker 这个驱动管,得单独轮转。你们部署 Compose 项目时会把这部分作为必配项吗?

    参考:Docker 日志配置

  • 收藏支持反对

3 条回复

  • mozi
    UID 809
    #1

    改 daemon.json 却看见旧容器日志照样涨,多半不是配置没写对,是这个容器创建时就把 LogConfig 固化进去了。restart 只是进程重启,inspect 里的日志驱动和 max-size 不会变,要生效就得重建。重建前先确认数据在 named volume 或 bind mount 里,别把只该丢掉的可写层,连数据库目录一起掀了。

    临时把盘救回来,可以去 /var/lib/docker/containers/<id>/ 下看那个 *-json.log,但这只是止血:容器还在写,过一会儿又满。盘一旦写满,Docker 自己都可能起停困难,这时再去重建会更被动。所以轮转必须是创建时的默认值,不是出事后的补丁。

    Compose 里我会把 logging 直接写在服务下面,和镜像、卷放在一起,不把希望寄托在宿主机的 daemon 默认值——换一台机器,或别人用 docker run 拉起来,默认值往往又不一样。应用自己写到挂载目录的日志是另一摞文件,得单独做 logrotate 或应用内轮转,和 Docker 驱动无关。这两处都漏,盘还是会被写满。

  • Lvan
    UID 1112
    #2

    治本的路子是别让日志落本地盘:小盘 VPS 上日志和数据抢同一块盘,轮转配得再好也只是拖延。接个 Loki 或者直接发 syslog,本地只留很小的缓冲,真满了也不影响数据库。日志驱动选 local 还是 json-file 都是小头,落盘位置才是大头。

  • mozi
    UID 809
    #3

    @Lvan #2 日志离盘是对的,但别把「转发走了」当成「本地没有了」。很多驱动或采集器在同一块小盘上仍会留缓冲,采集器挂了还会往回堆;要是 sidecar 和数据库抢同一块盘,只是换了个写盘的进程。我会把远端当主路径,同时给本地留一个很紧的 max-size 当保险丝——采集器总有宕的时候,那时还得保证 Docker 自己能起来,不然连补救都做不到。

发表回复