Docker prune 清理资源：释放被 PyTorch 占用的磁盘空间
在 GPU 服务器上跑完几个 PyTorch 实验后，突然发现docker pull失败、系统响应迟缓，甚至训练任务无法启动——这八成不是代码的问题，而是磁盘快满了。更糟的是，你可能已经删了“不用的容器”，却发现/var/lib/docker依然占着几十 GB 空间。
这种情况在深度学习开发中太常见了。我们依赖 Docker + PyTorch-CUDA 镜像来快速搭建环境，但频繁构建、拉取、运行和中断实验的过程中，Docker 的分层机制会悄悄积累大量“看不见”的冗余数据：悬空镜像、未引用的中间层、废弃的构建缓存……它们像数字垃圾一样堆积，最终拖垮整个系统。
真正有效的解决方式，不是手动一个个删除容器或镜像，而是用docker system prune这类系统级清理命令，一次性精准回收所有无主资源。本文就从实战角度出发，结合 PyTorch 开发场景，讲清楚如何用好这个“清道夫”工具，避免陷入“明明删了东西却还是没空间”的窘境。
PyTorch 官方提供的 CUDA 镜像（比如pytorch/pytorch:2.7-cuda11.8-devel）本质上是一个高度集成的 Linux 容器模板。它封装了 Ubuntu 基础系统、NVIDIA CUDA 工具包、cuDNN 加速库、PyTorch 框架本身以及常用依赖（如 torchvision），让你无需折腾驱动兼容性就能直接调用 GPU 资源。启动时只需一条命令：
docker run -it --gpus all \ -p 8888:8888 \ -v $(pwd):/workspace \ pytorch/pytorch:2.7-cuda11.8-devel就能获得一个带 Jupyter Notebook 和完整 GPU 支持的交互式开发环境。这种便利的背后，代价是庞大的镜像体积——通常单个镜像就超过 5GB，若同时保留多个版本（v2.5、v2.6、v2.7），再加上构建自定义镜像产生的中间层，很快就会吃掉上百 GB 存储。
而问题在于，即使你停止并删除了一个容器，它的底层镜像仍然可能被保留在系统中，尤其是当你基于官方镜像做了微调再 build 新镜像时，Docker 的联合文件系统（如 overlay2）会为每一层操作生成新的读写层。这些中间产物不会自动清除，除非显式触发清理机制。
这时候，docker system prune就成了关键救星。
它不像docker rm或docker rmi那样需要指定 ID，而是通过扫描整个 Docker 引擎的状态，自动识别出那些“没有被任何运行中容器引用”的资源，并安全地移除它们。你可以把它理解为 Docker 内部的“垃圾回收器”。
最基本的用法是：
docker system prune这条命令会清理三类对象：
- 所有已停止的容器
- 所有 dangling（悬空）镜像（即没有标签且不被任何其他镜像引用的中间层）
- 所有未使用的网络
- 构建缓存中未被引用的部分
执行前会有确认提示，适合日常维护使用。
如果你已经完成一轮实验迭代，想彻底腾出空间拉取新版本镜像，可以升级到：
docker system prune -a这里的-a表示“all”，不仅清理悬空镜像，还会删除所有未被当前任何容器使用的镜像。这意味着如果你本地有旧版 PyTorch 镜像（比如 v2.5），但当前没有容器在运行它，它也会被一并清除。
这招特别适用于以下典型故障场景：
现象：尝试拉取新镜像时报错
failed to register layer: no space left on device
别急着扩容磁盘！先检查是不是 Docker 自身积压了太多历史残留。运行：
docker system df你会看到类似输出：
TYPE TOTAL ACTIVE SIZE RECLAIMABLE Images 6 1 18.3GB 15.7GB (85%) Containers 5 1 3.1GB 2.6GB (84%) Local Volumes 3 0 4.2GB 4.2GB (100%) Build Cache - - 9.8GB 9.8GB一眼就能看出可回收空间高达 30GB 以上。此时执行docker system prune -a，往往能立刻释放出惊人容量，无需重启服务，也不影响正在运行的任务。
不过要注意，prune -a是一把双刃剑。一旦执行，所有未被使用的镜像都会消失。如果某些旧版 PyTorch 镜像你还打算复用（比如用于复现实验结果），最好提前打上保护标签：
docker tag pytorch/pytorch:2.5-cuda11.7-devel myproject/pytorch:stable或者给关键镜像添加 label 标记：
docker image ls --filter "label=protected"然后配合过滤条件进行选择性清理：
docker system prune -a --filter "label!=protected"这样就能在自动化脚本中安全运行，避免误删重要资产。
除了镜像和容器，另一个常被忽视的“空间杀手”是构建缓存。特别是当你使用 Docker Buildx 或多阶段构建时，每一轮docker build都会在后台生成大量临时中间镜像和元数据。时间一长，这部分缓存可能比实际镜像还大。
针对性清理命令如下：
# 仅清理构建缓存 docker builder prune # 彻底清理，包括未使用的构建数据 docker builder prune --all建议将这类操作整合进 CI/CD 流水线的收尾阶段，或设置定时任务定期执行：
# 每日凌晨2点自动清理一次 0 2 * * * /usr/bin/docker system prune -af >> /var/log/docker-prune.log 2>&1加上-f参数可跳过交互确认，适合无人值守环境。
当然，预防永远胜于治疗。合理的存储设计也能大幅降低后期维护成本。例如：
- 将/var/lib/docker挂载到独立的大容量 SSD 分区，避免挤爆系统盘；
- 使用 LVM 或 ZFS 等支持快照和配额管理的文件系统，便于监控与隔离；
- 在团队协作环境中，建立镜像版本管理制度，避免随意拉取未知来源的镜像。
更有前瞻性的做法是引入监控体系。通过部署 Prometheus + cAdvisor，你可以实时观测 Docker 各类资源的使用趋势，设置磁盘占用阈值告警（如 >80% 触发通知），实现“未满先知”。
回到最初的问题：为什么用了 Docker 后反而更容易出现磁盘不足？答案其实很简单——正是因为它太方便了。
我们不再需要小心翼翼地共用一个 Python 环境，而是可以随心所欲地创建、销毁、重建容器。但这种自由也带来了资源管理上的惰性：很多人习惯性地“用完就关”，却忽略了底层存储并未真正释放。
尤其是在 PyTorch 这类涉及大规模数据处理和模型训练的场景下，每一次实验都可能产生数 GB 的中间产物。如果不建立规范的清理流程，几个月下来，服务器就会变成一个塞满旧镜像的“数字仓库”。
所以，掌握docker system prune不仅仅是学会一条命令，更是培养一种工程思维：在享受容器化带来的敏捷性的同时，也要对系统的长期健康负责。
下次当你准备开始新一轮模型调优之前，不妨先花一分钟运行一遍docker system df，看看你的 Docker 引擎里藏着多少“沉睡的空间”。也许你会发现，真正的瓶颈从来不在 GPU，而在那块被遗忘的磁盘角落。
