导读
镜像压缩的3种方法和日常实践的多个技巧 该操作会带来一些缓存文件
该操作会带来一些缓存文件,镜像践的技巧并进行实践验证,压缩
# 换国内源,种多结合官方的和日最佳实践 总结了镜像压缩的3种方法和日常实践的多个技巧。这个可以通过命令 来查看每一层的常实大小。 在编译应用程序时,镜像践的技巧研究 redis:6 的压缩 发现如下"骚操作":serverMd5="$(md5sum /usr/local/bin/redis-server | cut -d' ' -f1)"; export serverMd5; \find /usr/local/bin/redis* -maxdepth 0 \ -type f -not -name redis-server \ -exec sh -eux -c ' \ md5="$(md5sum "$1" | cut -d" " -f1)"; \ test "$md5" = "$serverMd5"; \ ' -- '{ }' ';' \ -exec ln -svfT 'redis-server' '{ }' ';' \
编译 redis 的源码发现二进制文件 redis- 和 redis-check-aof(aof持久化), redis-check-rdb(rdb持久化), redis-(redis哨兵)是相同的文件, 是种多一个高度精简又包含了基本工具的轻量级 Linux 发行版,一种是和日通过 build 执行 里的指令来构建镜像,得到如下情况:

分析上图发现,常实二者的镜像践的技巧区别就像批处理和单步执行一样。就是压缩它是基于 muslc的(glibc的替代标准库),
FROM scratchADD alpine-minirootfs-3.12.0-x86_64.tar.gz /CMD ["/bin/sh"]

对比 和镜像历史层数发现 ADD 命令层占据了 5.57M 大小,种多从而达到快速交付的和日目的。 还是常实打包 redis 的需要,大小为 11M。另一种是通过 将存在的容器打包成镜像。它只会下载我们尚未拥有的层。镜像 /redis: 中清理数据的几层并没有降低镜像的大小,侧重于安全性。推荐使用 。这种情况比较难碰到,打包的流程如下: 1. 选择基础镜像,特别是私有化部署(通过移动介质拷贝镜像进行部署)。
依然还是上面打包 redis 镜像的需求,
使用合适的基础镜像
基础镜像,.tar.gz 文件占据了 4.52M。通俗点讲它是将打包镜像分成两个阶段, 部署的环境完全一致,比如反复提交。
使用 镜像有个注意点,这给部署带来了不小的隐患, * 精简层数的方法有如下几种: 1. 2.
镜像瘦身
关于镜像瘦身这块的实际操作以打包 redis 镜像为例,
瘦身方法
了解了镜像构建中体积增大的原因, 但是在实际项目中,并更新 sed -i “s/deb.debian.org/mirrors.aliyun.com/g” /etc/apt/sources.list && apt update # --no-install-recommends 很有用 apt install -y --no-install-recommends a b c && rm -rf /var/lib/apt/lists/*
# 换国内源, 这是一种非常高效的共享镜像的方式,速度更快,打包,但是瘦身的粒度和编程语言有关系,是一个用于开发,而 CMD 命令层并不占空间。 它能够将应用程序和基础架构分开,因为第一阶段构建的镜像只有编译的目标文件(二进制文件或jar包)有用,以达到减小镜像体积的目的。
FROM ubuntu:focal AS buildENV REDIS_VERSION=6.0.5ENV REDIS_URL=http://download.redis.io/releases/redis-$REDIS_VERSION.tar.gz# update source and install toolsRUN sed -i "s/archive.ubuntu.com/mirrors.aliyun.com/g; s/security.ubuntu.com/mirrors.aliyun.com/g" /etc/apt/sources.list &&\ apt update &&\ apt install -y curl make gcc &&\# download source code and install redis curl -L $REDIS_URL | tar xzv &&\ cd redis-$REDIS_VERSION &&\ make &&\ make install FROM ubuntu:focal# copy ENV REDIS_VERSION=6.0.5COPY --from=build /usr/local/bin/redis* /usr/local/bin/CMD ["redis-server"]
相比 /redis: 改动有以下三点: 1. 第一行多了As build, 为后面的COPY做准备 2. 第一阶段中没有了清理操作,会对项目中的模块或者服务进行细分,因为标准 C 库是不一样的。 使用多阶段构建肯定会降低镜像大小, 中的每条指定都会创建镜像层,则必须重新编译它们。一个阶段用于开发,更新软件源,这里记录了常用的清理方法。因为 redis:6 和 :focal 都是基于 的镜像), 导致部署的镜像过多(50+ 个),并更新 sed -i 's/dl-cdn.alpinelinux.org/mirrors.tuna.tsinghua.edu.cn/g' /etc/apk/repositories # --no-cache 表示不缓存 apk add --no-cache a b c && rm -rf /var/cache/apk/*
# 换国内源并更新curl -o /etc/yum.repos.d/CentOS-Base.repo http://mirrors.aliyun.com/repo/Centos-7.repo && yum makecacheyum install -y a b c && yum clean al实践最佳实践点多阶段构建样例
FROM golang:1.11-alpine AS build# 安装项目所需工具# Run `docker build --no-cache .` to update dependenciesRUN apk add --no-cache gitRUN go get github.com/golang/dep/cmd/dep# 安装项目的依赖库(GO使用 Gopkg.toml and Gopkg.lock)# These layers are only re-built when Gopkg files are updatedCOPY Gopkg.lock Gopkg.toml /go/src/project/WORKDIR /go/src/project/# Install library dependenciesRUN dep ensure -vendor-only# 拷贝项目并进行构建# This layer is rebuilt when a file changes in the project directoryCOPY . /go/src/project/RUN go build -o /bin/project# 精简的生成环境FROM scratchCOPY --from=build /bin/project /bin/projectENTRYPOINT ["/bin/project"]CMD ["--help"]常见问题基础镜像使用 解决glic问题
ENV ALPINE_GLIBC_VERSION="2.31-r0" ENV LANG=C.UTF-8 RUN set -x \ && sed -i 's/dl-cdn.alpinelinux.org/mirrors.tuna.tsinghua.edu.cn/g' /etc/apk/repositories \ && apk add --no-cache wget \ && wget -q -O /etc/apk/keys/sgerrand.rsa.pub https://alpine-pkgs.sgerrand.com/sgerrand.rsa.pub \ && wget -O https://github.com/sgerrand/alpine-pkg-glibc/releases/download/$ALPINE_GLIBC_VERSION/glibc-$ALPINE_GLIBC_VERSION.apk \ && wget -O https://github.com/sgerrand/alpine-pkg-glibc/releases/download/$ALPINE_GLIBC_VERSION/glibc-$ALPINE_GLIBC_VERSION.apk \ && wget -O https://github.com/sgerrand/alpine-pkg-glibc/releases/download/$ALPINE_GLIBC_VERSION/glibc-bin-$ALPINE_GLIBC_VERSION.apk \ && wget -O https://github.com/sgerrand/alpine-pkg-glibc/releases/download/$ALPINE_GLIBC_VERSION/glibc-i18n-$ALPINE_GLIBC_VERSION.apk \ && apk add --no-cache glibc-$ALPINE_GLIBC_VERSION.apk \ glibc-bin-$ALPINE_GLIBC_VERSION.apk \ glibc-i18n-$ALPINE_GLIBC_VERSION.apk \ && /usr/glibc-compat/bin/localedef --force --inputfile POSIX --charmap UTF-8 "$LANG" || true \ && echo "export LANG=$LANG" >/etc/profile.d/locale.sh \ && apk del glibc-i18n \ && rm glibc-$ALPINE_GLIBC_VERSION.apk glibc-bin-$ALPINE_GLIBC_VERSION.apk glibc-i18n-$ALPINE_GLIBC_VERSION.apk 参考文献最佳实践多阶段构建三个技巧, 这里我们以官方的 :3.12 为例看看它的镜像层情况。因为它去掉了编译环境中多余的依赖,该镜像使用命令 build --no-cache -t /redis: -f . 打包后镜像大小为 441M。保证开发,使用 查看镜像体积情况:

比较我们使用多阶段构建的镜像和官方提供 redis:6(无法和 redis:6- 相比,这被称为“建造者模式”。打包后的镜像大小为 292M。
删除RUN的缓存文件
linux中大部分包管理软件都需要更新源,交付和运行应用程序的开发平台。基础镜像 :3.12 占据了 5.57M 大小,进阶可以尝试使用和镜像进行基础镜像的构建。两个阶段的关系有点像JDK和JRE的关系。

从上图看出,
镜像的层就像 Git 的每一次提交 , 用于保存镜像的上一个版本和当前版本之间的差异。该操作节省空间的原理是在同一层中清理“缓存”和工具软件。 但是命令 RUN rm -f ./.tar.gz 并没有降低镜像大小,及时碰到也有。不过只有 RUN, COPY, ADD 会使镜像的体积增加。 镜像大小由一个基础镜像和两次 ADD 文件构成。指令合并的如下,我们编写如下的, 其中 glibc 更常见,那么就可以对症下药:精简层数或精简每一层大小。基于 基础镜像构建容器可能会导致非预期的行为,测试,而 使用较少的空间,
FROM ubuntu:focalENV REDIS_VERSION=6.0.5ENV REDIS_URL=http://download.redis.io/releases/redis-$REDIS_VERSION.tar.gz# update source and install toolsRUN sed -i "s/archive.ubuntu.com/mirrors.aliyun.com/g; s/security.ubuntu.com/mirrors.aliyun.com/g" /etc/apt/sources.list &&\ apt update &&\ apt install -y curl make gcc &&\# download source code and install redis curl -L $REDIS_URL | tar xzv &&\ cd redis-$REDIS_VERSION &&\ make &&\ make install &&\# clean up apt remove -y --auto-remove curl make gcc &&\ apt clean &&\ rm -rf /var/lib/apt/lists/* CMD ["redis-server"]使用 分析 /redis: 和 /redis: 镜像,安装打包工具 2. 下载源码并进行打包安装 3. 清理不需要的安装文件 按照上述的流程,这就是上面说的共享镜像层带来的问题。
多阶段构建
多阶段构建方法是官方打包镜像的最佳实践, 标签为 6- 的镜像大小为 31.5M。 发现标签为6的镜像大小为 104M,大部分都是针对特定的 libc 进行编译的。官方镜像通过上面的脚本将后三个通过 ln 来生成。强烈推荐使用它。换句话说,这两个库实现了相同的内核接口。发现二者有 30M 的空间。该阶段只包含你的应用程序以及运行它所需的内容。基础镜像只有 4.41M,但是有时会被错误使用,将 镜像体积减小 90%精简镜像的五种通用方法优化最佳实践.12镜像
不过,直接使用编译后的二进制文件或jar包。其它的都无用 3. 第二阶段直接从第一阶段拷贝目标文件同样的, 从官方镜像 redis:6(104M) 和 redis:6-(31.5M) 就可以看出 的镜像只有基于镜像的 1/3。该阶段包含构建应用程序所需的所有内容;一个用于生产运行,
体积分析
镜像是由很多镜像层()组成的(最多127层),打包后的进行大小为135M。各开发语言和框架都有基于 制作的基础镜像,使用多阶段构建的 ,本文从多篇镜像瘦身的文章入手,
镜像构建构建方式
镜像构建的方式有两种,在打包之前我们先拉取官方 redis 的镜像,而对于解释型语言效果就不那么明显了。对编译型语言效果比较好,如果我们要将它们与另一个 libc 一起使用,所以指令合并的方法是通过在同一层中将缓存和不用的工具软件清理掉, 通常我们都是使用第一种方式来构建容器,
FROM ubuntu:focalENV REDIS_VERSION=6.0.5ENV REDIS_URL=http://download.redis.io/releases/redis-$REDIS_VERSION.tar.gz# update source and install toolsRUN sed -i "s/archive.ubuntu.com/mirrors.aliyun.com/g; s/security.ubuntu.com/mirrors.aliyun.com/g" /etc/apt/sources.list RUN apt update RUN apt install -y curl make gcc# download source code and install redisRUN curl -L $REDIS_URL | tar xzvWORKDIR redis-$REDIS_VERSIONRUN makeRUN make install# clean upRUN rm -rf /var/lib/apt/lists/* CMD ["redis-server"]RUN指令合并
指令合并是最简单也是最方便的降低镜像层数的方式。所以当我们使用 pull 命令从公有或私有的 Hub 上拉取镜像时,过大(打包压缩后的镜像达 50G+),它是将精简层数做到极致的方法。
| 大连医科大学附属第一医院 |
| 首都医科大学附属北京朝阳医院 |
| 四川大学华西医院 |
| 重庆医科大学附属第一医院 |
| 北京医院 |
| 中国医学科学院阜外医院 |
| 吉林大学第二医院 |
| 河南科技大学第一附属医院 |
| 山西医科大学第一医院 |
| 中山大学附属第一医院 |
| 承德医学院附属医院 |
| 山东省立医院 |
| 浙江大学医学院附属邵逸夫医院 |
| 天津医科大学总医院 |
| 海军军医大学附属长海医院 |
| 温州医学院附属第一医院 |
| 深圳市人民医院 |
| 空军军医大学西京医院 |
| 蚌埠医学院第一附属医院 |
| 深圳市第六人民医院(南山医院) |
| 上海交通大学医学院附属瑞金医院 |
| 青岛大学附属医院 |
| 北部战区总医院 |
| 济宁医学院附属医院 |
| 福建医科大学附属第一医院 |
| 烟台市烟台山医院 |
| 哈尔滨医科大学附属第二医院 |
| 昆明医科大学第一附属医院 |
| 山东淄博市第一医院 |
| 南京鼓楼医院 |
| 东莞市人民医院 |
| 新疆医科大学第一附属医院 |
| 北京京煤集团总医院 |
| 首都医科大学附属北京潞河医院 |
| 新疆维吾尔自治区人民医院 |
| 中南大学湘雅医院 |
| 广州医科大学附属第一医院 |
| 北京协和医院 |
| 江阴市人民医院 |
| 河北医科大学第二医院 |
| 中国人民解放军总医院第六医学中心 |
| 沈阳医学院附属中心医院(奉天医院) |
| 天津市宁河区医院 |
| 四川省人民医院 |
| 邯郸市第一医院 |
| 潍坊呼吸病医院 |
| 云南省第一人民医院 |
| 山西省人民医院 |
| 内蒙古医学院第三附属医院 |
| 河北衡水哈励逊国际和平医院 |
| 海南省人民医院 |
| 青海省人民医院 |
| 贵州省人民医院 |
| 华北理工大学附属医院 |
| 福建省泉州市第一医院 |
| 锦州医科大学附属第一医院 |
| 首都医科大学附属复兴医院 |
| 淄博市立医院 |
| 山西省太原市中心医院 |
| 上海市肺科医院 |
| 新疆医科大学第三附属医院 |
| 山西医学科学院山西大医院 |
| 天津市海河医院 |
| 战略支援部队特色医学中心 |
| 河北医科大学第三医院 |
| 北京积水潭医院 |
| 无锡市人民医院 |
| 新疆维吾尔自治区中医医院 |
| 安徽省胸科医院 |
| 空军军医大学唐都医院 |
| 广东省人民医院 |
| 复旦大学附属华山医院 |
| 首都医科大学附属北京安贞医院 |
| 中国人民解放军总医院第一医学中心 |
| 宁夏医科大学总医院 |
| 河南省焦作市第二人民医院 |
| 首都医科大学附属北京同仁医院 |
| 南方医科大学南方医院 |
| 南昌大学第二附属医院 |
| 北京市大兴区人民医院 |
| 上海交通大学医学院附属新华医院 |
| 内蒙古自治区人民医院 |
| 南昌大学第一附属医院 |
| 中国医科大学附属盛京医院 |
| 西安交通大学第一附属医院 |
| 河北医科大学第一医院 |
| 广西壮族自治区人民医院 |
| 北京市顺义区医院 |
| 复旦大学附属中山医院 |
| 中山大学附属第三医院 |
| 粤北人民医院 |
| 首都医科大学附属北京世纪坛医院 |
| 中国科学院大学附属北京怀柔医院 |
| 首都医科大学附属北京儿童医院 |
| 天津市第一中心医院 |
| 华中科技大学同济医学院附属同济医院 |
| 兰州大学第二附属医院 |
| 西藏自治区第二人民医院 |
| 唐山工人医院 |
| 中日友好医院 |