Docker(42)- 镜像原理之联合文件系统
前言
学习狂神老师的 Docker 系列课程,并总结
镜像是什么
- 镜像是一种轻量级、可执行的独立软件保,用来打包软件运行环境和基于运行环境开发的软件
- 他包含运行某个软件所需的所有内容,包括代码、运行时库、环境变量和配置文件
- 所有应用,都可以直接打包 docker 镜像,就可以直接跑起来
如何得到镜像
- 从远程仓库下载
- 别人拷贝给你
- 自己制作一个镜像 DockerFile
UnionFs (联合文件系统)
- Union文件系统(UnionFs)是一种分层、轻量级并且高性能的文件系统
- 他支持对文件系统的修改作为一次提交来一层层的叠加,同时可以将不同目录挂载到同一个虚拟文件系统下
- Union文件系统是 Docker 镜像的基础
- 可以通过分层来进行继承,基于基础镜像(没有父镜像),可以制作各种具体的应用镜像
- 特性:一次同时加载多个文件系统,但从外面看起来,只能看到一个文件系统,联合加载会把各层文件系统叠加起来,这样最终的文件系统会包含所有底层的文件和目录
Docker镜像加载原理
- Docker 的镜像实际上由一层一层的文件系统组成,这种层级的文件系统叫 UnionFS
- boots(boot file system)主要包含 bootloader 和 Kernel, bootloader 主要是引导加载 kernel, Linux 刚启动时会加 bootfs 文件系统,在 Docker 镜像的最底层是 boots,几乎不变
- 这一层与我们典型的 Linux/Unix 系统是一样的,包含 bootloader 和 Kernel
- 当 boot 加载完成之后,整个内核就都在内存中了,此时内存的使用权已由 bootfs 转交给内核,此时系统也会卸载 bootfs
- rootfs(root file system),在 bootfs之上,包含的就是典型 Linux 系统中的 /dev、/proc/bin、/etc 等标准目录和文件
- rootfs 就是各种不同的操作系统发行版,比如 Ubuntu, Centos 等等
平时我们安装进虚拟机的 CentOS 都是好几个G,为什么 Docker 这里才200M?
- 对于个精简的 OS , rootfs 可以很小,只需要包合最基本的命令,工具和程序库就可以了
- 因为底层直接用主机的 kernel,自己只需要提供 rootfs 就可以了
- 由此可见对于不同的 Linux 发行版, boots 基本是一致的, rootfs 会有差別,因此不同的发行版可以公用 bootfs
- 所以虚拟机启动是分钟级别,容器是秒级!
分层理解
下载镜像的时候看到一层层下载就是分层
思考:为什么Docker镜像要采用这种分层的结构呢?
- 最大的好处,我觉得莫过于资源共享了!
- 比如有多个镜像都从相同的 Base 镜像构建而来,那么宿主机只需在磁盘上保留一份 base 镜像,同时内存中也只需要加载一份 base 镜像
- 这样就可以为所有的容器服务了,而且镜像的每一层都可以被共享
- Already exists 代表宿主机已存在镜像所需的文件,所以不再需要下载,直接使用即可
- Downloading 代表宿主机没有所需的文件,所以需要下载,下载完之后就会存在宿主机,以后下载其他镜像时如果用到这些文件就可以直接拿来用,不用二次下载了
如何查看镜像分层?
docker inspect redis
能看到它分了六层,比如说第一层可能就是安装 centos,后面几层就是安装 redis 所需的缓解经
关于镜像分层的理解
- 所有的 Docker 镜像都起始于一个基础镜像层,其实就是 rootfs,像 Ubuntu、CentOS
- 当进行修改或添加新的内容时,就会在当前镜像层之上,创建新的镜像层
栗子
- 基于 Ubuntu Linux16.04 创建一个新的镜像,这就是新镜像的第一层
- 如果在该镜像中添加 Python包,就会在基础镜像层之上创建第二个镜像层
- 如果继续添加一个安全补丁,就会创健第三个镜像层
- 该镜像当前已经包含 3 个镜像层
- 现在可以把它再次打包成一个新的镜像(commit)提供给其他人下载,其他人 pull 下来之后就会有三层东西
重点
在添加额外的镜像层的同时,镜像始终保持是当前所有镜像的组合
下图中举了一个简单的例子,每个镜像层包含3个文件,而镜像包含了来自两个镜像层的6个文件
上图中的镜像层跟之前图中的略有区別,主要目的是便于展示文件
下图中展示了一个稍微复杂的三层镜像,在外部看来整个镜像只有6个文件,这是因为最上层中的文件7是文件5的一个更新版
这种情況下,上层镜像层中的文件覆盖了底层镜像层中的文件
这样就使得文件的更新版本作为一个新镜像层添加到镜像当中
存储引擎
- Docker 通过存储引擎(新版本采用快照机制)的方式来实现镜像层堆栈,并保证多镜像层对外展示为统一的文件系统
- Linux 上可用的存储引撃有 AUFS、 Overlay2、 Device Mapper、Btrfs 以及 ZFS
- 每种存储引擎都基于 Linux 中对应的文件系统或者块设备技术,井且每种存储引擎都有其独有的性能特点
- Docker 在 Windows上仅支持 windowsfilter 一种存储引擎,该引擎基于 NTFS 文件系统之上实现了分层和CoW
镜像层合并
- 下图展示了与系统显示相同的三层镜像
- 所有镜像层堆并合井,对外提供统一的视图
上面有查看 redis 镜像的 layer 是 6 层,跟上图差不多,6 个文件就是 6 个 layer
特点
- Docker 镜像都是只读的,当容器启动时,一个新的可写层加载到镜像的顶部!
- 这一层就是我们通常说的容器层,容器之下的都叫镜像层!
Docker(42)- 镜像原理之联合文件系统的更多相关文章
- docker容器技术基础之联合文件系统OverlayFS
我们在上篇介绍了容器技术中资源隔离与限制docker容器技术基础之linux cgroup.namespace 这篇小作文我们要尝试学习容器的另外一个重要技术之联合文件系统之OverlayFS,在介绍 ...
- Docker 10 镜像原理
参考源 https://www.bilibili.com/video/BV1og4y1q7M4?spm_id_from=333.999.0.0 https://www.bilibili.com/vid ...
- docker 10 docker的镜像原理
镜像是什么? 镜像是一个轻量级,可执行的软件包,用来打包运行环境和基于运行环境开发的软件包,它包含某个软件运行环境的所有内容.包括代码,运行时的库,配置文件和环境变量 UnionFs(联合文件系统) ...
- docker学习笔记-03:docker的镜像原理
镜像是一种轻量级.可执行的独立软件包,用来打包软件运行环境和基于运行环境开发的软件.它包含运行某个环境所需的所有内容,包括代码.库.环境变量和配置文件. 一.镜像是什么 (一).联合文件系统(Unio ...
- docker命名空间、控制组及联合文件系统概念
基本架构 命名空间 控制组 联合文件系统 docker底层依赖的核心技术主要包括操作系统的命名空间(Namespace).控制组(Control Groups).联合文件系统(Union File S ...
- Docker基础修炼2--Docker镜像原理及常用命令
通过前文的讲解对Docker有了基本认识之后,我们开始进入实战操作,本文先演示Docker三要素之镜像原理和相关命令. 本文的演示环境仍然沿用上一篇文章在本地Centos7中安装的环境,如果你本地没有 ...
- docker 操作镜像的基本操作
以安装mysql为例 1.拉取镜像 docker pull mysql 错误的启动 [root@localhost ~]# docker run --name mysql01 -d mysql 42f ...
- Docker容器的原理与实践 (下)
欢迎访问网易云社区,了解更多网易技术产品运营经验. Docker原理分析 Docker架构 镜像原理 镜像是一个只读的容器模板,含有启动docker容器所需的文件系统结构及内容Docker以镜像和在镜 ...
- Docker 03 镜像命令
参考源 https://www.bilibili.com/video/BV1og4y1q7M4?spm_id_from=333.999.0.0 https://www.bilibili.com/vid ...
随机推荐
- IO多路复用详解
假如你想了解IO多路复用,那本文或许可以帮助你 本文的最大目的就是想要把select.epoll在执行过程中干了什么叙述出来,所以具体的代码不会涉及,毕竟不同语言的接口有所区别. 基础知识 IO多路复 ...
- UE4点选源码分析
在UE插件开发中,时常会用到场景预览窗口的功能,也经常会有点选场景里的物体而同步改变工具界面的需求,网上教程多为讲解如何打开一个预览界面.在最近的一次需求开发中,我粗读了关卡编辑器和蓝图编辑器的Vie ...
- Kafka原理笔记
1.什么是kafka? Kafka是一种分布式的,基于发布/订阅的消息系统(消息队列). 2.为什么要用kafka? 当业务逻辑变得复杂,数据量也会越来越多.此时可能需要增加多条数据线,每条数据线将收 ...
- 深入理解Https如何保证通信安全
作为一名ABC搬运工,我相信很多人都知道Https,也都知道它是用来保证通信安全的,但是如果你没有深入了解过Https,可能并不知道它是如何保证通信安全的.我也是借着这次机会,和大家分享下我深入了解的 ...
- 为什么npm install 经常失败
Hello 您好,我是大粽子.深耕线上商城的攻城狮(程序员)一枚. 前言 这段时间真的是忙,最近能抽时间搞搞大家在自己环境中遇到的各种问题了,我呢就是见不得我的代码在你的电脑运行不起来的.就像姜子牙睡 ...
- putty编译过程
在Win7上用Visual Studio编译putty源代码. 安装vs2005,只安装c++和.net framework sdk即可: 将putty-src.zip解压到e:\MyDoc\VSPr ...
- MySQL学习07(规范化数据库设计)
规范化数据库设计 当数据库比较复杂时我们需要设计数据库 糟糕的数据库设计 : 数据冗余,存储空间浪费 数据更新和插入的异常 程序性能差 良好的数据库设计 : 节省数据的存储空间 能够保证数据的完整性 ...
- Git出错:“Please make sure you have the correct access rights and the repository exists.”
此问题是需要重置ssh密钥 解决步骤如下: 1.重置用户名和邮箱: 打开Git Bash 进入Git命令,输入以下命令 git config --global user.name "你的用户 ...
- miniFTP项目集合
项目简介 在Linux环境下用C语言开发的Vsftpd的简化版本,拥有部分Vsftpd功能和相同的FTP协议,系统的主要架构采用多进程模型,每当有一个新的客户连接到达,主进程就会派生出一个ftp服务进 ...
- SQL 练习29
查询课程名称为「数学」,且分数低于 60 的学生姓名和分数 SELECT Student.Sname,Course.Cname,SC.score FROM Student,Course,SC WHER ...