本文节选自这里,原文以mysql innodb系统为例,介绍了数据经过的各层级的buffer和cache,其它系统也有相似的原理,摘录于此. 3.  VFS层 该层的缓冲都放在主机内存中,它的目的主要是在操作系统层缓冲数据,避免慢速块设备读写操作影响了IO的响应时间. 3.1.  细究O_DIRECT/O_SYNC标签 在前面redo log buffer和innodb buffer pool的讨论中涉及到很多数据刷新和数据安全的问题,我们在本节中,专门讨论O_DIRECT/O_SYNC标签

linux初学者-磁盘分区方式篇 一般的计算机都会采用mbr分区方式,这种分区方式只能够建立四个主分区,如果还需要或更多的分区,就需要将其中一个主分区建立成一个扩展分区,在里面建立逻辑分区,这些分区信息都记录在mpt主分区表中. mbr这种分区方式只可以对最大2T的磁盘进行分区,并且只能设置四个主分区,这在企业中是远远不够的,所以需要另外一种分区方式. 在linux系统中,默认的分区记录方式为doc,如果将doc的分区记录方式改为gpt,则可以增加至128个主分区,可以划分18EB的空间. 通过

一.硬盘的组成零件扇区 磁道 磁盘容量 磁盘分区 简介 硬盘由容量.柱面数.磁头数.扇区数 C/H/S, Cylinder, Head, Sector(柱面/磁头数/扇区数) 1.磁头数表示硬盘总共有几个磁头,也就是有几面盘片,最大为255 2. 柱面数表示硬盘每一面盘片上有几条磁道,最大为1023 3. 扇区数表示每一条磁道上有几个扇区,最大为63.每个扇区一般是512个字节 磁盘容量计算: 255×1023×63×512/1048576＝ 8024MB ( 1M＝ 1048576Bytes

Linux:就是一组软件,一套操作系统=核心+系统呼叫接口层. 1.操作系统 操作系统 = 核心(内核) + 系统呼叫(接口) 操作系统其实也是一组程序,重点在于管理计算机的所有活动以及驱动系统中的所有硬件. 初识操作系统,我们从一张图片开始: 核心:即是我们通常所说的操作系统内核,其主要负责整个计算机系统相关的资源分配与管理,可归纳为以下几大核心功能 程序管理:程序资源分配及调度执行等管理. 内存管理:内存的控制与使用. 文件系统管理:文件格式支持,数据输入/输出等等. 硬件驱动管理:驱动硬件

Linux文件设备 要理解Linux,首先要理解Linux文件结构 在Linux操作系统中,几乎所有的设备都位于/dev目录中 名称 作用 位置 SATA接口 电脑硬盘接口 /dev/sd[a-p] U盘 可移动设备 /dev/sd[a-p] Virtio接口 提供虚拟化 /dev/vd[a-p] 软盘驱动器 软驱,逐渐淘汰 /dev/fd[0-7] 打印机 提供打印能力 /dev/lp[0-2] (25针打印机)  /dev/usb/lp[0-15] (USB接口) 鼠标 连接鼠标 /dev/

1. Linux磁盘及文件系统管理 1.1. 基本概念: 1.1.1. 磁盘接口类型: IDE(ata):并口,133MB/s,设备/dev/hd[a-z] SCSI:并口,Ultrascsi320, 320MB/S, UltraSCSI640, 640MB/S,设备/dev/sd[a-z] 宽带:16-1 窄带:8-1 SATA:串口,6gbps,设备/dev/sd[a-z] SAS:串口,6gbps,设备/dev/sd[a-z] USB:串口,480MB/s,设备/dev/sd[a-z] 并

在网络系统中,磁盘和文件系统管理是两个非常基本.同时也是非常重要的管理任务,特别是文件系统管理,因为它与用户权限和整个网络系统的安全息息相关.本次博文的主题是关于Linux系统中磁盘分区.格式化及挂载,下次博文我们再详细讨论文件系统管理. 在操作系统中,磁盘管理属于设备管理的范畴.一块硬盘安装到主机之后称为 裸设备, 若要能够在Linux系统中使用必须对其进行如下步骤: 分区=>格式化(创建文件系统)=>挂载 我们先来谈谈Linux系统中的设备类型. 一.Linux系统中的设备类型: Linu

本文来自:沃趣科技 http://www.woqutech.com/?p=1459 1.  概述 前面很多大侠都分享过MySQL的InnoDB存储引擎将数据刷新的各种情况.我们这篇文章从InnoDB往下,看看数据从InnoDB的内存到真正写到存储设备的介质上到底有哪些缓冲在起作用. 我们通过下图看一下相关的缓冲: 图 1 innodb all buffers 从上图中,我们可以看到,数据InnoDB到磁盘需要经过 InnoDB buffer pool, Redo log buffer.这个是In

http://hatemysql.com/?p=503 1.  概述 前面很多大侠都分享过MySQL的InnoDB存储引擎将数据刷新的各种情况.我们这篇文章从InnoDB往下,看看数据从InnoDB的内存到真正写到存储设备的介质上到底有哪些缓冲在起作用. 我们通过下图看一下相关的缓冲: 图 1 innodb all buffers 从上图中,我们可以看到,数据InnoDB到磁盘需要经过 InnoDB buffer pool, Redo log buffer.这个是InnoDB应用系统本身的缓冲.

磁盘分区 一.磁盘结构 先来看看老磁盘 1)磁头(head):不解释 2)扇区(sector):磁盘的最小存储单位,大小为512bytes或者4k 3)磁道(trcack):扇区组成的一个圆 4)柱面(cylinder):所有盘面上的同一个磁道 磁盘容量计算:h*c*s*512 磁盘的第一个扇区组成: 1)主引导分区(Master Boot Record,MBR):可安装引导加载程序的地方,446bytes 2)分区表(partition table):记录了整块硬盘的分区状况,64bytes

http://hatemysql.com/?p=503 1.  概述 前面很多大侠都分享过MySQL的InnoDB存储引擎将数据刷新的各种情况.我们这篇文章从InnoDB往下,看看数据从InnoDB的内存到真正写到存储设备的介质上到底有哪些缓冲在起作用. 我们通过下图看一下相关的缓冲: 图 1 innodb all buffers 从上图中,我们可以看到,数据InnoDB到磁盘需要经过 InnoDB buffer pool, Redo log buffer.这个是InnoDB应用系统本身的缓冲.

如何格式化磁盘.给磁盘分区以及挂载,参考我的另一篇博客: https://www.cnblogs.com/mediocreWorld/p/11123786.html 博客中有一个格式化分区的命令: mkfs -t ext4 -c /dev/sdb6, 可以用这个命令代替 mkfs.ext4 /dev/sdb6 还有其中的一个命令,设置开机自动挂载磁盘:echo "/dev/sdb6 /data02 ext4 defaults 0 0" >> /etc/fstab ,扩展一下

主要步骤:将磁盘设置为LVM类型,并在这四个分区上创建物理卷.卷组和逻辑卷,最后将逻辑卷挂载.电脑使用Windows10 企业版 LTSC 操作系统.虚拟机使用VMware15.5 pro . 1.安装好我们的虚拟环境VMware(选择VMware15.5.0 pro) 2.选择Linux镜像文件(这里选择CentOS 7的版本) 3.在VMware中添加虚拟机:按照VMware创建虚拟机的引导操作.在选择操作系统安装镜像时,"安装来源"选择"稍后安装操作系统"即可

官方文档的地址在:https://thanos.io/tip/components/receive.md/ 一开始以为落盘的时间间隔是:--tsdb.retention=15d 实际测试中发现,thanos receiver的落盘时间是2小时,上面的配置看起来只是tsdb文件在本地磁盘保留的时间. 最后发现以下配置有效: tsdb.min-block-duration=10m tsdb.max-block-duration=10m 如何知道tsdb落盘的时间间隔是多少呢?通过10909端口的数据

如何使用fdisk和parted分区工具来进行硬盘分区,下面我来说一下在Linux系统中这两种硬盘分区工具的使用方法:     ----------fdisk分区工具----------        在我的另一篇文章里已经说过了在Linux系统中硬盘分区的概念了(http://blog.chinaunix.net/u3/112561/showart_2230401.html),所以在这里我就不多说了,有不懂的可以看看那篇 一..下面来介绍fdisk分区工具的命令格式:     fdisk是传统

之前已经写过df和fdisk的区别了,df可以显示当前已经挂载的磁盘分区,df -T可以额外显示文件系统类型 fdisk -l可以显示出所有挂载未挂载的分区,但不显示文件类型 在我的虚拟机上有一块分配了40G的硬盘但未使用,使用fdisk -l 对于40G的磁盘就是只显示了 Disk /dev/sdb 40G,并未有对应的Device, 接下来就是对其分区并挂载 1.fdisk /dev/sdb command(m for help):n 接下来一路默认,第一次分区选了p(primary par

磁盘分区使用fdisk命令,该命令仅root有使用权限. 磁盘分区的一般步骤: 1.首先用df命令查看设备名 df -h; 2.fdisk /dev/sda; <== 按m显示help d:删除一个分区 n:创建一个分区 <== 需要指定起始的柱面编号以及分区的大小 p: 打印分区表 q:不保存退出 w:保存退出(重启才能生效,也可以使用partprobe命令而不用重启) 3.新增分区时的注意事项: A.SATA硬盘最多支持15号分区,IDE最多支持63号分区. B.fdisk无法处理超过2T

前面学习了linux的用户管理 ,感觉是不是多lnux的多用户多任务的系统感觉十分了解了,但是其实并不然的.你还需要了解更多.接下来给大家分享的是 在vmware中添加硬盘创建分区,然后挂载到指定目录. 记住永远不要放弃自己正在追求的东西,即使有可能会追不到,也要享受其中的乐趣. 一.vmware中添加硬盘 首先大家要先安装 一个vmware虚拟机,相信大部分的人要学习linux都会使用到这个工具,所以这里我就不在介绍vmware了.进入正题 第一步:进入指定linux系统在vmware的设置

一般服务器都有多个硬盘分区,在重启后,这些分区的逻辑位置加载时可能会发生变动,如果使用传统的设备名称(例如:/dev/sda)方式挂载磁盘,就可能因为磁盘顺序变化而造成混乱. Linux环境中每个Block Device都有一个全局唯一的UUID,可以标识这个设备,我们可以在fstab中使用UUID替换设备名称,这样就不会产生上述混乱的情况了. 1.以sdb1为例,首先使用lsblk命令可以清晰的获取全局的块设备布局 2.然后,使用blkid命令可以获取设备的UUID.复制记下sdb1的UUID

选择与Linux搭配的主机配置 CPU  只要不是老旧到让你的硬件系统死机的都能够支持 RAM 内存越大越好,内存的重要性要比CPU还要高,至少512MB Hard Disk 由于数据量与数据的访问频率不同,对硬盘的要求不同 VGA 对于不需要Xwindow的服务器来说,显卡算是不重要的组件,如果需要Xwindow系统.显卡最好能够拥有32MB以上的内存容量 Network Interface Card 网卡是服务器上最重要的组件了 各硬件设备在linux中的文件名(Linux系统中,每个设备都