栏目分类:
子分类:
返回
名师互学网用户登录
快速导航关闭
当前搜索
当前分类
子分类
实用工具
热门搜索
名师互学网 > IT > 系统运维 > 运维 > Linux

文件系统写入100G文件需要多久

Linux 更新时间: 发布时间: IT归档 最新发布 模块sitemap 名妆网 法律咨询 聚返吧 英语巴士网 伯小乐 网商动力

文件系统写入100G文件需要多久

这里面的

1、文件大小(SIZE):119000152(单位字节);

2、块(Blocks ):232424(通常的 Linux一个块大小为 512 字节,也就是一个扇区的大小)

文件系统 ,简单理解就是来存数据的一个容器,本质和仓库没有啥区别,只不过文件系统存储的是数据。

机械硬盘的写入速度和读写速度一般约为120MB/S,500MB/s是usb接口的最大速度,机械硬盘能达到200MB/s的速度都十分优秀了,大部分都是100MB/s~150MB/s 。SATA协议的固态硬盘速度约为500MB/S,NVMe协议(PCIe 3.0×2)的固态硬盘速度约为1800MB/S,NVMe协议(PCIe 3.0×4)的固态硬盘速度约为3500MB/S。

按机械硬盘的写能力能 150 M/s,copy 一个 100G 的文件至少要 682 秒 ( 100 G/ 150 M/s ),也就是 11 分钟。

所以通常要是导出或是导入100G文件都会超过机械硬盘写入速度,具体多久还需要代码和查询数据量来定。

fdisk -l         #查看block size


iostat -d -k 1 10 
#d 表示,显示设备(磁盘)使用状态;

#-k某些使用block为单位的列强制使用Kilobytes为单位;

#1 10表示,数据显示每隔1秒刷新一次,共显示10次。


写文件流程:

    先写数据:数据先按照 Block 粒度存储到磁盘的各个位置;

    再写元数据:然后把 Block 所在的各个位置保存起来,即inode;

读文件流程则是:

    先读inode,找到各个 Block 的位置;

    然后读数据,构造一个完整的文件,给到用户;

文件 size 只是 inode 里面的一个属性,实际物理空间占用则是要看用户数据放了多少个 block ,没写数据的地方不用分配物理block块。

这样的文件其实就是稀疏文件, 它的逻辑大小和实际物理空间是不相等的。 

文件系统为什么和实际物理空间不同?

    首先,最关键的是把磁盘空间切成离散的、定长的 block 来管理;

    然后,通过 inode 能查找到所有离散的数据(保存了所有的索引);

    最后,实现索引块和数据块空间的后分配;

转载请注明:文章转载自 www.mshxw.com
本文地址:https://www.mshxw.com/it/740479.html
我们一直用心在做
关于我们 文章归档 网站地图 联系我们

版权所有 (c)2021-2022 MSHXW.COM

ICP备案号:晋ICP备2021003244-6号