本文共 3539 字，大约阅读时间需要 11 分钟。
在文件拷贝时候，scp一个占磁盘空间300G大小（du命令的结果）左右的目录到另外一台机器上，du命令发现该目录占用的磁盘空间变大了，约330多G。为什么会多出来这30G呢？
分析可能原因：
一.原机器的block大小为1024k,新机器的block大小为4096k,可能是文件系统block大小引起的。拷贝的数据文件大概有1000个，文件块的影响也就是1000*4K=4M,而空间增大了约30G，所以不可能是原因一。二.有些文件存在空洞。空洞scp到新机器后，被填充，占用磁盘空间。实验：在本机上cp一个有空洞的文件，发现cp前后占用的磁盘大小未变，而scp到另一台机器后，空洞被填满，占用磁盘块变大。背景知识：ll和du –s读取的文件大小和占用磁盘空间数据来源struct stat { dev_t st_dev; /* device */ino_t st_ino; /* inode */mode_t st_mode; /* protection */nlink_t st_nlink; /* number of hard links */uid_t st_uid; /* user ID of owner */gid_t st_gid; /* group ID of owner */dev_t st_rdev; /* device type (if inode device) */off_t st_size; /* total size, in bytes */blksize_t st_blksize; /* blocksize for filesystem I/O */blkcnt_t st_blocks; /* number of blocks allocated */time_t st_atime; /* time of last access */time_t st_mtime; /* time of last modification */time_t st_ctime; /* time of last status change */};自己编写一个小C程序通过fstat函数，取得文件状态，st_size就是ll看到的文件大小，st_blksize是系统每次read,write等i/o的buff大小，通常和文件系统块大小一致，st_blocks是占用的文件系统的块数，这个块区别以文件系统的块，一般是512字节。Du命令读取st_blocks（du会根据命令参数转换）。实验过程：创建一个空洞文件file.hole。通过lseek将文件偏移量指针超过文件末尾。实验机器:block大小为4k.ll file.hole-rw-r--r-- 1 zhangfan zhangfan 16394 Jun 22 15:08 file.holedu -sh file.hole8.0K file.hole可以看到，空洞部分没有占用block.cp一个空洞文件cp file.hole file.hole.cpll file.hole.cp-rw-r--r-- 1 zhangfan zhangfan 16394 Jul 10 15:51 file.hole.cpdu -sh file.hole.cp8.0K file.hole.cptrace一下系统调用的过程read(3, "abcdefghij\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096write(4, "abcdefghij\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096read(3, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096lseek(4, 4096, SEEK_CUR) = 8192read(3, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096lseek(4, 4096, SEEK_CUR) = 12288read(3, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096lseek(4, 4096, SEEK_CUR) = 16384read(3, "ABCDEFGHIJ", 4096) = 10write(4, "ABCDEFGHIJ", 10) = 10read(3, "", 4096) = 0close(4) = 0close(3) = 0只write了有具体内容的块，空洞没有write,但是lseek是一直在变的，所以cp不会拷贝空洞。通过看cp的源码，可以看到cp的具体过程：1、 判断目标文件是否存在，如果存在则清空目标文件，如果不存在则创建目标文件2、根据目标文件的逻辑块大小，创建拷贝缓冲区3、判断源文件是否有空洞：文件大小／文件块大小 > 块数 ？4、读取源文件存放到缓冲区，每次读取一块5、在第3步中判断，如果存在文件空洞，则对缓冲区数据进行判断，如果缓冲区中的数据均为0，则认为该数据快为空洞，否则认为是正常文件数据6、如果数据块为空洞，则调用lseek，在目标文件中创建一个空洞；否则拷贝缓冲区数据到目标文件7、判断本次读取是否读到源文件的文件尾，如果是，则判断本次读取的是否是空洞，如果是空洞则在文件的最后写入""8、重复1 ~ 79、关闭目标文件、源文件Scp file.hole到另外一台机器Scp后的文件 ll file.hole-rw-r--r-- 1 zhangfan zhangfan 16394 Jul 10 15:57 file.holedu -sh file.hole20K file.hole再trace一下scp.read(3, "abcdefghij\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096write(6, "abcdefghij\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096read(3, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096write(6, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096read(3, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096write(6, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096read(3, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096write(6, "\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0\0"..., 4096) = 4096read(3, "ABCDEFGHIJ", 10) = 10空洞也被write了，所以du -s会变大 。cp对于稀疏文件的支持(sparse file)，是由选项控制的，--sparse=(auto|always|never)，默认是支持(auto)，具体请man。scp应该不支持稀疏文件，所以scp这样的文件，会被填充成0 ;不过，tar(-S选项)、rsync(也是-S)都是支持的，所有scp的时候可以跟他们配合着用。