dd命令

1、Linux 中用 dd 命令来测试硬盘读写速度

dd命令是一个非常强大的命令，对于一些比较底层的问题，使用dd命令往往可以得到出人意料的效果。我们可以用它来测试磁盘的读写性能。 https://blog.csdn.net/menogen/article/details/38059671

1-1、dd如何绕开cache

如果要规避掉文件系统cache,直接读写,不使用buffer cache，需做这样的设置 iflag=direct,nonblock oflag=direct,nonblock iflag=cio oflag=cio direct 模式就是把写入请求直接封装成io 指令发到磁盘 非direct 模式，就把数据写入系统缓存，然后就认为io 成功，并由操作系统决定缓存中的数据什么时候被写入磁盘

1. time有计时作用，dd用于复制，从if读出，写到of；
2. if=/dev/zero（产生字符）不产生IO，因此可以用来测试纯写速度；
3. 同理of=/dev/null（回收站、无底洞）不产生IO，可以用来测试纯读速度；
4. 将/tmp/test拷贝到/var则同时测试了读写速度；
5. bs是每次读或写的大小，即一个块的大小，count是读写块的数量。

命令结尾添加oflag=direct将跳过内存缓存，添加oflag=sync将跳过hdd缓存。

2、对于U盘测试

4、测试同时读写能力 time dd if=/dev/sdb of=/testrw.dbf bs=4k 在这个命令下，一个是物理分区，一个是实际的文件，对它们的读写都会产生IO（对/dev/sdb是读，对/testrw.dbf是写），假设它们都在一个磁盘中，这个命令就相当于测试磁盘的同时读写能力。

5、测试纯写入性能 dd if=/dev/zero of=test bs=8k count=10000 oflag=direct

6、测试纯读取性能 dd if=test of=/dev/null bs=8k count=10000 iflag=direct

综上可知：肯定纯读写不切合实际。 https://www.cnblogs.com/sylar5/p/6649009.html

3、附上本人实战中代码

测试U盘写能力
dd if=/home/write.zip of=/media/mnt/write.zip oflag=direct

测试U盘读能力
dd of=/home/write.zip if=/media/mnt/write.zip iflag=direct

测试纯写入能力
dd if=/dev/zero of=test bs=376M count=1 oflag=direct

测试纯读取能力
dd if=test of=/dev/null bs=376M count=1 iflag=direct

注意需要每次拔插一次U盘

对于U盘写入的时候sync和direct基本都是在17MB/s左右，没有看出太大的区别。

cp命令有缓存功能，即使U盘拔插了也无法准确测试。 发现硬盘使用sync，U盘使用direct比较准确。 告知只有测试写能力时才需要oflag参数（未验证）

4、dd命令有时候不适用

dd if=/dev/zero of=test bs=1024M count=1 oflag=direct
dd if=test of=/dev/null bs=1024M count=1 iflag=direct

发现uos系统在处理这种空字符时确实拷贝速度过于迅速（直接复制粘贴拷贝），但是拷贝真实文件是正常的，因此不能使用这种命令来进行测试速度。

4、生成文件大小和实际占空间大小一样的文件

dd if=/dev/zero of=8M.txt bs=8M count=1
dd if=/dev/zero of=20G.txt bs=1G count=20

注意：一定需要count参数，否则会创造一个无限大的文件。 bs=1G表示每一次读写1G数据，count=20表示读写20次，这样就指定了生成文件的大小为20G。bs参数还可以进一步细分为ibs和obs两种，为读操作与写操作分别指定不同的Buffer大小。

6、生成文件大小固定，但实际不占空间命令

dd if=/dev/zero of=1G.txt bs=1M seek=1000 count=0

[root@ubuntu0006:/] #dd if=/dev/zero of=1G.txt bs=1M seek=1000 count=0
记录了0+0 的读入
记录了0+0 的写出
0 bytes copied, 0.00012465 s, 0.0 kB/s
[root@ubuntu0006:/] #ll -h 1G.txt
-rw-r--r-- 1 root root 1000M 12月  5 20:57 1G.txt
[root@ubuntu0006:/] #du -h 1G.txt
0       1G.txt
[root@ubuntu0006:/] #dd if=/dev/zero of=2G.txt bs=1G count=2
记录了2+0 的读入
记录了2+0 的写出
2147483648 bytes (2.1 GB, 2.0 GiB) copied, 10.0483 s, 214 MB/s
[root@ubuntu0006:/] #ll -h 2G.txt
-rw-r--r-- 1 root root 2.0G 12月  5 20:57 2G.txt
[root@ubuntu0006:/] #du -h 2G.txt
2.1G    2G.txt

这里用了一个新的命令seek，表示略过1000个Block不写（这里Block按照bs的定义是1M），count=0表示写入0个Block。用ls(查看文件大小)命令看新生成的文件，大小可以看出是1000M。但是再用du（查看文件占用空间）一看，实际占用硬盘大小只有0M。

7、对比命令两种写法的创建速度

[root@ubuntu0006:/media/vdb/study] #dd if=/dev/zero of=4000MBfile bs=1M count=4000
记录了4000+0 的读入
记录了4000+0 的写出
4194304000 bytes (4.2 GB, 3.9 GiB) copied, 32.2885 s, 130 MB/s
[root@ubuntu0006:/media/vdb/study] #dd if=/dev/zero of=4000MBfile bs=4000M count=1
记录了0+1 的读入
记录了0+1 的写出
2147479552 bytes (2.1 GB, 2.0 GiB) copied, 19.9645 s, 108 MB/s
[root@ubuntu0006:/media/vdb/study] #dd if=/dev/zero of=4000MBfile bs=2000M count=2
记录了2+0 的读入
记录了2+0 的写出
4194304000 bytes (4.2 GB, 3.9 GiB) copied, 27.9118 s, 150 MB/s
[root@ubuntu0006:/media/vdb/study] #getconf ARG_MAX
2097152

2097152 * 1024 - 2147479552 = 4096 另外由于系统块大小的限制，因此无法一次性直接创建一个超过最大块的文件，需要count参数多次读写。 两者速度相差不太大，本来每次创建的时间波动还是挺大的，如：

[root@ubuntu0006:/media/vdb/study] #dd if=/dev/zero of=4000MBfile bs=4000M count=1
记录了0+1 的读入
记录了0+1 的写出
2147479552 bytes (2.1 GB, 2.0 GiB) copied, 13.5828 s, 158 MB/s

8、另外两个创建文件的命令

fallocate -l 4000M 4000MBfile
truncate -s 4000M 4000MBfile

9、探究dd命令创建的文件内容

root@debian-hankin:wwg# dd if=/dev/zero of=4000MBfile bs=1M count=4
4+0 records in
4+0 records out
4194304 bytes (4.2 MB) copied, 0.00422733 s, 992 MB/s
root@debian-hankin:wwg# wc -l 4000MBfile
0 4000MBfile
root@debian-hankin:wwg# ll -h
total 4.1M
-rw-r--r--  1 root root 4.0M Mar  7 10:05 4000MBfile
drwxr-xr-x 27 root root 4.0K Mar  5 14:43 debians
root@debian-hankin:wwg# cat 4000MBfile
root@debian-hankin:wwg# cat 4000MBfile | wc
      0       0 4194304
root@debian-hankin:wwg# tail -n 100 4000MBfile >> hj
root@debian-hankin:wwg# ll -h
total 8.1M
-rw-r--r--  1 root root 4.0M Mar  7 10:05 4000MBfile
drwxr-xr-x 27 root root 4.0K Mar  5 14:43 debians
-rw-r--r--  1 root root 4.0M Mar  7 10:07 hj
root@debian-hankin:wwg# tail 4000MBfile
root@debian-hankin:wwg# cat 4000MBfile >> jh
root@debian-hankin:wwg# ll -h
total 13M
-rw-r--r--  1 root root 4.0M Mar  7 10:05 4000MBfile
drwxr-xr-x 27 root root 4.0K Mar  5 14:43 debians
-rw-r--r--  1 root root 4.0M Mar  7 10:07 hj
-rw-r--r--  1 root root 4.0M Mar  7 10:07 jh