1. dd介绍
dd是UNIX和Linux系统自带的工具，能够以操纵裸设备的方式完成本地磁盘之间的高速复制，跨网络数据复制，以及制作磁盘镜像等功能。另外dd还能生产固定大小的文件，以很高的速度写入磁盘。这就为存储测试提供了一个较好的手段，我们可以利用dd生成许多小文件来测试存储的吞吐量（IOPS）指标， 而利用dd生成数个大文件来测量存储系统带宽（MB/s）。
2. 参数
1. if=file    输入文件名，缺省为标准输入。即指定源文件。<if=inputfile>
2. of=file    输出文件名，缺省为标准输出。
3. ibs=bytes    一次读入bytes个字节，即指定一个块大小为bytes个字节。
4. obs=bytes    一次输出bytes个字节，即指定一个块大小为bytes个字节。
5. bs=bytes    同时设置读入/输出的块大小为bytes个字节。
6. cbs=bytes    一次转换bytes个字节，即指定转换缓冲区大小。
7. skip=blocks      从输入文件开头跳过 blocks 个块后再开始复制。
8. seek=blocks        从输出文件开头跳过 blocks 个块后再开始复制。
    (通常只有当输出文件是磁盘或磁带时才有效, 即备份到磁盘或磁带时才有效)。
9. count=blocks    仅拷贝 blocks 个块，块大小等于 ibs 指定的字节数。
10. conv=conversion[,]    用指定的参数转换文件。
转换参数:
ascii      转换 EBCDIC 为 ASCII。
ebcdic      转换 ASCII 为 EBCDIC。
ibm      转换 ASCII 为 alternate EBCDIC.
block      把每一行转换为长度为 cbs 的记录，不足部分用空格填充。
unblock  使每一行的长度都为 cbs ，不足部分用空格填充。
lcase        把大写字符转换为小写字符。
ucase        把小写字符转换为大写字符。
swab        交换输入的每对字节。
noerror    出错时不停止。
notrunc    不截短输出文件。
sync        把每个输入块填充到ibs个字节，不足部分用空(NUL)字符补齐。
3. dd测试硬盘性能
首先要了解两个特殊的设备：
/dev/null：回收站、黑洞
/dev/zero：产生空字符
3.1. 测试存储带宽
使用dd测试存储系统带宽（MB/s）时，我们通常可以对主机中识别到的每块磁盘，顺序组合使用类似下面两行的命令，来衡量大数据块并发读写时存储的带宽性能指标。其中bs值是指每次写入文件的大小，本例中是1MB大小，用户可以根据自身情况设置好最符合自身应用情况的文件大小进行测试。每条最后的&表示后台让该命令运行，一般我们是先运行写测试然后再运行读测试，让读写操作并发进行。由于实际生产测试环境中往往有多块磁盘，我们往往会将这一系列命令写成Shell脚本让测试过程自动进行。
#dd if=/dev/zero of=/dev/sda bs=1024k &（带宽写测试）
#dd if=/dev/sda of=/dev/null bs=1024k &（带宽读测试）
3.2. 测试存储吞吐量
使用dd测试存储系统吞吐量（IOPS）指标时，我们通常顺序组合使用下面的命令，来模拟小数据块并发读写时存储的吞吐量性能指标。与测试带宽时相比，吞吐量测试的数据文件大小仅为8KB，因此能够测试出大量小I/O情况下存储的吞吐量（IOPS）指标。当然进行吞
吐量测试时，我们一般也要针对主机的每块磁盘设备，因此也将这些命令写成Shell脚本，从而让测试过程自动进行。
#dd if=/dev/zero of=/dev/sda bs=8k &（吞吐量写测试）
#dd if=/dev/sda of=/dev/zero bs=8k &（吞吐量读测试）
4. 测试性能实例
dd只能提供一个大概的测试结果，而且是连续IO 而不是随机IO
4.1. 读测试
# dd  if=/dev/sda2  of=/dev/null  bs=8k  count=8388608
8388608+0 records in
8388608+0 records out
68719476736 bytes (69 GB) copied, 516.547 seconds, 133 MB/s
real 8m36.926s
user 0m0.117s
sys 0m55.216s
因为/dev/sda2是一个物理分区，对它的读取会产生IO，/dev/null是伪设备，相当于黑洞，of到该设备不会产生IO，所以，这个命令的IO只发生在/dev/sdb1上，也相当于测试磁盘的读能力。
4.2. 写测试
# dd  if=/dev/zero  o f=/opt/iotest  bs=8k  count=8388608
8388608+0 records in
8388608+0 records out
68719476736 bytes (69 GB) copied, 888.398 seconds, 77.4 MB/s
real 14m48.743s
user 0m3.678s
sys 2m47.158s
因为/dev/zero是一个伪设备，它只产生空字符流，对它不会产生IO，所以，IO都会集中在of文件中，of文件只用于写，所以这个命令相当于测试磁盘的写能力。但是很不准确，因为命令结束的时候数据还没有真正写到磁盘上去。
#dd  if=/dev/zero  of=/opt/iotest  bs=8k  count=8388608  conv=fsync
这个还算准确，数据已经写入磁盘。
dd  if=/dev/zero  of=/opt/iotest  bs=8k  count=8388608  oflag=dsync
这个可以当成是模拟数据库插入操作，速度很慢。
4.3. 读写测试gzip是什么文件夹
# dd  if=/dev/sda2　of=/opt/iotest  bs=8k  count=8388608
8388608+0 records in
8388608+0 records out
68719476736 bytes (69 GB) copied, 1869.89 seconds, 36.8 MB/s
real 31m10.343s
user 0m2.613s
sys 3m25.548s
这个命令下，一个是物理分区，一个是实际的文件，对它们的读写都会产生IO（对/dev/ sda2是读，对/opt/iotest是写），假设他们都在一个磁盘中，这个命令就相当于测试磁盘的同时读写能力。
5. 其他应用实例
1. 将本地的/dev/hdb整盘备份到/dev/hdd
dd if=/dev/hdb of=/dev/hdd
2. 将/dev/hdb全盘数据备份到指定路径的image文件
dd if=/dev/hdb of=/root/image
3. 将备份文件恢复到指定盘
dd if=/root/image of=/dev/hdb
4. 备份/dev/hdb全盘数据，并利用gzip工具进行压缩，保存到指定路径
dd if=/dev/hdb | gzip > /
5. 将压缩的备份文件恢复到指定盘
gzip -dc / | dd of=/dev/hdb
6. 备份磁盘开始的512个字节大小的MBR信息到指定文件
dd if=/dev/hda of=/root/image count=1 bs=512
count=1指仅拷贝一个块；bs=512指块大小为512个字节。
恢复：
dd if=/root/image of=/dev/hda
7. 备份软盘
dd if=/dev/fd0 of=disk.img count=1 bs=1440k
(即块大小为1.44M)
8. 拷贝内存内容到硬盘
dd if=/dev/mem of=/root/mem.bin bs=1024
(指定块大小为1k)
9. 拷贝光盘内容到指定文件夹，并保存为cd.iso文件
dd if=/dev/cdrom(hdc) of=/root/cd.iso
10. 增加swap分区文件大小
第一步：创建一个大小为256M的文件：
dd if=/dev/zero of=/swapfile bs=1024 count=262144
第二步：把这个文件变成swap文件：
mkswap /swapfile
第三步：启用这个swap文件：
swapon /swapfile
第四步：编辑/etc/fstab文件，使在每次开机时自动加载swap文件：
/swapfile swap swap default 0 0
11. 销毁磁盘数据
dd if=/dev/urandom of=/dev/hda1
注意：利用随机的数据填充硬盘，在某些必要的场合可以用来销毁数据。
12. 测试硬盘的读写速度
dd if=/root/1Gb.file bs=64k | dd of=/dev/null
dd if=/dev/zero of=/root/1Gb.file bs=1024 count=1000000
通过以上两个命令输出的命令执行时间，可以计算出硬盘的读、写速度。
13. 确定硬盘的最佳块大小
dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
dd if=/dev/zero bs=2048 count=500000 of=/root/1Gb.file
dd if=/dev/zero bs=4096 count=250000 of=/root/1Gb.file
dd if=/dev/zero bs=8192 count=125000 of=/root/1Gb.file
通过比较以上命令输出中所显示的命令执行时间，即可确定系统最佳的块大小。
14. 修复硬盘
dd if=/dev/sda of=/dev/sda
当硬盘较长时间（比如1，2年）放置不使用后，磁盘上会产生magnetic fluxpoint。当磁头读到这些区域时会遇到困难，并可能导致I/O错误。当这种情况影响到硬盘的第一个扇区时，可能导致硬盘报废。上边的命令有可能使这些数据起死回生。且这个过程是安全，高效的。

版权声明：本站内容均来自互联网，仅供演示用，请勿用于商业和其他非法用途。如果侵犯了您的权益请与我们联系QQ:729038198，我们将在24小时内删除。