Linux dd 命令
From:http://www.cnblogs.com/jikexianfeng/p/6103500.html
Linux/UNIX: 使用 dd 命令創建 1GB 大小的二進制:http://www.linuxidc.com/Linux/2014-12/110147.htm
菜鳥教程 Linux dd命令:http://www.runoob.com/linux/linux-comm-dd.html
linux 命令DD詳解:http://blog.sina.com.cn/s/blog_647a104f0101ins2.html
一、dd命令的解釋
dd:用指定大小的塊拷貝一個文件,并在拷貝的同時進行指定的轉換。
名稱: dd
使用權限: 所有使用者dd 這個指令在 manual 里的定義是 convert and copy a file
使用方式: dd [option]
如果你想要在線看 manual, 可以試試: dd --help
或是: info dd
如果你想要看看這個版本如何: dd --version
輸入或輸出: dd if=[STDIN] of=[STDOUT]
強迫輸入或輸出的Size為多少Bytes (bs參數) : dd -ibs=[BYTE] -obs=[SIZE]
強迫一次只做多少個 Bytes :cbs=BYTES
跳過一段以后才輸出 :seek=BLOCKS
跳過一段以后才輸入 :skip=BLOCKS
當然你可以拿這個來方便的拷貝光碟(注意,你的光碟是標準的 iso9660格式才可以這么做唷!)
dd if=/dev/cdrom of=cdrom.iso
其中 if 后面以及 of 后面的內容依你的需求調整。
然后給系統這個指令就可以燒了:
cdrecord -v cdrom.iso
注意:指定數字的地方若以下列字符結尾,則乘以相應的數字:b=512;c=1;k=1024;w=2
參數注釋:
1. if=文件名:輸入文件名,缺省為標準輸入。即指定源文件。< if=input file > 2. of=文件名:輸出文件名,缺省為標準輸出。即指定目的文件。< of=output file > 3. ibs=bytes:一次讀入bytes個字節,即指定一個塊大小為bytes個字節。obs=bytes:一次輸出bytes個字節,即指定一個塊大小為bytes個字節。bs=bytes:同時設置讀入/輸出的塊大小為bytes個字節。 4. cbs=bytes:一次轉換bytes個字節,即指定轉換緩沖區大小。 5. skip=blocks:從輸入文件開頭跳過blocks個塊后再開始復制。 6. seek=blocks:從輸出文件開頭跳過blocks個塊后再開始復制。注意:通常只用當輸出文件是磁盤或磁帶時才有效,即備份到磁盤或磁帶時才有效。7. count=blocks:僅拷貝blocks個塊,塊大小等于ibs指定的字節數。 8. conv=conversion:用指定的參數轉換文件。ascii:轉換ebcdic為asciiebcdic:轉換ascii為ebcdicibm:轉換ascii為alternate ebcdicblock:把每一行轉換為長度為cbs,不足部分用空格填充unblock:使每一行的長度都為cbs,不足部分用空格填充lcase:把大寫字符轉換為小寫字符ucase:把小寫字符轉換為大寫字符swab:交換輸入的每對字節noerror:出錯時不停止notrunc:不截短輸出文件sync:將每個輸入塊填充到ibs個字節,不足部分用空(NUL)字符補齊。
二、dd應用實例
例1:要把一張軟盤的內容拷貝到另一張軟盤上,利用/tmp作為臨時存儲區。把源盤插入驅動器中,輸入下述命令:?
? ? $ dd if =/dev/fd0 of = /tmp/tmpfile?
? ? 拷貝完成后,將源盤從驅動器中取出,把目標盤插入,輸入命令:?
? ? $ dd if = /tmp/tmpfile of =/dev/fd0?
? ? 軟盤拷貝完成后,應該將臨時文件刪除:?
? ? $ rm /tmp/tmpfile?
例2:把net.i這個文件寫入軟盤中,并設定讀/寫緩沖區的數目。?
? ? (注意:軟盤中的內容會被完全覆蓋掉)?
? ? $ dd if = net.i of = /dev/fd0 bs = 16384?
例3:將文件sfile拷貝到文件 dfile中。?
? ? $ dd if=sfile of=dfile
例4:創建一個100M的空文件
? ? dd if=/dev/zero of=hello.txt bs=100M count=1
1.將本地的/dev/hdb整盤備份到/dev/hdd
? ? #dd if=/dev/hdb of=/dev/hdd
2.將/dev/hdb全盤數據備份到指定路徑的image文件
? ? #dd if=/dev/hdb of=/root/image
3.將備份文件恢復到指定盤
? ? #dd if=/root/image of=/dev/hdb
4.備份/dev/hdb全盤數據,并利用gzip工具進行壓縮,保存到指定路徑
? ? #dd if=/dev/hdb | gzip > /root/image.gz
5.將壓縮的備份文件恢復到指定盤
? ? #gzip -dc /root/image.gz | dd of=/dev/hdb
6.備份與恢復MBR
? ? 備份磁盤開始的512個字節大小的MBR信息到指定文件:
? ? #dd if=/dev/hda of=/root/image count=1 bs=512
? ? count=1指僅拷貝一個塊;bs=512指塊大小為512個字節。
? ? 恢復:
? ? 將備份文件恢復到指定盤
? ? #dd if=/root/image of=/dev/had ? ?將備份的MBR信息寫到磁盤開始部分
? ? gzip -dc /path/to/image.gz | dd of=/dev/hdx ? ?將壓縮的備份文件恢復到指定盤
7.備份軟盤
#dd if=/dev/fd0 of=disk.img count=1 bs=1440k (即塊大小為1.44M)
8.拷貝內存內容到硬盤
#dd if=/dev/mem of=/root/mem.bin bs=1024 (指定塊大小為1k)??
9.拷貝光盤內容到指定文件夾,并保存為cd.iso文件
#dd if=/dev/cdrom(hdc) of=/root/cd.iso
10.增加swap分區文件大小
? ? 第一步:創建一個大小為256M的文件:
? ?#dd if=/dev/zero of=/swapfile bs=1024 count=262144
? ? 第二步:把這個文件變成swap文件:
? ? #mkswap /swapfile
? ? 第三步:啟用這個swap文件:
? ? #swapon /swapfile
? ? 第四步:編輯/etc/fstab文件,使在每次開機時自動加載swap文件:
? ? /swapfile??? swap??? swap??? default?? 0 0
11.銷毀磁盤數據
? ? #dd if=/dev/urandom of=/dev/hda1 ? ?或者 ? ? dd if=/dev/zero of=/dev/hda1
? ? 注意:利用隨機的數據填充硬盤,在某些必要的場合可以用來銷毀數據。
12.測試硬盤的讀寫速度
? ? #dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
? ? #dd if=/root/1Gb.file bs=64k | dd of=/dev/null
? ? 通過以上兩個命令輸出的命令執行時間,可以計算出硬盤的讀、寫速度。
13.確定硬盤的最佳塊大小:
? ? #dd if=/dev/zero bs=1024 count=1000000 of=/root/1Gb.file
? ? #dd if=/dev/zero bs=2048 count=500000 of=/root/1Gb.file
? ? #dd if=/dev/zero bs=4096 count=250000 of=/root/1Gb.file
? ? #dd if=/dev/zero bs=8192 count=125000 of=/root/1Gb.file
? ? 通過比較以上命令輸出中所顯示的命令執行時間,即可確定系統最佳的塊大小。
14.修復硬盤:
#dd if=/dev/sda of=/dev/sda 或 dd if=/dev/hda of=/dev/hda
當硬盤較長時間(一年以上)放置不使用后,磁盤上會產生magnetic flux point,當磁頭讀到這些區域時會遇到困難,并可能導致I/O錯誤。當這種情況影響到硬盤的第一個扇區時,可能導致硬盤報廢。上邊的命令有可能使這些數 據起死回生。并且這個過程是安全、高效的。
15.利用netcat遠程備份
? ? #dd if=/dev/hda bs=16065b | netcat < targethost-IP > 1234
? ? 在源主機上執行此命令備份/dev/hda
? ? #netcat -l -p 1234 | dd of=/dev/hdc bs=16065b
? ? 在目的主機上執行此命令來接收數據并寫入/dev/hdc
? ? #netcat -l -p 1234 | bzip2 > partition.img
? ? #netcat -l -p 1234 | gzip > partition.img
? ? 以上兩條指令是目的主機指令的變化分別采用bzip2、gzip對數據進行壓縮,并將備份文件保存在當前目錄。
16.將一個大視頻文件的第i個字節的值改成0x41(大寫字母A的ASCII值)
? ? #echo A | dd of=bigfile seek=$i bs=1 count=1 conv=notrunc
17.建立linux虛擬盤,用文件模擬磁盤
在進行linux的實驗中,如果沒有多余的硬盤來做測試。則可以在linux下使用文件來模擬磁盤,以供測試目的。
其模擬過程如下所示,摘錄自《Oracle數據庫核心技術與實務詳解-教你如何成為Oracle 10g OCP》一書。
1)以root用戶創建一個ASM磁盤所在的目錄。
? ? # mkdir –p /u01/asmdisks
2)通過dd命令創建6個400M大小的文件,每個文件代表一塊磁盤。
? ? [root@book u01]# cd asmdisks
? ??[root@book asmdisks]# dd if=/dev/zero of=asm_disk1 bs=1024k count=400
? ??[root@book asmdisks]# dd if=/dev/zero of=asm_disk2 bs=1024k count=400
? ??[root@book asmdisks]# dd if=/dev/zero of=asm_disk3 bs=1024k count=400
? ??[root@book asmdisks]# dd if=/dev/zero of=asm_disk4 bs=1024k count=400
? ??[root@book asmdisks]# dd if=/dev/zero of=asm_disk5 bs=1024k count=400
? ??[root@book asmdisks]# dd if=/dev/zero of=asm_disk6 bs=1024k count=400
3)將這些文件與裸設備關聯。
? ??[root@book asmdisks]# chmod 777 asm_disk*
? ??[root@book asmdisks]# losetup /dev/loop1 asm_disk1
? ??[root@book asmdisks]# losetup /dev/loop2 asm_disk2
? ??[root@book asmdisks]# losetup /dev/loop3 asm_disk3
? ??[root@book asmdisks]# losetup /dev/loop4 asm_disk4
? ??[root@book asmdisks]# losetup /dev/loop5 asm_disk5
? ??[root@book asmdisks]# losetup /dev/loop6 asm_disk6
? ??注意:如果要刪除通過dd模擬出的虛擬磁盤文件的話,直接刪除模擬出的磁盤文件
(也就是asm_disk1、asm_disk2…asm_disk6)還不夠,還必須執行losetup -d /dev/loopN,在這里N從1到6。否則,磁盤文件所占用的磁盤空間不能釋放
三、/dev/null和/dev/zero的區別
/dev/null----它是空設備,也稱為位桶(bit bucket)。
? ? ? ? ? ? ?外號叫無底洞,你可以向它輸出任何數據,它通吃,并且不會撐著!
? ? ? ? ? ? ?任何寫入它的輸出都會被拋棄。如果不想讓消息以標準輸出顯示或寫入文件,那么可以將消息重定向到位桶。
/dev/zero----是一個輸入設備,你可你用它來初始化文件。
? ? ? ? ? ? ?該設備無窮盡地提供0,可以使用任何你需要的數目——設備提供的要多的多。他可以用于向設備或文件寫入字符串0。
$ dd if=/dev/zero of=./test.txt bs=1k count=1
$ ls -l
total 4
-rw-r--r-- ? ? 1 oracle ? ?dba ? ? ? ? ? 1024 Jul 15 16:56 test.txt
eg:
$ find / -name access_log ? 2>/dev/null
3.1使用/dev/null?
把/dev/null看作"黑洞", 它等價于一個只寫文件,所有寫入它的內容都會永遠丟失.,而嘗試從它那兒讀取內容則什么也讀不到。然而, /dev/null對命令行和腳本都非常的有用
禁止標準輸出
#cat $filename >/dev/null
文件內容丟失,而不會輸出到標準輸出.
禁止標準錯誤
#rm $badname 2>/dev/null
這樣錯誤信息[標準錯誤]就被丟到太平洋去了
禁止標準輸出和標準錯誤的輸出
#cat $filename 2>/dev/null >/dev/null
如果"不存在,將不會有任何錯誤信息提示;如果filename"不存在,將不會有任何錯誤信息提示;如果"filename"存在, 文件的內容不會打印到標準輸出。
因此,上面的代碼根本不會輸出任何信息。當只想測試命令的退出碼而不想有任何輸出時非常有用。
#cat $filename &>/dev/null
這樣其實也可以, 由 Baris Cicek 指出
自動清空日志文件的內容
Deleting contents of a file, but preserving the file itself, with all attendant permissions (from Example 2-1 and Example 2-3):?
#cat /dev/null > /var/log/messages
#? : > /var/log/messages?? 有同樣的效果, 但不會產生新的進程.(因為:是內建的)
#cat /dev/null > /var/log/wtmp
特別適合處理這些由商業Web站點發送的討厭的"cookies"
隱藏cookie而不再使用
#if [ -f ~/.netscape/cookies ]? # 如果存在則刪除.
#then
#rm -f ~/.netscape/cookies
#fi
#ln -s /dev/null ~/.netscape/cookies
現在所有的cookies都會丟入黑洞而不會保存在磁盤上了.
3.2使用/dev/zero
像/dev/null一樣, /dev/zero也是一個偽文件, 但它實際上產生連續不斷的null的流(二進制的零流,而不是ASCII型的)。 寫入它的輸出會丟失不見, 而從/dev/zero讀出一連串的null也比較困難, 雖然這也能通過od或一個十六進制編輯器來做到。 /dev/zero主要的用處是用來創建一個指定長度用于初始化的空文件,就像臨時交換文件
用/dev/zero創建一個交換臨時文件
#!/bin/bash
? # 創建一個交換文件.
? ROOT_UID=0 # Root 用戶的 $UID 是 0.
? E_WRONG_USER=65 # 不是 root?
? FILE=/swap
? BLOCKSIZE=1024
? MINBLOCKS=40
? SUCCESS=0
? # 這個腳本必須用root來運行.
? if [ "UID"?ne"ROOT_UID" ]
?? then
?? echo; echo "You must be root to run this script."; echo
?? exit $E_WRONG_USER
? fi
? blocks={1:-{1:-MINBLOCKS} # 如果命令行沒有指定,
? #+ 則設置為默認的40塊.
? # 上面這句等同如:
? # --------------------------------------------------
? # if [ -n "$1" ]
? # then
? # blocks=$1
? # else
? # blocks=$MINBLOCKS
? # fi
? # --------------------------------------------------
?if [ "blocks"?ltMINBLOCKS ]
?then
?blocks=$MINBLOCKS # 最少要有 40 個塊長.
?fi
?echo "Creating swap file of size $blocks blocks (KB)."
?dd if=/dev/zero of=FILEbs=BLOCKSIZE count=$blocks # 把零寫入文件.
?mkswap?FILEblocks # 將此文件建為交換文件(或稱交換分區).
?swapon $FILE # 激活交換文件.
?echo "Swap file created and activated."
?exit $SUCCESS?
關于 /dev/zero 的另一個應用是為特定的目的而用零去填充一個指定大小的文件, 如掛載一個文件系統到環回設備 (loopback device)或"安全地" 刪除一個文件
例子創建ramdisk
#!/bin/bash
?# ramdisk.sh
?# "ramdisk"是系統RAM內存的一段,
?#+ 它可以被當成是一個文件系統來操作.
?# 它的優點是存取速度非常快 (包括讀和寫).
?# 缺點: 易失性, 當計算機重啟或關機時會丟失數據.
?#+ 會減少系統可用的RAM.
?# 10 # 那么ramdisk有什么作用呢?
?# 保存一個較大的數據集在ramdisk, 比如一張表或字典,
?#+ 這樣可以加速數據查詢, 因為在內存里查找比在磁盤里查找快得多.
? E_NON_ROOT_USER=70 # 必須用root來運行.
? ROOTUSER_NAME=root
? MOUNTPT=/mnt/ramdisk
? SIZE=2000 # 2K 個塊 (可以合適的做修改)
? BLOCKSIZE=1024 # 每塊有1K (1024 byte) 的大小
? DEVICE=/dev/ram0 # 第一個 ram 設備
? username=`id -nu`
? if [ "username"!="ROOTUSER_NAME" ]
? then
??? echo "Must be root to run \"`basename $0`\"."
??? exit $E_NON_ROOT_USER
? fi
?? if [ ! -d "$MOUNTPT" ] # 測試掛載點是否已經存在了,
? then #+ 如果這個腳本已經運行了好幾次了就不會再建這個目錄了
??? mkdir $MOUNTPT #+ 因為前面已經建立了.
? fi
? dd if=/dev/zero of=DEVICEcount=SIZE bs=$BLOCKSIZE
?? # 把RAM設備的內容用零填充.??????????????????????????????????????????????
?? # 為何需要這么做?
? mke2fs $DEVICE # 在RAM設備上創建一個ext2文件系統.
? mount?DEVICEMOUNTPT # 掛載設備.
? chmod 777 $MOUNTPT # 使普通用戶也可以存取這個ramdisk.
? # 但是, 只能由root來缷載它.
? echo "\"$MOUNTPT\" now available for use."
?# 現在 ramdisk 即使普通用戶也可以用來存取文件了.
?# 注意, ramdisk是易失的, 所以當計算機系統重啟或關機時ramdisk里的內容會消失.
?# 拷貝所有你想保存文件到一個常規的磁盤目錄下.
?# 重啟之后, 運行這個腳本再次建立起一個 ramdisk.
?# 僅重新加載 /mnt/ramdisk 而沒有其他的步驟將不會正確工作.
?# 如果加以改進, 這個腳本可以放在 /etc/rc.d/rc.local,
?#+ 以使系統啟動時能自動設立一個ramdisk.
?# 這樣很合適速度要求高的數據庫服務器.
?exit 0
硬盤IO測試
http://blog.chinaunix.net/uid-28549627-id-3922282.html
提到linux?系統中的dd命令,各位技術博友大多都很熟悉,用法也是好多,今天主要跟大家分享一下測試硬盤讀寫速度的幾種方式。
在我們手邊沒有合適的硬盤IO測試利器時,dd是我們的最佳選擇,好,仔細看線面四種方式。思考一個問題,區別在哪兒?
dd bs=1M count=128 if=/dev/zero of=test
dd bs=1M count=128 if=/dev/zero of=test_01; sync
dd bs=1M count=128 if=/dev/zero of=test_02 conv=fdatasync
dd bs=1M count=128 if=/dev/zero of=test_03 oflag=dsync
?
想到了嗎?看這里:區別在于內存中寫緩存的處理方式。
#----------------------圖文分析如下----------------------------#
第一種:
dd bs=4M count=1024 if=/dev/zero of=test??沒有加任何參數,dd默認的方式不包括“同步(sync)”命令。也就是說,dd命令完成前并沒有讓系統真正把文件寫到磁盤上。所以以上命令只是單純地把這128MB的數據讀到內存緩沖當中(寫緩存[write cache])。所以你得到的將是一個超級快的速度。因為其實dd給你的只是讀取速度,直到dd完成后系統才開始真正往磁盤上寫數據,但這個速度你是看不到了。所以如果這個速度很快,先不要偷著樂。呵呵
?
第二種:
dd bs=4M count=1024 if=/dev/zero of=test_01
和前面1中的完全一樣。分號隔開的只是先后兩個獨立的命令。當sync命令準備開始往磁盤上真正寫入數據的時候,前面dd命令已經把錯誤的“寫入速度”值顯示在屏幕上了。所以你還是得不到真正的寫入速度。
?
第三種:
dd bs=4M count=1024 if=/dev/zero of=test_02 conv=fdatasync
加入這個參數后,dd命令執行到最后會真正執行一次“同步(sync)”操作,所以這時候你得到的是讀取這128M數據到內存并寫入到磁盤上所需的時間,這樣算出來的時間才是比較符合實際的。
?
第四種:
dd bs=4M count=1024 if=/dev/zero of=test_03 oflag=dsync
加入這個參數后,dd在執行時每次都會進行同步寫入操作。也就是說,這條命令每次讀取1M后就要先把這1M寫入磁盤,然后再讀取下面這1M,一共重復128次。這可能是最慢的一種方式了,因為基本上沒有用到寫緩存(write cache)。
至于哪一種最有參考價值,個人覺得是下面這種:
?
dd bs=4M count=1024 if=/dev/zero of=test_02??conv=fdatasync
?
因為這種方式最接近計算機實際操作,所以測出來的數據最有參考價值。
總結
以上是生活随笔為你收集整理的Linux dd 命令的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: 消息中间件 --- Kafka快速入门
- 下一篇: 爬虫教程( 4 ) --- 分布式爬虫