红联Linux门户
Linux帮助

Linux下分割、合并文件-dd和cat

发布时间:2014-12-19 10:10:12来源:linux网站作者:exbob

dd的作用是转换和拷贝文件,我们可以利用它来分割文件,相关的选项如下:

if=filename:输入的文件名

of=finename:输出的文件名

bs=bytes:一次读写的字节数,默认是512bytes

skip=blocks:拷贝前,跳过的输入文件的前blocks块,块的大小有bs决定

count=blocks:只拷贝输入文件的前blocks块


例如,现在有一个文件file,大小为116616字节:

[root]# du -b file 
116616  file 

将其分割为两文件file1和file2,那我们就设置每块为1024字节,将file的前60块放入file1,余下的放入file2:

[root]# dd if=file bs=1024 count=60 skip=0  of=file1 
[root]# dd if=file bs=1024 count=60 skip=60 of=file2


然后用cat将两个文件合并为file.bak,要注意文件的顺序:

[root]# cat file1 file2 > file.bak 

可以用md5sum验证一下file和file.bak:

[root]# md5sum file 
3ff53f7c30421ace632eefff36148a70  file 
[root]# md5sum file.bak 
3ff53f7c30421ace632eefff36148a70  file.bak 

可以证明两个文件时完全相同的。


为了方便分割、合并文件,我写了两个脚本:

ddf.sh:

#ddf.sh:分割文件,分割后的文件以数字结尾,例如file分割为两个文件:file1和file2  
#!/bin/sh  
 
#使用脚本是第一参数是要分割的文件名  
Filename=$1
Filesize=0 
 
Path=`pwd` 
 
#验证文件名是否正确,然后计算文件的大小  
if [ -z $Filename ];then 
echo "Error:The file name can not be empty" 
exit 
fi 
if [ -e $Filename ];then 
Filesize=`du -b $Filename | awk '{print $1}'` 
if [ $Filesize == 0 ];then 
echo "Error:The File size is zero!" 
exit 
fi 
echo "The file size is $Filesize Byte" 
echo "Plese enter the subfile size(KB):" 
else 
echo "Error:$Filename does not exist!" 
exit  
fi 
 
#输入分割后每个文件的大小,单位是KB  
read Subfilesize 
if [ -z $Subfilesize ];then 
echo "Error:Input can not be empty" 
exit 
fi 
 
echo $Subfilesize | grep '^[0-9]\+$' >> /dev/null 
if [ $? -ne 0 ];then 
echo "Error:The Input is not a number!" 
exit 
elif [ $Subfilesize -eq 0 ];then 
echo "Error:The Subfile size is zero!" 
exit 
fi 
 
#计算需要分割为几个文件  
SubfileByte=`expr $Subfilesize \* 1024` 
Subfilenum=`expr $Filesize / $SubfileByte` 
if [ `expr $Filesize % $Subfilesize` -ne 0 ];then 
Subfilenum=`expr $Subfilenum + 1` 
fi 
 
#将文件分割  
echo "$Filename will be divided into $Subfilenum"  
i=1 
skipnum=0 
while [ $i -le $Subfilenum ] 
do 
echo "$Filename$i" 
dd if=$Filename of="$Path/$Filename$i" bs=1024 count=$Subfilesize skip=$skipnum 
i=`expr $i + 1` 
skipnum=`expr $skipnum + $Subfilesize` 
done 
echo "$Filename has been divided into $Subfilenum" 
echo "Done !" 

caf.sh:

#caf.sh:合并文件,需要合并的文件要放在一个文件夹里  
#   文件名分为两个部分,第一部分都相同,第二部分必须是从1开始的连续数字,例如file1,file2,file3  
#   合并后的文件名为file.bak  
#!/bin/sh  
 
#输入文件名的第一部分  
echo "Please enter file name:" 
read Filename 
if [ -z $Filename ];then 
echo "Error:File name can not be empty" 
exit 
fi 
 
#输入待合并文件的个数  
echo "Please enter the number of subfiles:"  
read Subfilenum 
if [ -z $Subfilenum ];then 
echo "Error:The number of subfiles can not be empty" 
exit 
fi 
echo $Subfilenum | grep '^[0-9]\+$' > /dev/null 
if [ $? -ne 0 ];then 
echo "Error:Input must be a number" 
exit 
fi 
if [ $Subfilenum -eq 0 ];then 
echo "Error:The number of subfiles can not be zero" 
exit 
fi 
 
#合并文件  
i=1 
Newfile=$Filename\.bak 
while [ $i -le $Subfilenum ] 
do 
Subfilename=$Filename$i 
if [ -e $Subfilename ];then 
echo "$Subfilename done!" 
cat $Subfilename >> $Newfile 
i=`expr $i + 1` 
else 
echo "Error:$Subfilename does not exist" 
rm -rf $Newfile 
exit 
fi 
done 

echo "Subfiles be merged into $Newfile" 
echo "Success!"


用这两个脚本完成对file的分割、合并:

[root]# ./ddf.sh file
The file size is 116616 Byte 
Plese enter the subfile size(KB): 
60 
file will be divided into 2 
file1 
记录了60+0 的读入 
记录了60+0 的写出 
61440字节(61 kB)已复制,0.0352612 秒,1.7 MB/秒 
file2 
记录了53+1 的读入 
记录了53+1 的写出 
55176字节(55 kB)已复制,0.0316272 秒,1.7 MB/秒 
file has been divided into 2 
Done ! 
[root]# ls  
caf.sh  ddf.sh  file  file1  file2 
[root]# ./caf.sh
Please enter file name: 
file 
Please enter the number of subfiles: 

file1 done! 
file2 done! 
Subfiles be merged into file.bak 
Success! 
[root]# ls  
caf.sh  ddf.sh  file  file1  file2  file.bak