Sed命令笔记

Tag:linux sed 正则 替换

DOS/Windows和Linux/Unix的文件换行回车格式不同，基于 DOS/Windows 的文本文件在每一行末尾有一个 CR（回车）和 LF（换行），而 UNIX 文本只有一个换行。 
1）把Dos/Windows下的文件移至Linux/Unix系统

虽然很多程序不在乎 DOS/Windows 格式的 CR/LF 文本文件，但是有几个程序却在乎 -- 最著名的是 bash，只要一遇到回车，它就会出问题。以下 sed 调用将把 DOS/Windows 格式的文本转换成可信赖的 UNIX 格式：

$ sed -e ‘s/.$//‘ mydos.txt > myunix.txt

把每行的最后一个字符替换成空

$ sed -e ‘s/.$/abc/‘ mydos.txt > myunix.txt

把每行的最后一个字符替换成abc

该脚本的工作原理很简单：替代规则表达式与一行的最末字符匹配，而该字符恰好就是回车。我们用空字符替换它，从而将其从输出中彻底删除。如果使用该脚本并注意到已经删除了输出中每行的最末字符，那么，您就指定了已经是 UNIX 格式的文本文件。也就没必要那样做了！

2）把Linux/UNIX 文本移至 Windows 系统，使用以下脚本执行必需的格式转换:

$ sed -e ‘s/$/\r/‘ myunix.txt > mydos.txt

在每行的末尾添加\r

$ sed -e ‘s/123$/345/‘ myunix.txt > mydos.txt

每行以123结尾的行，把123替换成345

在该脚本中，‘$‘ 规则表达式将与行的末尾匹配，而 ‘/r‘ 告诉 sed 在其之前插入一个回车。在换行之前插入回车，立即，每一行就以 CR/LF 结束。请注意，仅当使用 GNU sed 3.02.80 或以后的版本时，才会用 CR 替换 ‘\r‘。

=====================================================================

DOS文件格式如何转换成UNIX文件格式

dos格式文件传输到unix系统时,会在每行的结尾多一个^M,当然也有可能看不到,但是在vi的时候,会在下面显示此文件的格式,比如 "dos.txt" [dos] 120L, 2532C 字样,表示是一个[dos]格式文件,如果是MAC系统的,会显示[MAC],因为文件格式的原因有时会导致我们的unix程序,或者shell程序出现错误,那么需要把这些dos文件格式转换成unix格式,方法是 
vi  dos.txt        
    :set fileformat=unix 
    :w                 
这样文件就转换成unix格式文件了, 一般在windows机器上编写好了文件传到unix下就可能会出现这样的情况. 
用命令:set ff? 
可以看到dos或unix的字样. 
用:set ff=unix把它强制为unix格式    
也可以用sed 这样的工具来做: 
sed ‘s/^M//‘ filename > tmp_filename 
其中^M是同时Ctrl+V+M按出来的，表示回车。

dos,unix格式处理的差别：DOS是回车+换行,而在UNIX下,只有回车,无换行!

sed -e ‘s/a/A/‘ t.txt > t1.txt  将t.txt中每行的第一个a转成A

sed -e ‘s/a/A/g‘ t.txt > t1.txt  将t.txt中每行的所有a转成A

3）如何把windows和UNIX格式混合的文件，变得都是unix格式的

sed -e ‘s/\r//g‘ window.txt  > unix.txt