文件行尾奇怪的^M及解决

　　现象：

　　按照《Unix shell 范例精解》试 sed 例子，用的是书自带光盘里的文件 datafile。但是运行命令（以两个数字结尾的行，将结尾两个数字 ab 替换为 ab.5 ）

　　> sed 's/[0-9][0-9]$/&.5/' datafile

　　却没有输出，其中某一行最后数字是34，把上面 [0-9][0-9]$ 直接换成 34$ 依旧没有输出。 让人一度以为在这个 Ubuntu 上 $ 元字符不能用。但是这是绝对不可能的，这年头那个敢不支持 POSIX的正则表达式。

　　继续尝试这个 $元字符，运行例子命令如下（结尾添加 **VACA**）：

　　> sed '/west/,/east/s/$/**VACA**/' datafile

　　输出如下：

　　**VACA**t NW Charles Main 3.0 .98 3 34

　　**VACA** WE Sharon Gray 5.3 .97 5 23

　　**VACA**t SW Lewis Dalsass 2.7 .8 2 18

　　**VACA** SO Suan Chin 5.1 .95 4 15

　　**VACA**t SE Patricia Hemenway 4.0 .7 4 17

　　eastern EA TB Savage 4.4 .84 5 20

　　northeast NE AM Main Jr. 5.1 .94 3 13

　　north NO Margot Weber 4.5 .89 5 9

　　central CT Ann Stephens 5.7 .94 5 13

　　觉得 **VACA**t 后的那个 t 很可疑，难道是输出时的覆盖？因为没有替换这个地方阿，再试试

　　> sed '/west/,/east/s/$/**VA**/' datafile

　　输出如强烈地支持俺地怀疑，如下：

　　**VA**est NW Charles Main 3.0 .98 3 34

　　**VA**n WE Sharon Gray 5.3 .97 5 23

　　**VA**est SW Lewis Dalsass 2.7 .8 2 18

　　**VA**rn SO Suan Chin 5.1 .95 4 15

　　**VA**ast SE Patricia Hemenway 4.0 .7 4 17

　　eastern EA TB Savage 4.4 .84 5 20

　　northeast NE AM Main Jr. 5.1 .94 3 13

　　north NO Margot Weber 4.5 .89 5 9

　　central CT Ann Stephens 5.7 .94 5 13

#p#副标题#e#

　　于是来个重定向：

　　>sed '/west/,/east/s/$/**VA**/' datafile > file

　　> vim file

　　显示每行尾部都多了一个 ^M，于是手动删除几个 ^M，使呈以下样子：

　　northwest NW Charles Main 3.0 .98 3 34**VA** // 手动删除 ^M 以验证

　　western WE Sharon Gray 5.3 .97 5 23**VA** // 同上

　　southwest SW Lewis Dalsass 2.7 .8 2 18**VA** // 同上

　　southern SO Suan Chin 5.1 .95 4 15^M**VA** // 保留 ^M 以对比

　　southeast SE Patricia Hemenway 4.0 .7 4 17^M**VA** // 同上

　　eastern EA TB Savage 4.4 .84 5 20^M

　　northeast NE AM Main Jr. 5.1 .94 3 13^M

　　north NO Margot Weber 4.5 .89 5 9^M

　　central CT Ann Stephens 5.7 .94 5 13^M

　　保存推出后 cat file1, 屏幕显示如下：

　　northwest NW Charles Main 3.0 .98 3 34**VA**

　　western WE Sharon Gray 5.3 .97 5 23**VA**

　　southwest SW Lewis Dalsass 2.7 .8 2 18**VA**

　　**VA**rn SO Suan Chin 5.1 .95 4 15

　　**VA**ast SE Patricia Hemenway 4.0 .7 4 17

　　eastern EA TB Savage 4.4 .84 5 20

　　northeast NE AM Main Jr. 5.1 .94 3 13

　　north NO Margot Weber 4.5 .89 5 9

　　central CT Ann Stephens 5.7 .94 5 13

　　证明猜测正确，只是这个 ^M 是什么东西呢？

　　原因和解决方法：

　　Google 之，得说法如下：

　　Linux编辑器vim中删除行尾的^M

　　有时候，在 Linux 中使用打开曾在 Windows 中编辑过的文件时，会在行尾看到 ^M 字符。看起来总是感觉很别扭。

　　删除方法如下：

　　在 Vim 的命令模式中输入 :%s/^M$//g 后，回车即会自动删除该文件中的所有 ^M 字符。

　　注意： ^M 要用 Ctrl + v， Ctrl + m 来输入， 用键盘直接敲^和M是不行的！ 后面的 $ 代表匹配行尾的内容，最后的 g 则表示每行中匹配到的内容都要置换--全局替换，否则只替换每行中匹配到的第一个。

　　又脚本删除方法：

　　cat file | col -b > file.1 // 这个可以去掉，但是生成文件里汉字变乱码

　　sed -e 's/.$//g' file // 正确

　　sed ‘s/^M//' file // 正确，但是 ^M = Ctrl + v, Ctrl + m

　　附录：^M 另一个会出现的情况是文件在 windows 和 Linux 系统间通过 Ftp 传送。这是建议方法是：强行设定 ftp 方式为 ascii 方式就可以了啊! 当然也可以通过软件 dos2unix 搞定。// 我没尝试过哈。

　　从现象到原因到解决方法如下。备份防遗忘。

　　Tue，Jan/26/2010