linux 编码转换 任意编码转换 通用转换 当无法确认源编码时 一个批量转换脚本

Posted 当你觉得为时已晚时,恰恰是最早的时候

tags:

篇首语:本文由小常识网(cha138.com)小编为大家整理,主要介绍了linux 编码转换 任意编码转换 通用转换 当无法确认源编码时 一个批量转换脚本相关的知识,希望对你有一定的参考价值。

转载请注明出处:http://www.cnblogs.com/blazer/p/7808639.html

一个比较通用的方法,将所有系统已有编码,都转换一遍,从结果中去筛选你需要的编码。

如果你执行: sh test.sh t1.csv,则会生成t1.csv.head.result文件,你需要从中去筛选需要的编码。

执行命令:

sh test.sh $fileName

脚本文件: 

if [ "$1" == "" ];
then
    echo "Usage : sh shell \\$fileName"
    echo "please input \\$fileName"
    exit 0
fi

fileName=$1
head -n 1 $fileName > $fileName.head
for a in `iconv --list | sed \'s/\\/\\/$//\' | sort`; do
    iconv -f $a -t UTF-8 $fileName.head > /dev/null
    if [ "$?" == "0" ];
    then
        echo $a >> $fileName.head.result
        iconv -f $a -t UTF-8 $fileName.head >> $fileName.head.result
    fi
done

 将内容保存到test.sh

以上是关于linux 编码转换 任意编码转换 通用转换 当无法确认源编码时 一个批量转换脚本的主要内容,如果未能解决你的问题,请参考以下文章

如何在 Linux 中将文件编码转换为 UTF-8

如何在 Linux 中将文件编码转换为 UTF-8

Linux 文本文件编码转换工具

如何批量转换文本文档编码

Linux 文件编码格式转换

Linux中如何查看文件编码及对文件进行编码转换