golang UTF8转中文字符

Posted 2023-02-26

参考技术A

golang 读取文件的时候（ ReadFile func(filename string) ([]byte, error) ），返回的是utf-8格式的[]byte，对于中文字符来讲，无法将[]byte直接转化为string。所以需要手动将 UIF-8 转换成 GBK 。

GitHub上的项目 https://github.com/axgle/mahonia 可以解决编码转换的问题。

win下和linux下.txt文件的格式不同，因为DOS下的编辑器和Linux编辑器对文件行末的回车符处理不一致
mahonia解析win下的文本文件，所以要把win下的文本文件放到linux服务器环境中。