再次遇到golang乱码问题，用simplifiedchinese解决

Posted 2021-03-14 pu369

上篇文章中，抓取网页时，本想匹配其中的汉字。由于出现乱码，只好匹配英文绕过了问题。

原因很简单：该网页没指定utf8，默认应该是GBK

解决办法也很简单：引入

"golang.org/x/text/encoding/simplifiedchinese"

比如原来的代码是

resp, err := this.cleint.Get(url)
body, err := ioutil.ReadAll(resp.Body)

此时body中读取到的是乱码。

只需增加一个reader

resp, err := this.cleint.Get(url)
reader := simplifiedchinese.GB18030.NewDecoder().Reader(resp.Body)
body, err := ioutil.ReadAll(reader)

此时，body中就是正确解码后的汉字。可以进行查找或正则匹配了。