解决UnicodeDecodeError: ‘utf-8‘ codec can‘t decode byte 0xc8 in position 0: invalid continuation byte

小鱼儿 2022-10-14 00:57 16阅读 0赞

困扰了很久的问题今天终于解决了！！！

异步导入csv文件提示`UnicodeDecodeError: 'utf-8' codec can't decode byte 0xc8 in position 0: invalid continuation byte`

原代码为：

resp = requests.get(private_url).content
        with open(file_dir_name, "w") as fd:
            fd.write(resp.decode(encoding="utf-8"))

解码的字符格式我换成了gbk，Latin。。。各种都试过，只要有中文，就会报错。

年少的我不懂事，不知道翻译一看，看到这个报错想当然认为是解码的字符集不对，直到今天，我终于正视了bytes，我仿佛找到了解决门道。

于是我打印了resp的type类型，发现果然是`<class 'bytes'>`, 不就是二进制字节类型吗

然后我再次看了代码，resp取的是requests的content，点进去看content的源码解释：

def content(self):
            """Content of the response, in bytes."""

响应内容就是bytes类型。

更改后的代码为：

resp = requests.get(private_url).content
        with open(file_dir_name, "w") as fd:
            fd.write(resp.decode(encoding="unicode_escape"))

unicode\_escape就是对编码后存储的文本，读取时进行反向转换，就能直接得到原始文本数据。

最后完美解决。

感谢[https://www.cnblogs.com/my\_captain/p/9092644.html][https_www.cnblogs.com_my_captain_p_9092644.html]

ps：想起之前的产品问我为什么不能加入中文，我和他好生辩论了一番，现在想起来还是我太菜了，遇到问题没找到解决办法就翻篇。其实这次我差点又想不让文件中有中文，但是这个产品要求一定有中文，于是我便深入了解了一下。。。没有解决不了的难题，只有一颗懒惰的怕麻烦的心～

[https_www.cnblogs.com_my_captain_p_9092644.html]: https://www.cnblogs.com/my_captain/p/9092644.html

还没有评论，来说两句吧...