廖雪峰曾經(jīng)曰過:用記事本編輯的時(shí)候,從文件讀取的UTF-8字符被轉(zhuǎn)換為Unicode字符到內(nèi)存里,編輯完成后,保存的時(shí)候再把Unicode轉(zhuǎn)換為UTF-8保存到文件(鏈接)
事件:在網(wǎng)上下載《西游記》txt做文本分析,發(fā)現(xiàn)一只read不成功,編碼是GBK
用Cmder file 命令查看文本編碼,發(fā)現(xiàn)文本是UTF-8 編碼
所以把編碼改成encoding= "utf-8"后,成功輸出
如果使用Windows系統(tǒng)做中文文本分析,建議先把文本編碼修改成UTF-8格式。
使用Notepad++ -》編碼-》轉(zhuǎn)為UTF-8編碼
最后編輯于 :
?著作權(quán)歸作者所有,轉(zhuǎn)載或內(nèi)容合作請聯(lián)系作者
【社區(qū)內(nèi)容提示】社區(qū)部分內(nèi)容疑似由AI輔助生成,瀏覽時(shí)請結(jié)合常識與多方信息審慎甄別。
平臺聲明:文章內(nèi)容(如有圖片或視頻亦包括在內(nèi))由作者上傳并發(fā)布,文章內(nèi)容僅代表作者本人觀點(diǎn),簡書系信息發(fā)布平臺,僅提供信息存儲服務(wù)。