Python3 解決讀取中文文件txt編碼的問題
更新時間：2019年12月20日 17:13:36 作者：晨小點(diǎn)的小瘋子
今天小編就為大家分享一篇Python3 解決讀取中文文件txt編碼的問題，具有很好的參考價值，希望對大家有所幫助。一起跟隨小編過來看看吧
問題描述
嘗試用Python寫一個Wordcloud的時候，出現(xiàn)了編碼問題。
照著網(wǎng)上某些博客的說法添添改改后，結(jié)果是變成了“UnicodeDecodeError: ‘utf-8' codec can't decode byte…”這個錯誤。
搗鼓了一天啊，TXT（此處為本人現(xiàn)下內(nèi)心表情）。最后，干脆寫個最簡單的文件讀取，竟然還是報錯。于是就考慮是不是txt的編碼問題，因為讀取的txt文件是在Mac上面新建的純文本文件，一時沒找到在哪里查看編碼，最后拷貝到Windows系統(tǒng)上，查看了txt文件的編碼，竟然是ASCII，不是我最愛的utf-8，Mac你辜負(fù)了我對你的一番信任啊！ε(┬┬﹏┬┬)3
解決方法
將txt文件的編碼格式改為utf-8即可
此外，在打開文件的時候，要加上第三個參數(shù)encoding=‘utf8'(沒有橫杠)。
with open('./test3.txt','r',encoding='utf8') as fin:
for line in fin.readlines():
line = line.strip('\n')
下面附上第一次成功顯示的詞云的源碼（參考網(wǎng)上他人的，注釋很詳細(xì)）
import jieba
import jieba.analyse
from matplotlib import pyplot as plt
from scipy.misc import imread
from wordcloud import WordCloud,STOPWORDS,ImageColorGenerator
# 1.讀取數(shù)據(jù)
with open("./test.txt","r",encoding="utf8") as f:
text = f.read()
# 2.基于 TextRank 算法的關(guān)鍵詞抽取,top50
keywords = jieba.analyse.textrank(text, topK=50, withWeight=False, allowPOS=('ns', 'n', 'vn', 'v'))
file = ",".join(keywords)
# 指定中文字體，不然中文顯示框框
font = r'./HYQiHei-25J.ttf'
print(file)
# 指定背景圖,隨意
image = imread('cake.jpg')
wc = WordCloud(
font_path=font,
background_color='white',#背景色
mask=image,#背景圖
stopwords=STOPWORDS,#設(shè)置停用詞
max_words=100,#設(shè)置最大文字?jǐn)?shù)
max_font_size=100,#設(shè)置最大字體
width=800,
height=1000,
)
#生成詞云
image_colors = ImageColorGenerator(image)
wc.generate(file)
# 使用matplotlib,顯示詞云圖
plt.imshow(wc) #顯示詞云圖
plt.axis('off') #關(guān)閉坐標(biāo)軸
plt.show()
# 保存圖片
wc.to_file('news.png')
以上這篇Python3 解決讀取中文文件txt編碼的問題就是小編分享給大家的全部內(nèi)容了，希望能給大家一個參考，也希望大家多多支持腳本之家。
相關(guān)文章
這篇文章主要介紹了Python中的len()函數(shù)是什么意思以及l(fā)en()函數(shù)使用，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2023-01-01
如何使用 Python和 FFmpeg 批量截圖視頻到各自文件夾中
wxPython 提供了一個簡單易用的界面,而 FFmpeg 則負(fù)責(zé)處理視頻幀的提取,這個工具不僅對視頻編輯工作有幫助,也為批量處理視頻文件提供了極大的便利,這篇文章主要介紹了使用 Python和 FFmpeg 批量截圖視頻到各自文件夾中,需要的朋友可以參考下2024-08-08
這篇文章主要為大家介紹了python密碼學(xué)實現(xiàn)文件加密教程，有需要的朋友可以借鑒參考下，希望能夠有所幫助，祝大家多多進(jìn)步，早日升職加薪2022-05-05
在現(xiàn)代Web開發(fā)中,了解和分析網(wǎng)站的訪問流量對于優(yōu)化用戶體驗、提高網(wǎng)站性能以及制定營銷策略具有重要意義,下面我們就來看看如何使用Python來實現(xiàn)一個簡單的網(wǎng)站訪問流量統(tǒng)計系統(tǒng)吧2025-04-04
Python協(xié)程操作之gevent(yield阻塞，greenlet)，協(xié)程實現(xiàn)多任務(wù)(有規(guī)律的交替協(xié)作執(zhí)行)用法詳解
這篇文章主要介紹了Python協(xié)程操作之gevent(yield阻塞，greenlet)，協(xié)程實現(xiàn)多任務(wù)(有規(guī)律的交替協(xié)作執(zhí)行)用法,結(jié)合實例形式較為詳細(xì)的分析了協(xié)程的功能、原理及gevent、greenlet實現(xiàn)協(xié)程,以及協(xié)程實現(xiàn)多任務(wù)相關(guān)操作技巧,需要的朋友可以參考下2019-10-10
這篇文章主要介紹了Python中requests模塊的請求參數(shù)詳解,requests模塊是一個網(wǎng)絡(luò)請求模塊，可以幫助我們模擬成客戶端去請求服務(wù)器的數(shù)據(jù),我們今天就是主要針對這個模塊進(jìn)行學(xué)習(xí),需要的朋友可以參考下2023-08-08
詳解Django+uwsgi+Nginx上線最佳實戰(zhàn)
這篇文章主要介紹了Django+uwsgi+Nginx上線最佳實戰(zhàn)，文中通過示例代碼介紹的非常詳細(xì)，對大家的學(xué)習(xí)或者工作具有一定的參考學(xué)習(xí)價值，需要的朋友們下面隨著小編來一起學(xué)習(xí)學(xué)習(xí)吧2019-03-03
在本篇文章里小編給大家整理了一篇關(guān)于django中顯示字符串的實例方法，有興趣的朋友們可以跟著學(xué)習(xí)參考下。2021-03-03
這篇文章主要介紹了Python中的迭代器與生成器使用及說明，具有很好的參考價值，希望對大家有所幫助。如有錯誤或未考慮完全的地方，望不吝賜教2022-12-12
Python中canmatrix解析dbc文件應(yīng)用常見示例
DBC是一種用于描述CAN網(wǎng)絡(luò)協(xié)議的文件格式,Python作為一種流行的編程語言,也提供了解析DBC文件的相關(guān)類庫,這篇文章主要給大家介紹了關(guān)于Python中canmatrix解析dbc文件的相關(guān)資料,需要的朋友可以參考下2024-08-08