先舉個例子，分別以不指定編碼、指定編碼為 utf-8、指定編碼為 utf-8-sig 三種方式來做比較，再將寫入 csv 文件和 txt 文件來做個對比

一、不指定編碼方式，直接存入 csv 文件

import csv

with open('test.csv', 'w') as fp:
 writer = csv.writer(fp)
 writer.writerow(['漢語', '俄語', '韓語', '日語', '英語'])
 writer.writerow(['愛你', 'люблю тебя', '사랑해요', '愛しています', 'love you'])

此時運行程序會報以下錯誤：

UnicodeEncodeError: 'gbk' codec can't encode character '\uc0ac' in position 14: illegal multibyte sequence

二、指定編碼為 utf-8，再存入 csv 文件

接下來嘗試將內(nèi)容以 utf-8 編碼方式存入 test.csv 文件中，可以看到除了英文，其他的全都是亂碼：

import csv

with open('test.csv', 'w', encoding='utf-8') as fp:
 writer = csv.writer(fp)
 writer.writerow(['漢語', '俄語', '韓語', '日語', '英語'])
 writer.writerow(['愛你', 'люблю тебя', '사랑해요', '愛しています', 'love you'])

三、指定編碼為 utf-8-sig，再存入 csv 文件

當將編碼方式換成 utf-8-sig 之后，顯示為正常：

import csv

with open('test.csv', 'w', encoding='utf-8-sig') as fp:
 writer = csv.writer(fp)
 writer.writerow(['漢語', '俄語', '韓語', '日語', '英語'])
 writer.writerow(['愛你', 'люблю тебя', '사랑해요', '愛しています', 'love you'])

四、不指定編碼方式，直接存入 txt 文件

with open('test.txt','w') as fp:
 fp.write('愛你, люблю тебя, 사랑해요, 愛しています, love you')

和存入 csv 文件一樣，也會報以下錯誤：

UnicodeEncodeError: 'gbk' codec can't encode character '\uc0ac' in position 16: illegal multibyte sequence

五、指定編碼為 utf-8 / utf-8-sig，再存入 txt 文件

以 utf-8 或者 utf-8-sig 編碼方式存入 test.txt 文件中，內(nèi)容都是完全正常的：

ith open('test.txt','w', encoding='utf-8') as fp:
  fp.write('愛你, люблю тебя, 사랑해요, 愛しています, love you')

with open('test.txt','w', encoding='utf-8-sig') as fp:
  fp.write('愛你, люблю тебя, 사랑해요, 愛しています, love you')

utf-8 與 utf-8-sig 有什么區(qū)別？

• utf-8 以字節(jié)為編碼單元，它的字節(jié)順序在所有系統(tǒng)中都是一樣的，沒有字節(jié)序問題，也因此它實際上并不需要 BOM；
• uft-8-sig 中 sig 全拼為 signature，即帶有簽名的 utf-8（UTF-8 with BOM）；
• BOM 全稱 ByteOrder Mark，字節(jié)順序標記，出現(xiàn)在文本文件頭部，Unicode編碼標準中用于標識文件是采用哪種格式的編碼。

為什么寫入 csv 文件要用 utf-8-sig 編碼？

• Excel 在讀取 csv 文件的時候是通過讀取文件頭上的 BOM 來識別編碼的，如果文件頭無 BOM 信息，則默認按照 Unicode 編碼讀取。
• 當我們使用 utf-8 編碼來生成 csv 文件的時候，并沒有生成 BOM 信息，Excel 就會自動按照 Unicode 編碼讀取，就會出現(xiàn)亂碼問題了。

為什么寫入 txt 文件要用 utf-8 編碼？

在寫入 txt 文件時，Windows 會默認轉(zhuǎn)碼成 gbk，遇到某些 gbk 不支持的字符就會報錯，在打開文件時就聲明編碼方式為 utf-8 就能避免這個錯誤。

知識點擴展：

utf-8和utf-8-sig的區(qū)別

前言：在寫入csv文件中，出現(xiàn)了亂碼的問題。

解決：utf-8 改為utf-8-sig

區(qū)別如下：

1、”utf-8“ 是以字節(jié)為編碼單元,它的字節(jié)順序在所有系統(tǒng)中都是一樣的,沒有字節(jié)序問題,因此它不需要BOM,所以當用"utf-8"編碼方式讀取帶有BOM的文件時,它會把BOM當做是文件內(nèi)容來處理, 也就會發(fā)生類似上邊的錯誤.

2、“uft-8-sig"中sig全拼為 signature 也就是"帶有簽名的utf-8”, 因此"utf-8-sig"讀取帶有BOM的"utf-8文件時"會把BOM單獨處理,與文本內(nèi)容隔離開,也是我們期望的結(jié)果.

總結(jié)

以上所述是小編給大家介紹的Python利用 utf-8-sig 編碼格式解決寫入 csv 文件亂碼問題，希望對大家有所幫助，也非常感謝大家對腳本之家網(wǎng)站的支持！

最新評論