集文件系統編碼蟒3上的英特爾愛迪生

Question

重現步驟：

1. 創建文件test.txt與內容This is 中文（即UTF-8編碼的非ASCII文本）。
2. 在英特爾Edison上自定義編譯python 3.5.2。

3. 啓動自定義編譯python3解釋，併發出以下一段代碼：

   with open('test.txt', 'r') as fh: 
       fh.readlines() 
   

實際行爲：

一個UnicodeDecodeError拋出異常。該文件默認打開爲「ASCII」而不是「UTF-8」：

UnicodeDecodeError: 'ascii' codec can't decode byte 0xe4 in position 8: ordinal not in range(128) 

在「常規」 Linux系統這個問題很容易通過設置適當的語言環境來解決，例如見this post或that post。但是，在Intel Edison上，由於默認的Yocto Linux發行版缺少語言環境，因此無法設置LC_CTYPE（請參閱，例如this page）。

我還試圖用其他幾個黑客像

import sys; sys.getfilesystemencoding = lambda: 'UTF-8' 
import locale; locale.getpreferredencoding = lambda: 'utf-8' 

我試着開始Python解釋器之前設置PYTHONIOENCODING=utf8環境變量。

但是，這些都不起作用。唯一的解決方法是將編碼明確指定爲open命令的命令行參數。這適用於上面的代碼片段，但它不會爲我使用的所有軟件包設置系統範圍的默認值（這會隱式地將文件作爲ASCII打開，可能會或可能不會爲我們提供覆蓋默認行爲的方法）。

什麼是設置python解釋器默認文件系統編碼的正確方法？ （當然了，無需安裝不需要的系統範圍內的區域設置）

Answer 1

可以設置LC_ALL環境變量來改變默認：

$ python3 -c 'import locale; print(locale.getpreferredencoding())' 
UTF-8 
$ LC_ALL='.ASCII' python3 -c 'import locale; print(locale.getpreferredencoding())' 
US-ASCII 

我測試這兩種在OS X和CentOS 7

至於你的其他嘗試，這是爲什麼他們不工作：

• sys.getfilesystemencoding()適用於僅文件名（如os.listdir()和朋友）。
• io模塊實際上並未使用locale.getpreferrredencoding()函數，因此更改模塊上的函數將不起作用。代替使用輕量級的_bootlocale.py bootstrap module。更多關於下面的內容。
• PYTHONIOENCODING僅適用於sys.stdin，sys.stdout和sys.stdstderr

如果設置環境變量的最終失敗，你仍然可以修補_bootlocale模塊：

import _bootlocale 

old = _bootlocale.getpreferredencoding # so you can restore 
_bootlocale.getpreferredencoding = lambda *args: 'UTF-8' 

這又爲我工作（在OS X和CentOS 7，使用3.6測試）：

>>> import _bootlocale 
>>> open('/tmp/test.txt', 'w').encoding # showing pre-patch setting 
'UTF-8' 
>>> old = _bootlocale.getpreferredencoding 
>>> _bootlocale.getpreferredencoding = lambda *a: 'ASCII' 
>>> open('/tmp/test.txt', 'w').encoding # gimped hook 
'ASCII'