如何避免顯式解碼內容？

Question

據我所知，.encode('utf-8')是必要的。

# -*- coding: utf-8 -*- 
import urllib2 
url = u'https://fr.wikipedia.org/wiki/Nîmes' 
response = urllib2.urlopen(url.encode('utf-8')) 
content = response.read().decode('utf-8') 
print type(content) 

但是我怎麼避免.decode('utf-8')？畢竟，有問題的頁面在頭文件中正確地聲明瞭它的編碼。

Answer 1

你可以使用requests：

# -*- coding: utf-8 -*- 

import requests 
url = u'https://fr.wikipedia.org/wiki/Nîmes' 
response = requests.get(url) 
content = response.content 
text = response.text 
assert type(content) == str 
assert type(text) == unicode 

Answer 2

正如你在你的問題，你可以從報頭得到的編碼，以避免硬編碼的編碼：

content = response.read().decode(response.headers.getparam('charset'))