UnicodeDecodeError錯誤：「ASCII」編解碼器不能在位置19進行解碼字節0xc3：在範圍序數不（128）

再次發佈作爲以前的帖子在它有API令牌。我從一個網站刮的數據：這裏是代碼：UnicodeDecodeError錯誤：「ASCII」編解碼器不能在位置19進行解碼字節0xc3：在範圍序數不（128）

reload(sys) 
sys.setdefaultencoding('utf-8-sig') 

def __unicode__(self): 
    return unicode(self.some_field) or u'' 
def daterange(start_date, end_date): 
    for n in range(int ((end_date - start_date).days)): 
     yield start_date + timedelta(n+1) 
#def is_ascii(s): 
    #return all(ord(c) < 128 for c in s) 
date='' 
min_date='' 
max_date='' 
if sys.argv[1] == 'today': 
    min_date = datetime.today() - timedelta(1) 
    max_date = datetime.today() 
elif sys.argv[1] == 'yesterday': 
    min_date = datetime.today() - timedelta(2) 
    max_date = datetime.today() - timedelta(1) 
else: 
    min_date = datetime.strptime(sys.argv[1], "%Y-%m-%d") - timedelta(1) 
    max_date = datetime.strptime(sys.argv[2], "%Y-%m-%d") 
siteIDs = [37] 
for id in siteIDs: 
    for date in daterange(min_date, max_date): 
     response_data = {} 
     url = 'http://survey.modul.ac.at/piwikAnalytics/?module=API&method=Live.getLastVisitsDetails&idSite=' + str(id) + '&format=csv&token_auth=' + token_auth + '&period=day&date=' + date.strftime('%Y-%m-%d') + '&filter_limit=2000' 
     try: 
      response=requests.get(url,timeout=100) 
      response_url=response.url 
      response_data=urllib.urlopen(url) 

     except (requests.exceptions.Timeout,requests.exceptions.RequestException,requests.exceptions.HTTPError,requests.exceptions.ConnectionError,socket.error) as e : 
      response_data="error" 
     with codecs.open('raw_csv/piwik_'+ str(id) + '_' + date.strftime('%Y-%m-%d')+ '.csv', 'wb',encoding='utf-8-sig') as fp: 
       fp.write(response.text)

在輸出列「idSite」被顯示爲「我»¿ï»¿idSite」。我試圖通過下面的代碼將其刪除：

import pandas as pd 

df = pd.read_csv("piwik_37_2016-07-08.csv", dtype = "unicode", encoding="utf-8-sig") 
df.to_csv("abc.csv")

但我正在逐漸上述的Unicode錯誤

來源

2016-07-10 Diganta Bharali

的[有一種簡單的方法，使在python unicode的工作？（可能的複製http://stackoverflow.com/questions/12556839/is-there-an-easy-方式對做-UNICO去工作在蟒蛇） –

當您執行讀取操作得到的Unicode值。在寫入csv文件之前，需要將這些Unicode字符轉換爲字節。所以，你必須這樣做：'df.to_csv（「abc.csv」，encoding ='utf-8'）' –

一種強制方法從字符串中刪除所有非ASCII字符是：

import re 
# substitute sequence of non-ASCII characters with single space 
str = re.sub(r'[^\x00-\x7F]+',' ', str)

希望幫助你的情況

來源

2016-07-10 01:20:07 Kevin

UnicodeDecodeError錯誤：「ASCII」編解碼器不能在位置19進行解碼字節0xc3：在範圍序數不（128）

回答

相關問題