從cron作業運行pandas.io.gbq

Question

我已經整理了一個腳本來查詢本地API以及Google BigQuery，在這裏我使用pandas.io.gbq將查詢傳遞給BigQuery並將它們返回給熊貓dataframes。例如。

raw_page_id_date = gbq.read_gbq(query, project_id=project_id, dialect='standard') 

    gbq.to_gbq(raw_page_id_date, destination_table='ohalloranb.raw_page_id_date', project_id='tmg-data-science-dev', verbose=True, reauth=False, if_exists='replace', private_key=None) 

腳本從命令行運行時正確運行 - 它查詢API和BigQuery並按預期輸出輸出。但是，當我嘗試將它作爲cron作業運行時，我遇到了問題。第一部分 - 查詢本地API運行沒有問題。然而，它碰到BigQuery查詢時崩潰了：

raw_page_id_date = gbq.read_gbq(query, project_id=project_id, dialect='standard') 

    TypeError: read_gbq() got an unexpected keyword argument 'dialect' 

這是一個身份驗證問題，還是其他？

Answer 1

聽起來像cron作業正在使用不同於您在命令行中使用的pandas版本。 read_gbq的dialect選項爲added in version 0.19.0。您可能想嘗試讓您的cron作業打印版本號 - 如果它小於0.19.0，請改爲使用更新版本。