是否可以通過https從Google Dataflow連接到互聯網？

Question

我想在使用ETL之前使用管道將Google存儲中的文檔發送到從中提取數據的Web服務。

Answer 1

是的，完全可以通過Google Cloud Dataflow通過HTTPS連接到其他Web服務。您可以在Dataflow轉換中爲您的Web服務創建儘可能多的HTTPS請求。

在另一個說明中，我建議將數據提取邏輯寫爲Dataflow轉換以獲得更快的結果。在執行HTTPS請求並將文件從Google Cloud Storage發送到Web端點（假定不在GCP中）時，應考慮出口成本。