將數據從Redshift複製到ElasticSearch

Question

我們有大量存儲在ES羣集上的數據。我需要向ES羣集添加一個字段，並從Redshift表的列中爲該字段上傳數據。我從來沒有使用過這樣的數據傳輸，我是AWS新手，不確定如何處理這個任務，以及我應該閱讀什麼來執行這種數據傳輸。你知道什麼是最好的方法嗎？

Answer 1

如果是，那麼您是否正在使用logstash執行數據操作，然後您可以輕鬆地在logstash中添加列。並從頭開始重新啓動鎖定，以便將附加列數據提取到索引中。讓我知道你目前的設置。

Answer 2

據我所知，你想從elasticssearch集羣轉儲數據並將其加載到紅移。 這裏是一個方法，我將採取：使用

• 轉儲數據從elasticsearch：https://github.com/taskrabbit/elasticsearch-dump
• 複製JSON文件S3：使用AWS CLI
• 複製從S3 JSON文件紅移使用：https://docs.aws.amazon.com/redshift/latest/dg/copy-usage_notes-copy-from-json.html