amazon-redshift

7熱度

1回答

是否可以通過java jdbc連接從S3到Redshift激發複製命令？實施例：拷貝從 'S3：//' 測試CREDENTIALS 'aws_access_key_id = XXXXXXX; aws_secret_access_key = XXXXXXXXX'

5熱度

1回答

如何將RedShift查詢的輸出用作EMR作業的輸入？

所以我有限的瞭解紅移，這是我的計劃去我的問題...... 我要帶一個查詢的結果，並用它們作爲電子病歷工作的投入。這個程序化的最佳途徑是什麼？當前，我的EMR作業將S3中的平面文件作爲輸入，並使用Amazon Java SDK來設置此作業和所有內容。我應該將RedShift查詢的輸出寫入S3，並將EMR作業指向那裏，然後在EMR作業完成後刪除文件？或者RedShift和AWS SKD是否提供了

4熱度

3回答

將壓縮文件插入RedShift

我有一個壓縮的s3文件。我想將它插入到RedShift數據庫中。我的研究發現這樣做的唯一方法是啓動一個ec2實例。將文件移到那裏，解壓縮，然後發回S3。然後將其插入到我的RedShift表中。但我試圖從外部機器的JavaSDK完成這一切，並且不想使用Ec2實例。有沒有辦法讓EMR作業解壓文件？或者將壓縮文件直接插入RedShift？文件的.zip文件不.GZIP

1熱度

2回答

將Alexa數據導入亞馬遜RedShift

我已經將每日轉儲文件取出並解壓縮，然後將其放回到s3上。當我嘗試做PostgreSQL中複製聲明我收到以下錯誤 Missing newline: Unexpected character 0x14 found at location 4 查詢： copy temp from 's3://bucket/top-1m.csv' credentials 'blah blah blah'; 難道

21熱度

4回答

如何使用alter命令在aws紅移中添加排序鍵排序鍵

我想將排序鍵添加到表中的列但創建表。所以有什麼命令我們可以將排序鍵添加到列（字段）。在此先感謝。

2熱度

2回答

計算同一列中兩個日期之間的日期

我有兩個表，並且對於table1中的每個ID和級別組合，我需要在table1中級別的連續時間之間獲得匹配ID的次數出現在table2中。因此，例如，對於表1中的ID = 1和Level = 1，來自table2的ID = 1的兩個時間條目落在表1中的時間級別= 1和級別= 2之間，因此結果在結果中爲2表。 table1: ID Level Time 1 1 6/7/13 7:03 1 2

0熱度

1回答

在AWS中使用boto創建羣集Reshift

obj = boto.redshift.layer1.RedshiftConnection() obj.create_cluster( cluster_identifier='bototest', node_type='dw.hsl.xlarge', master_username='suresh', master_user_password='Suresh

0熱度

1回答

優化PostgreSql查詢來獲取找到的總記錄數和所需的有限的行數基於多個分組的

我有這個查詢，我試圖獲得基於給定的過濾器的記錄總數並嘗試在單個查詢中獲取分頁所需的有限數量的數據。早些時候，我在兩個步驟做這其中i計算出的第一款基於 Optimising Select number of rows in PostgreSql for multiple group by fields 記錄數，然後根據頁面大小有不同的查詢所需的行數和偏移需要 EXPLAIN select coun

0熱度

1回答

將大型數據從vertica遷移到redshift的最佳方式是什麼？

我們在AWS上託管了vertica，並且該數據庫的總大小爲500GB。那麼將數據從vertica遷移到redshift最快的方法是什麼？一個方法將是 1.出口Vertica的數據至S3 2.負載從S3的數據紅移。有沒有更好的方法？

1熱度

1回答

RedShift/PostgreSQL中的串行類型的替代

我實際上正在嘗試使Rails與RedShift一起工作，並面臨Rails默認索引的一些問題。我的工作基於repo activerecord-redshift-adapter。默認情況下，Rails使用SERIAL類型來創建他的主鍵。不幸的是，這是RedShift沒有報告的。所以我實際上試圖找到這種SERIAL類型的替代方案，然後在找到可行的解決方案後再分叉回購。我正在考慮一個BIGINT，從什麼