Postgresql 9.6並行執行從外部表

我將我的postgresql從9.5升級到9.6，以便使用並行執行來提高我的性能。但是，我沒有成功使用它。在我的主數據庫中，幾乎所有的選擇都是這樣的： select * from foreign_table 外部表是位於oracle數據庫上的外部表。一些表格是大10G +和1,000,000+條記錄，所以在這種情況下，並行查詢應該幫助我很多。Postgresql 9.6並行執行從外部表

，我配置的參數：

min_parallel_relation_size = 200MB 
max_parallel_workers_per_gather = 2 
max_worker_processes = 8

當我嘗試使用解釋分析SELECT * FROM一張大桌子，她的大小爲1.5G，並擁有500萬點的記錄我看到的唯一的外國掃描：

Foreign Scan on customer_prod (cost=10000.00..20000.00 rows=1000 
width=2438) (actual time=6.337..231408.085 rows=5770616 loops 
=1) 
    Oracle query: ...... 
Planning time: 2.827 ms 
Execution time: 232198.137 ms

*我也試過select_ from foreign_table，其中1 = 1但結果仍然相同。

在另一方面接下來的代碼工作：

postgres=# CREATE TABLE people_mariel_test (id int PRIMARY KEY NOT NULL, age int NOT NULL); 
    CREATE TABLE 
    postgres=# INSERT INTO people_mariel_test SELECT id, (random()*100)::integer AS age FROM generate_series(1,10000000) AS id; 
    INSERT 0 10000000 
    postgres=# explain analyze select * from people_mariel_test where age=6; 
                  QUERY PLAN 

    -------------------------------------------------------------------------------- 
    ------------------------------------------------ 
    ---------- 
    Gather (cost=1000.00..123777.76 rows=50000 width=8) (actual  time=0.239..771.801 rows=99409 loops=1) 
     Workers Planned: 1 
     Workers Launched: 1 
     -> Parallel Seq Scan on people_mariel_test (cost=0.00..117777.76 rows=29412 width=8) (actual time=0.045..748.213 rows=49704 
    loops=2) 
    Filter: (age = 6) 
    Rows Removed by Filter: 4950296 
    Planning time: 0.261 ms 
    Execution time: 785.924 ms 
    (8 rows)

任何想法，我該怎麼繼續？

來源

2017-08-02 Mariel

添加'ora_fdw'標籤並希望得到Laurenz的關注。但我非常懷疑，postgres並行執行設置不會影響擴展 –

從documentation：

甲ForeignScan節點可以，可選地，支持並行執行。 A 並行的ForeignScan將在多個進程中執行，並且在所有協作進程中只返回一行。要做到這一點，進程可以通過固定大小的動態塊共享內存進行協調。這個共享內存不保證映射到每個進程中相同的地址，因此指針可能不會被使用。回調後的通常都是可選的，，但如果要支持並行執行，則需要。

我已經通過Laurenz Albe搜索了Oracle FDW的源代碼，但它沒有執行IsForeignScanParallelSafe，因此無法使用並行執行。

來源

2017-08-02 12:06:58

謝謝盧卡斯。狗屎，如果是這種情況，我可以改善性能嗎？ – Mariel

取決於你正在用這些數據做什麼。它可以單獨處理（分區）嗎？你可以在Oracle服務器上創建實際的分區嗎？你可以嘗試一些[備用並行擴展]（https://pgxn.org/dist/pmpp/doc/pmpp.html）或自己製作。 –

嗨，我不能讓這些表的分區在oracle服務器。當你寫「製作你自己的」時，你打算寫一個擴展名？一般來說，我只是從oracle服務器中的70個表中選擇*到本地postgresql表中。 – Mariel

Postgresql 9.6並行執行從外部表

回答

相關問題