探索和分析大數據的體系結構

Question

我們計劃爲一大組事件（大約數百萬）構建數據探索系統。 事件由時間，緯度/經度座標和一些其他屬性組成，這些屬性具有類型和userId等域限制值。

的目標是提供數據的可視化上三米板：

• 地圖（標記或在熱圖聚集事件）
• 時間直方圖（按日期事件的分佈）
• 屬性直方圖（屬性的直方圖：類型，用戶，......）

用戶將交互通過對屬性（小面），時間間隔或空間範圍濾波向下鑽取數據。

我們正在考慮使用OLAP服務器，但不知道這是否是最合適的解決方案。

哪個體系結構/系統可以在如此龐大的數據集上處理此操作？ 有關於此的任何經驗或建議？優選用開源組件。

感謝

Answer 1

形式上，MathGL可以辦理（變更，使柱狀圖，曲線圖等），這樣的數據很容易地設置。通常情況下我繪製更大的數據集（高達幾Gb或大於1e8的數字）。 MathGL是免費的（GPL和部分LGPL）繪圖庫。