SAS中數據集的基數排序實現

Question

在我的日常工作中，我經常處理包含數百萬行數據集的數據集，有時數百萬，有時甚至超過10億。這些數據集通常需要進行排序。鍵幾乎總是大整數值（通常是9位數字）。有時數據集具有9位和3位的複合鍵。

我想知道是否可以在SAS中實現（LSD優先）基數排序宏，而不是使用PROC SORT來減少排序這些數據集的時間。我已經調整了適當的壓縮類型，只保留相關的字段（或使用tagsort），大小字段長度的適當，不要排序不必要的等等等等等等等等等等。

我正在使用的硬件有限制 - 讓我們假設我只有2G內存可用於SAS，因此解決方案無需將所有鍵值存儲在內存中的臨時數組中（至少不是一次全部）。

該解決方案將提供一個性能改進而不是proc排序？有沒有人已經實施過這樣的事情，或者有過使用它的經驗？我在浪費時間嗎？

Answer 1

我發現執行（使用臨時數組）基數排序的一些例子在這裏：

http://listserv.uga.edu/cgi-bin/wa?A2=ind9901b&L=sas-l&P=11902

使用這個例子，它看起來好像在SAS新的螺紋排序一些非常寬鬆的假設（9版本+）將在時鐘時間內勝過單線程基數排序。在CPU時間，基數排序仍然表現更好，但這並不算太多。所以我會停止進一步追求這一點。