存儲數據 - 進入實體屬性的大列表

Question

我在我的應用程序中運行一個履帶後端，每天都會爲數據挖掘一些網站。

對於我抓取的每個網站，我創建一個實體，存儲一個大的String id列表。

• 近似值大約爲2.000每個實體。
• 約爲實體每天。

我現在這樣做的方式是重複ndb.StringProperty（）沒有索引。

運行3天后，它消耗了我數據存儲區的70％。

接下來要做什麼？將它們存儲爲壓縮的json？

將它們存儲在blobstore中，並且每次讀取blob等？

還有其他的東西嗎？替代？

Answer 1

壓縮和JSON爲我做了伎倆。關閉這個。