Android閱讀大文件

Question

我有一個CSV文件，資產文件夾中有超過10000行數據。我想在創建數據庫時將這些數據插入到SQLite數據庫中。我不能包含數據庫，因爲它是一個非常通用的應用程序，而該模型需要一個CSV文件。我不想讀取所有10000行數據並在一段時間內將其從內存中插入。我如何有效和高效地完成任務？

Answer 1

只要插入立即一旦你讀完了這一行。所以，不要將行存儲在某個數組列表中。

E.g.

while ((line = reader.readLine()) != null) { 
    insert(line); 
} 

您可能希望在單個事務中執行此操作，以便在半途中斷時可以回滾。在JDBC方面，您可能想要考慮PreparedStatement#addBatch()/#executeBatch()批量執行插入。一個例子可以在this answer中找到。

更新：作爲一個完全不同但更高效的替代方案，您還可以將Java留在故事之外並使用CSV import facility provided by SQLite。

Answer 2

最簡單，最有效的在這種情況下，是一次從文件中讀取20-30-50（或者100？）線，並插入到數據庫中，但是你也需要運行一些測試來看到的是，你可以在1個隨時隨地瀏覽線的最佳數量，然後實現它:-)

Answer 3

IMPORT名錶名

（從http://old.nabble.com/How-can-I-load-big-file-into-a-sqlite-database--td19202500.html - 像LOAD DATA在mysql中）。

其他： 禁用自動提交，自動沖洗;讀20行，提交，刷新。