large-files

    1熱度

    3回答

    我有一個相當大的文件(1.5億行10個字符)。我需要將它分成兩百萬行150個文件,每個輸出行可以是源行的前5個字符或後5個字符。 我可以在Perl中快速執行此操作,但我想知道是否有使用bash的簡單解決方案。 任何想法?

    13熱度

    7回答

    是否有可以處理大於可用RAM的文件的分佈式版本控制系統(git,bazaar,mercurial,darcs等)? 我需要能夠提交較大的二進制文件(即數據集,源視頻/圖像,檔案),但我不需要能夠區分它們,只需提交併更新文件即可變化。 我上次在一年前看過這個,沒有明顯的候選人允許這樣做,因爲它們都是爲了速度而設計的。這爲我留下了一個VCS,用於管理大型文件的代碼和其他內容(「資產管理」軟件或rsyn