使用未經訓練的摘要模型

Question

這裏描述的張量流文本摘要模型https://github.com/tensorflow/models/tree/master/textsum需要多GPU架構才能訓練。我多次嘗試訓練模型導致內存異常，出於各種原因機器崩潰。訓練有素的總結模型是否可以使用匯總模型而無需進行培訓？如果訓練有素的模型不能從Google獲得，則使用非免費的Gigaword數據集對摘要模型進行訓練，這是爲什麼？

Answer 1

所以，據我所知，沒有人把訓練有素的模型放在那裏。我也是最初遇到我的MacBook Pro的內存問題，並最終結束了使用我的遊戲筆記本電腦，有一個更好的GPU。

當然其他選擇是利用AWS並使用類似他們的g2.2xlarge實例。他們也有他們的P2實例，但我還沒有檢查出來。

關於Gigaword數據集，它只是歸結爲授權。它不是LDC的免費許可證，並且經常有許多從事這方面工作的學者通過他們的大學或公司向他們提供數據集。我還沒有找到它的運氣，但最不發達國家確實回到我身邊，並建議他們確實有其他文章數據集，其價格約爲300美元，這對於僅僅學習TF的用戶來說更合理。也就是說，如果您不想購買任何東西，您可以隨時編寫自己的頁面刮板併爲textsum模型格式化數據。 https://github.com/tensorflow/models/pull/379/files

希望這有助於一些。祝你好運！