如何分析非結構化文本？

Question

我使用TF-IDF來影響可以幫助我構建字典的重量。但我的模型不夠好，因爲我有非結構化文本。

有關TF-IDF類似算法的任何建議？

Answer 1

當你說，你的模型不夠好，這是否意味着你生成的字典不夠好？使用TF-IDF權重提取關鍵詞並構建詞典實際上是特徵選擇步驟。

要爲您的模型提取或選擇特徵，您可以遵循其他方法，如主成分分析，潛在語義分析等。機器學習中的很多其他特徵選擇技術也可能有用！

但是我真的相信情感分類任務，TF-IDF應該是構建字典的一個很好的方法。我建議您在訓練時調整模型參數，而不要責怪特徵選擇方法。

有許多深度學習技巧，以及適用於您的目標任務。