1
我用sklearn和gensim應用了lda。然後我檢查了數據的困惑。SKlearn LDA與Gensim LDA的困惑對比問題
我對gensim的困惑和對於sklearn perpleixy的正面價值有越來越多的價值。我如何比較這些值。
sklearn困惑= 417185.466838
gensim困惑= -9212485.38144
A
回答
0
爲了比較，你需要使用np.exp(-1. * gensim_model.log_perplexity(train_corpus))轉換gensim的困惑困惑。
有關Gensim和Sklearn LDA實現的一般比較，請參見here。
相關問題
- 1. LDA for tags（gensim）
- 2. Gensim LDA主題分配
- 3. Gensim LDA alpha參數
- 4. sklearn LDA獨特的標籤問題
- 5. sklearn lda gridsearchcv與管道
- 6. Spring LDA：與contextSource Bean有關的問題
- 7. 使用sсikit-learn TfIdf和gensim LDA
- 8. 如何解讀Sklearn LDA困惑評分。爲什麼它隨着話題數量的增加而不斷增加？
- 9. 如何在gensim中的LDA模型中獲得主題編號
- 10. 分類LDA與TFIDF
- 11. 如何從gensim打印LDA主題模型？ Python
- 12. 使用lda for vowpal wabbit的問題
- 13. 用LDA預測主題
- 14. LDA和主題模型
- 15. 瞭解Lapack_row_major和Lapack_col_major與LDA
- 16. 爲什麼報告Spark mllib中LDA模型的日誌困惑太慢？
- 17. 在Gensim中瞭解LDA轉換後的語料庫
- 18. 使用gensim庫進行內存高效的LDA培訓
- 19. 將LDA應用於使用gensim進行訓練的語料庫
- 20. 未能在gensim中修復LDA模型中的種子值
- 21. LDA/LSI在Gensim中使用預定義主題列表進行主題建模
- 22. LDA解釋
- 23. R topicmodels LDA
- 24. fasttext和LDA之間的比較
- 25. 如何在gensim的LDA主題中打印出單詞的完整分佈？
- 26. 使用Spark LDA可視化主題
- 27. 如何使用gensim包初始化一組種子詞LDA
- 28. 如何在新聞報道上使用gensim for lda？
- 29. gensim LDA模塊：在預測時始終獲得統一的主題分佈
- 30. 如何使用gensim LDA獲取文檔的完整主題分佈？
你是如何獲得這兩個困惑？ – MMF
@MMF在sklearn中： - lda.perplexity（doc_test）和gensim： - ldamodel.bound（doc_test） – MachoMan