如何确定LDA主题模型中的主题个数?

  统计/机器学习 无监督学习 自然语言处理 开放问题    浏览次数:9190        分享
1

LDA主题模型需要预先设定好主题的个数,那么该如何确定?有什么通用的方法吗?

 

waccam   2018-08-30 13:30



   1个回答 
3

可以用coherence scores来确定,具体方法类似于k means的手肘法,然后利用coherence scores去找拐点。


python里可以用gensim实现lda的主体个数选取

SofaSofa数据科学社区DS面试题库 DS面经

sasa   2019-01-01 05:48

谢谢分享,可以试试 - waccam   2019-01-04 14:38


  相关讨论

潜语义分析中,向量空间的表示是从哪里变换到哪里?

自然语言处理中的分词是什么意思?

NLP里的OOV是什么意思?

怎么识别“的”“地”“得”是否用错?

求推荐条件随机场(CRF)的python package

k均值有用到EM的思想吗?

HDBSCAN和DBSCAN这两种聚类方法有什么区别?

可以把多个文档、段落向量直接加和求平均来获得新的表示向量吗?

一维的数据可以做聚类吗?

有没有对聚类成员个数有限制的聚类算法?

  随便看看

怎么把pandas.DataFrame转成torch.tensor的格式?

如何理解VC dimension?

决策树、随机森林中的多重共线性问题

python去掉中文文本中所有的标点符号

如何获取pyspark DataFrame的行数和列数?