有效
自适应潜在狄利克雷模型选择的方法及装置
摘要
本发明提供一种自适应潜在狄利克雷模型选择的方法及装置,其中的方法根据语料库规模初始化一个经验主题个数K,通过计算LDA模型的主题‑词概率分布的平均余弦距离相似性测度不断更新主题个数K,通过若干轮迭代计算得到相对于初始主题个数更适合当前语料库的K值,并输出对应的LDA模型作为最终的结果模型。通过动态调整主题个数K,在一定程度上避免了因个人经验主观设置K导致的模型不合理问题,提高了模型的精度。
本发明提供一种自适应潜在狄利克雷模型选择的方法及装置,其中的方法根据语料库规模初始化一个经验主题个数K,通过计算LDA模型的主题‑词概率分布的平均余弦距离相似性测度不断更新主题个数K,通过若干轮迭代计算得到相对于初始主题个数更适合当前语料库的K值,并输出对应的LDA模型作为最终的结果模型。通过动态调整主题个数K,在一定程度上避免了因个人经验主观设置K导致的模型不合理问题,提高了模型的精度。