WDS:基于词向量的文本相似函数

摘要：

为进一步提高文本相似度计算的准确性,在系统相似函数的架构下,提出了基于词向量的文本相似函数WDS(Word Documents Similarity)及其优化算法FWDS(Fast Word Documents Similarity).该函数将文本词语集合对应的词向量集合看作系统,将词语对应的词向量看作系统的元素,则两个文本相似度就是两个向量集合的相似度.在具体计算时,以第一个向量集合为标准进行两个向量集合的对齐操作,同时计算相似元与非相似元的多个参数.实验结果表明,随着文本长度的增加,与WMD和WJ算法相比,WDS表现出了较高的命中率.

关键词：文本相似、词向量、系统相似函数、相似元、权值

所属期刊栏目：45

分类号：TP301.6(计算技术、计算机技术)

资助基金：国家自然科学基金资助项目61402165,S1651002;湖南省重点研发计划2016JC2018

在线出版日期：2018-12-18（万方平台首次上网日期，不代表论文的发表时间）

页数：共4页

页码：113-116