文档名:面向搜索的微博短文本语义建模方法
微博中包含大量具有时间、用户等信息的短文本数据,通过挖掘其语义信息来实现精准搜索已受到广泛关注.将传统的主题模型应用于微博短文本语义建模时通常会存在以下问题.一方面,微博的短文本会引起语义稀疏性;另一方面,由于传统的主题模型仅建模文档之间的信息,不能充分挖掘文档内部的上下文信息,因此其仅能捕获全局语义.针对以上问题,文中提出了面向搜索的微博短文本语义建模方法.该方法包含两部分,基于词向量的短文本扩展算法和基于扩展的微博主题模型.所提扩展算法以具有局部语义的词向量为基础,通过计算单词间相似度对微博短文本进行扩展,以此缓解短文本语义稀疏性并实现局部语义与全局语义的相互补充.所提主题模型以扩展后的长文本作为输入,通过建模双词进一步克服语义稀疏性,并同时利用微博多种特征(文本、时间、用户信息)来约束主题的生成过程从而提高短文本语义表示的质量.文章在真实的新浪微博数据集上进行了多组实验,对所提语义建模方法得到的语义表示进行了分析与评价并将其应用于微博搜索,实验结果验证了所提方法的有效性.
作者:寇菲菲杜军平石岩松杨从先崔婉秋梁美玉石磊
作者单位:北京邮电大学智能通信软件与多媒体北京市重点实验室,计算机学院,北京100876
母体文献:第六届中国计算机学会大数据学术会议论文集
会议名称:第六届中国计算机学会大数据学术会议
会议时间:2018年10月11日
会议地点:西安
主办单位:中国计算机学会
语种:chi
分类号:
关键词:短文本 语义建模 主题模型 语义表示
在线出版日期:2020年11月30日
基金项目:
相似文献
相关博文
- 文件大小:
- 1.17 MB
- 下载次数:
- 60
-
高速下载
|
|