基于詞向量和EMD距離的短文本聚類

摘要:短文本聚類在數(shù)據(jù)挖掘中發(fā)揮著重要的作用,傳統(tǒng)的短文本聚類模型存在維度高、數(shù)據(jù)稀疏和缺乏語義信息等問題,針對互聯(lián)網(wǎng)短文本特征稀疏、語義存在奇異性和動態(tài)性而導(dǎo)致的短文本聚類性能較差的問題,提出了一種基于特征詞向量的文本表示和基于特征詞移動距離的短文本聚類算法。首先使用Skip—gram模型(Continuous Skipgram Model)在大規(guī)模語料中韌I練得到表示特征詞語義的詞向量;然后利用歐式距離計算特征詞相似度,引入EMD(Earth Mover,SDistance)來計算短文本間的相似度;最后將其應(yīng)用到Kmeans聚類算法中實現(xiàn)短文本聚類。在3個數(shù)據(jù)集上進行的評測結(jié)果表明,效果優(yōu)于傳統(tǒng)的聚類算法。

關(guān)鍵詞:
  • 短文本  
  • emd距離  
  • 詞向量  
  • 相似度計算  
  • 聚類  
作者:
黃棟; 徐博; 許侃; 林鴻飛; 楊志豪
單位:
大連理工大學(xué)信息檢索研究室; 遼寧大連116023
刊名:
山東大學(xué)學(xué)報·理學(xué)版

注:因版權(quán)方要求,不能公開全文,如需全文,請咨詢雜志社

山東大學(xué)學(xué)報·理學(xué)版緊跟學(xué)術(shù)前沿,緊貼讀者,國內(nèi)刊號為:37-1389/N。堅持指導(dǎo)性與實用性相結(jié)合的原則,創(chuàng)辦于1951年,雜志在全國同類期刊中發(fā)行數(shù)量名列前茅。

主站蜘蛛池模板: 男女乱婬真视频| 天海翼一区二区三区高清视频| 无翼乌无遮挡h肉挤奶百合| 孩交精品xxxx视频视频| 国产精品亚洲欧美大片在线看| 喝乖女的奶水h1v| 亚洲另类无码专区丝袜| 中文字幕欧美日韩| 男女下面一进一出视频在线观看| 美女内射无套日韩免费播放| 欧美亚洲视频一区| 女人扒下裤让男人桶到爽| 国产成人精品999在线观看| 人人澡人人澡人人看| 久久久久久国产精品视频| 2021果冻传媒剧情在线观看| 精品日本一区二区三区在线观看| 最近免费韩国电影hd无吗高清| 奇米第四色在线播放| 国产亚洲精品无码专区| 亚洲国产成人精品激情| eeuss影院机在线播放| 色综合久久久久久久久久| 欧美一级做一级做片性十三| 夫妇交换3中文字幕| 国产jizzjizz免费看jizz| 九九久久精品无码专区| 91精品国产综合久久香蕉| 精品国产麻豆免费网站| 日本插曲的痛的30分钟| 国产精品v欧美精品∨日韩| 亚洲综合国产一区二区三区 | 晚上睡不着来b站一次看过瘾| 在线观看视频中文字幕| 四虎4hu永久在线观看| 久久精品国产亚洲AV麻豆不卡 | 窝窝视频成人影院午夜在线| 日本高清二三四本2021| 国产精品12页| 亚洲日韩国产精品无码av| av在线亚洲男人的天堂|