最早小说 通过搜索各大小说站为您自动抓取各类小说的最快更新供您阅读!

如何表示数值化的自然语言相对应的属性呢?

研究人员一般做法是将数值化的语言矢量化或者说向量化。

向量相比于标量的话就是带方向的量。

事实上这种研究方向并不算新潮。

林灰记得前世早在1975年,就有研究人员首次提出向量空间模型(VSM),试图利用该模型来处理数值化的自然语言。

林灰通过搜索相关信息,发现这个时空虽然慢了一点,但VSM向量空间模型这个方法在1977年也被提出来了。

所谓的VSM模型听起来或许挺高大上的。

其实没那么复杂。

其主要思想就是假设一个文本的语义只与该文本中的单词有关,而忽略其语序和单词之间的相互关系,然后通过基于词频统计的方法,将文本映射成向量,最后通过向量间的距离计算以表征文本间的相似度。

计算两个向量之间的距离?

这玩意是高中课本上的内容。

估计高考后脑子里知识还没忘记的一般考生都能拿过来利用这个模型算算文本相似度。

不过很多高中生学的时候可能根本不知道他们学的这玩意能做这个。

(ps:……高中学的东西很有用,不要觉得暂时看不到用途就放弃)

当然,也正是由于该模型简单高效。

在该模型提出来之后很长的一段时间里,它都是文本相似度计算领域的主流方法。

但该模型并不是没有缺点。

基于VSM的方法仍然有两点缺陷:

一方面当文本量很大时,生成的文本向量是非常稀疏的,这就导致了空间和计算资源的浪费;

另一方面VSM为达到简化模型的效果忽略了词语间的关系,但在很多情况下词语之间是存在联系的,因此简单地认为词语间相互独立是不合理的。

这两条缺陷尤其致命。

第一条直接影响处理相似度的效率,第二条直接影响词义相似度判别的准确度。

在这种情况下,VSM模型在使用了一段时间之后,研究人员就将这个模型抛弃了。

现在的人们具体应用什么计算文本相似度林灰也不是很清楚。

不过林灰注意到伊芙·卡莉先前发给他的邮件并没有提到向量有关的内容。

时下的研究人员似乎已经淡忘了向量化。

或许现在再说到利用向量化进行自然语言文本处理似乎是一个很复古的研究方向了。

但实际上向量化这个方向仍然有潜力可以挖掘。

应用分布式词向量完全可以进行文本相似度计算。

不过这个时空的人们不知道也很正常。

林灰记得前世涉及到自然语言处理这方面很多重要成果都是2013年、2014年这两年井喷出来的。

前世涉及到文本相似度模型的架构这方面。

用于计算语义文本相似度的分布式词向量这项技术就是就是在2013年诞生的。

前世正是在分布式词向量问世后,语义文本相似度才取得了突破性的进展。

这个时空节奏上慢了两年,应用分布式词向量计算文本相似度没被提出来也很正常。

一步落后,步步落后。

节奏上慢这两年时间的话,这个时空无疑很多方面都落后了。

这些对于林灰无疑是个好消息。

应用分布式词向量来构建计算文本相似度的方法虽然说起来容易。

但具体阐述起来这个问题其实还是比较复杂的。

因此林灰当初并没有在邮件中回复伊芙·卡莉。

如果这个时空涉及到文本相似度模型架构方面的研究都短腿的话。

那林灰岂不是很有义务援助一下?

看来跨时空之搬运工又要上线了。

当然了这种搬运不是无偿的。

眼下林灰更关心的还是论文。

在相关研究出现方向性偏差的情况下,林灰真要写论文的话岂不是很容易就能发表好几篇?

这样水平的论文林灰写起来很容易。

虽然林灰前世学术生涯上没有走太远,但前前后后发的论文加起来大概有七八篇了。

有几篇论文还是全英文的。

总之发表论文这样的事情,对林灰来说已然是轻车熟路。

这种情况下,林灰感觉他很容易就能把麻省理工学院学士学位所要求的附加分刷满。

尽管如此,林灰还是决定先跟伊芙·卡莉见面沟通一下再弄论文相关的事情。

毕竟林灰不是很清楚西方世界在文本相似度研究的具体进展,万一不小心撞车就尴尬了。

商业上的撞车可以美其名曰是商业竞争。

学术上的撞车可是一辈子的污点。

现在林灰只希望能够快点和伊芙·卡莉见面了。

好在林灰期待的见面没多久就发生了。

林灰在北域域北国际机场见到了“伊芙·卡莉”。

伊芙·卡莉先前怕林灰不相信她的身份,于是在邮件里附上了一堆能够佐证身份的证明。

林灰当初就看到过伊芙·卡莉的照片。

不得不说,伊芙·卡莉的样貌很有辨识度。

一头金色微卷的长发,身高目测一七六左右,身材比例很棒,曲线很S。

尽管以挑剔的眼光来看,林灰觉得此时眼前的“伊芙·卡莉”的身材和样貌似乎也能在90分以上。

最关键的是给人一种很纯真的感觉,给人一种不染纤尘的那种感觉。

呃,这种感觉怎么说呢,反正很有保护欲那种。

不过林灰还没那么不淡定。

女人而已,只会影响他肝论文/敲代码的速度。

“伊芙·卡莉”似乎还没发现林灰。

林灰迎着走了上去,主动用英语打招呼道:“你是伊芙·卡莉么?我就是林灰,欢迎来到中国。”

呃,这几句程度的英文林灰还是能应付的。

不过眼前这人反应明显迟疑了一下。

林灰感到很奇怪,莫非是搞错了?

正在林灰很纠结的时候,突然身后传来的声音。

“你就是LIN HUI么?我是伊芙·卡莉,很高兴见到你!”

林灰心想,这下尴尬了。

第一次接人还认错人了。

不过,不应该啊,眼前之人很有辨识度的西方面孔,而且和伊芙·卡莉先前发来的证件照上那女的一模一样啊。

林灰不解地回过头,看向声音来源,又看到了一个“伊芙·卡莉”。

喜欢穿越:2014请大家收藏:(www.zuizaoxiaoshuo.net)穿越:2014最早小说更新速度全网最快。

最早小说推荐阅读: 末世:开局一头基多拉重生圣尊傲娇校花爱上我娱乐:我夺舍了刘星!我分裂了无数人格从大学教师开始野性之心重生资本大亨1979闲鱼人生神豪:从百倍返利开始我的1979华娱科幻之王修复师校园超神学生从废土开始模拟城市女神的超级鳌胥林阳夜的命名术萧阳叶云舒超级王者全能侍卫我的美女大小姐玩游戏玩成大佬我的秘书是狐妖拜见猫神大人都市纵横,从修改旁白开始一人之下之龙血炽腾一个在赎罪的主播我的地头儿我做主从港综街头霸王开始万界点名册美女总裁的最强高手求求你们别再说了大国重工纯情校医至尊战神全文免费阅读娱乐:巨星演员我的冷艳总裁老婆人狐恋护妻霸婿我真不会打网球私生子我震惊了全世界女总裁的神级保镖最高使命华娱之流量影帝超时空评测无心法师:从挖出岳绮罗开始我去末世修个仙全球首富:神级再造系统我的梦幻年代东瀛大物
最早小说搜藏榜: 系统让我捡破烂从全能急诊科医生开始神豪:从百倍返利开始基建:开局给珠峰修电梯重生80:从收破烂开始!神豪:我能百倍返现我爸二婚送了我五个姐姐娱乐:从主持人大赛开始四合院之好好活着从情满四合院开始穿越重生之大收藏家灵气复苏:开局神级武魂娱乐:开局渣了杨老板从港片开始当幕后大佬从代工厂到科技霸主神话复苏:这个神明我认识重生过去的逍遥人生我的细胞变异了中医许阳黄金渔场我每周随机一个新职业神豪:开局购买力增幅百倍我被困在同一天一千年娱乐:开局一首海阔天空娱乐:开局喜当爹!高考结束成百亿神豪我在英伦当贵族高考以后,我才重生全球高武重生过去震八方从网络神豪开始神豪:开局骗了女主播!每168小时获得一个异能从签到获得商业大楼开始我有一个三界拍卖系统无限游戏:十倍奖励重生过去当传奇从大国机长开始亿万富豪从相亲系统开始末日:开局选择时间停止娱乐:巨星演员我,星空巨兽生活系神豪影帝从签到开始全球数据化,我能增幅万物娱乐:开局就和杨老板结婚医路坦途大时代从1983开始修仙从华娱开始万族之劫
最早小说最新小说: 文娱:让你唱歌,你搁这作法?四合院里的老中医地窟求生:开局食物增幅三十倍汽车公司?不,是国货之光再启仙途我的金融帝国热搜第一:叫你捡漏你开挂啊我写的娱乐文被杨老板看到了百元求生:从潘家园捡漏开始带着爸妈去上班娱乐:别联系了,真不熟放弃留学,我打造了世界第一名校从重生开始合租浪在娱乐圈四合院里的唯一老实人韩娱之隔世斑斓怪物食堂首富后才知是反派我的夫妻关系竟能数据化平行空间都市风水师大赌石乾哥传奇神眼少年全能天才混都市绝品全才十二生肖守护神都市无敌特种兵重生圣尊软玉温香极品黑道太子邪霸都市纯情校医校园纨绔特工我的美女上司冰帝校园行护花高手绝品小农民狱锁狂龙3之潜龙出海护花公子全职保安美女校花的贴身高手美女老师爱上我校园超级霸主官运之左右逢源黑客神医贴身美女攻略医道无双极品保镖美女老总爱上我