八三看书

手机浏览器扫描二维码访问

第341章(第1页)

潜在语义分析模型其基本思想是在得到文本的空间向量表示后。

通过奇异值分解,将高维且稀疏的空间向量映射到低维的潜在语义空间当中。

在得到低维的文本向量和单词向量之后。

再用余弦相似度等度量方式来计算文本间的语义相似度。

潜在语义分析的本质思想就是通过降维来去除原始矩阵中的噪音,从而提高计算准确度。

虽然这种思路不错,但这种方法并没有普适性。

这是因为潜在语义分析模型在架构模型的过程中采用的奇异值分解。

这种做法使得计算复杂度增高,并且可移植性较差。

在这种方法提出来之后。

并不是没人尝试对这种方法进行过改进。

同样是上世纪末。

有研究人员提出了概率潜在语义分析模型。

这种模型是基于概率,而不是基于奇异值分解。

这种模型相比于潜在语义分析模型的主要差异是增加一个主题层。

而后使用期望最大化算法训练主题,并找到一个概率性的潜在主题模型。

以此用来预测文本空间向量中的观察数据。

在这种概率潜在语义分析模型中,多义词被归入不同的主题下,而同义词被归入同一主题下。

这样可以避免同义词和多义词对文本相似度计算的影响。

然而,概率潜在语义分析模型的参数随着文档数量的增加而线性增长。

很容易出现过拟合和泛化不良。

这种情况很大程度又是因为维度爆炸。

因为过拟合只在高维空间中预测相对少的参数和低维空间中预测多参数这两种情况下发生。

一个为了避免维度爆炸而提出的模型却出现了维度爆炸。

多少有点悲剧。

事实上,并不是只有上述两个模型提出来。

这之后还有很多研究团队都在从模型层面的做了不同程度的尝试。

热门小说推荐
捡垃圾

捡垃圾

《捡垃圾》捡垃圾目录全文阅读,主角是许小真顾延野小说章节完整质量高,包含结局、番外。?  《捡垃圾》作者:乌合之宴文案:(一篇古早狗血虐文,三个渣攻的雄竞)许小真,一个挣扎在社会最底层,试图以读书改变命运的身穷志坚beta,深夜捡垃圾的时候捡到个大活人,对方说他叫周延,身世成谜。他一开始期盼对方是个alha,这样还能拿点补助,后来就无所谓了,他寂寞这么久,有个人在身边热闹。许小真拿出积蓄,给周延...

红楼梦之庶子贾环

红楼梦之庶子贾环

他是现代商业奇才,也是红学爱好者。一场意外,他穿越成了红楼梦中的庶子贾环。他熟知红楼人物与情节,在贾府扮猪吃老虎,化解各种危机。他打造商业帝国,带领贾府走向繁荣昌盛;他参加科举成为状元郎,封官加爵,权势滔天;他发动社会变革,创造一个新时代;她获得公主的青睐,成为驸马爷,事业爱情双丰收。......

荒野植被

荒野植被

冷漠+被偏爱的有恃无恐=翻车+追妻 - 沈植X许言 舔狗没有尊严,但是许言有。 即使他当了长达六年的舔狗,可男人的尊严虽迟但到。 他拎着行李不告而别的时候,没想过沈植会来找他。 【一个老套的追回老婆的故事,无逻辑勿深究】...

天幕:狐妖小红娘

天幕:狐妖小红娘

有一天,狐妖世界各个时间段都有人被光幕传送到一个神秘空间内观看光幕。一个篇章的故事结束后,光幕还会给予该故事主角奖励。下沙篇——梵云飞:“对不起!!!下次不敢了!!!”王权篇——王权富贵:“如果我们能活着出去的话……万水千山,你愿意陪我一起看吗?”月红篇——东方月初:“我把一辈子压在那个赌注上……可喜的是,我赌赢了......

我和无数个我

我和无数个我

火影忍者中,呼唤死去之人依凭己身,再现神话时代的战场。妖魔鬼怪的世界当中,亲手打出来一个人道昌隆。魔法界当中,让那些愚蠢的血脉巫师明白,他们根本不理解自己手握何等可怕的生产力。武侠世界当中,给江湖人科普一下什么才叫做武。亦或者,在没有其他超凡之力的世界,享受生活,提升科技,寻求终末之轮回和灵能飞升。能力与信念,自己能够给予自己的,不应该仅仅是一面镜子和工具而已。正所谓人的合作终究是会因为个人的私心,误会和差距而终结。但如果是——自己呢?...

不败战神

不败战神

(又名:不败神婿)五年前,为了能让自己配得上她,他不辞而别。五年后,他携一身惊天本领,荣耀而归,只是归来之时,竟发现自己多了一个女儿。......