文章/答案/技术大牛

发布

社区首页 >问答首页 >Gensim word2vec模型是否与Mikolov的标准模型相同？

问Gensim word2vec模型是否与Mikolov的标准模型相同？
EN

Stack Overflow用户

提问于 2020-04-19 11:28:03

回答 1查看 169关注 0票数 0

我正在写一篇论文来比较我们的表现。在报纸上，尤瑟尔说

300维预训练的word2vec向量(Mikolov等人，2013年)

我想知道预先训练过的word2vec Gensim模型这里是否与官方谷歌网站 (googlenews-vectors-neative300.bin.gz文件)上的预训练嵌入相同。

我的怀疑来源于Gensim文档中的这一行(在Word2Vec演示部分)

我们将获取在Google部分数据集上培训的Word2Vec模型，涵盖大约300万单词和短语

这是否意味着gensim模型没有得到充分的培训？这和Mikolov的官方嵌入有什么不同吗？

nlp

gensim

word2vec

python

回答 1

Stack Overflow用户

回答已采纳

发布于 2020-04-19 18:23:34

用于读取单词向量的演示代码正在下载完全相同的谷歌培训的GoogleNews-vectors-negative300矢量集。(没有其他人能够尝试重新训练这个数据集，因为原始的新闻文章用户语料库是谷歌内部的，如果我没记错的话，2013年前后的培训数据超过100字。)

算法上，gensim Word2Vec实现是按照Google/Mikolov发布的word2vec.c代码建模的，因此应该在任何新训练的向量的可测量方面与其结果相匹配。(线程处理方法的细微差异可能略有不同。)

票数 1

页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持

原文链接：

https://stackoverflow.com/questions/61303579

复制

相似问题

问Gensim word2vec模型是否与Mikolov的标准模型相同？
EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问Gensim word2vec模型是否与Mikolov的标准模型相同？EN

回答 1

Stack Overflow用户

社区

活动

圈层

关于

腾讯云开发者

热门产品

热门推荐

更多推荐

问Gensim word2vec模型是否与Mikolov的标准模型相同？
EN