我使用elasticsearch来组合不同的东西：-基于密集向量(余弦相似度)的文本得分搜索。我的问题是，在查询阶段不计算余弦相似度，我在文本中的搜索充当预筛选器。我将始终获得结果链接到文本搜索，即使余弦相似更好。例如，如果一个score函数在计算
浏览 1提问于2020-01-29得票数 1
回答已采纳
1回答
基本上，我想知道的是一个特定的句子/文档与我的训练语料库有多相似。假设我有一个训练语料库，里面充满了关于狗的文本。如果我想检查“飞机有100个座位”这句话与训练语料库的相似度，我希望输出一个低相似度分数。
浏览 12提问于2019-08-09得票数 0
1回答
我正在使用多处理池来加速文本语料库上的标题提取过程。在代码的一个阶段，我使用wordnet路径相似度模块来确定两个单词的相似度。如果我按顺序运行我的代码，即不使用多进程池，我会得到计算该路径相似度的正常时间。但是，当我使用多处理来同时处理多个文档时，我观察到与顺序相比，在计算此路径相似度时存在很大的时间延迟。
浏览 1提问于2019-01-15得票数 0
我正在做的是在一组文本文档上训练模型，然后计算这些文档之间的相似度。
现在，正如参考页面()所说，该工具用来计算相似度的度量是余弦相似度，它应该包含在0到1之间。但是，对于某些文档对，我得到了负分。
浏览 0提问于2016-02-29得票数 0
我想使用字符串函数中的Jaccard相似度来确定词袋的相似度。据我所知，使用Jaccard只能通过字符串中的字母进行匹配。'person')[1] 0 0 1
所以我们在这里看到它计算“猫”和“猫”，“狗”和“狗”以及“人”和“ufo”的相似<e
浏览 1提问于2016-05-11得票数 3
1回答
我想使用TF-IDF的余弦相似度方法来得到两个单词的语义相似度。首先，我想从wikipedia或word- text中提取这些单词的含义，然后对文本进行预处理并找到TF-IDF。如何使用计算结果计算余弦相似度？
浏览 3提问于2012-10-06得票数 1
回答已采纳
1回答
寻找文本中句子之间的语义连贯性
、、、、
我需要一些帮助写一个程序的基础上，从这些链接和的代码，将自动计算之间的语义相似度a.连续的句子和b.句子由1个中间短语，在和整个文件(1000句子)。提供的代码已经标记化并可以找到语义相似度，但我不知道如何编写新代码来计算(并显示)整个文本(a，b)中连续和“插入”句子之间的语义相似度。.I不想一遍又一遍地做同样的事情。
浏览 13提问于2017-01-11得票数 0
2回答
我正在尝试编写一个程序来评估文本之间的语义相似度。我已经比较了文本之间的n-gram频率(一种词汇测量)。我想要一些不那么肤浅的东西，我认为在句子结构中查看相似度是评估文本相似度的一种方法。然而，我所能做的就是计算词性(例如，每个文本4个名词，2个动词，等等)。然后，这类似于只计算n-gram(实际上不如ngram好)。如何使用词性来“更深”地衡量语义文本的<em
浏览 1提问于2012-07-12得票数 1
我在pandas数据框中有一组文本(字母数字)，我想计算成对文本(例如文本1和2、2和3、3和4...)的相似度分数。
我正在使用序列匹配器进行计算，并能够获得分数。我认为在将文本转换为小写后，也值得比较它们。我创建了2个分数列来比较结果:分数1=非小写文本对的相似性分数(保留文本的原始大小写)分数2=小写文本对的相似性分数。我预计小写文本对的<
浏览 0提问于2021-04-05得票数 0
1回答
我用C++编写了一个程序，它根据1到100之间的整数变量v的值序列生成一个文本文件。文本文件格式如下：1 2 3 4 5
4 5 6 7 8
8 4 5 7 1
如何执行相似
浏览 2提问于2016-11-08得票数 0
是否可以使用Google BERT来计算两个文本文档之间的相似度？据我所知，BERT的输入应该是有限大小的句子。一些作品使用BERT来计算句子的相似度，例如：
是否有BERT done的实现，以便将其用于大型文档而不是句子作为输入(具有数千个单词的文档)？
浏览 1提问于2019-09-11得票数 12
1回答
我正在尝试建立一个问题回答系统，其中我有一组预定义的问题和他们的答案。对于来自用户的任何给定问题，我必须查找类似的问题是否已经存在于预定义的问题中，并发送答案。如果它不存在，它必须回复一个通用响应。任何关于如何使用NLP实现这一点的想法都会非常有帮助。
浏览 2提问于2020-03-15得票数 0
2回答
计算句子集合之间的语义相似度
、、、、
我有两组短消息，我想计算这两组短消息之间的相似度，并根据它们的语义相似度来识别它们是否在谈论相同的子主题。我知道如何使用成对相似度，我的问题是我想计算两个集合中所有句子之间的总体相似度，而不是两个句子的相似度。有没有办法使用tf-idf或带有余弦相似度的word2vec/doc2vec来计算总分？
浏览 4提问于2019-08-02得票数 0
我知道gensim中的word2vec可以计算单词之间的相似度。但是现在我想用TF或者用gensim来计算词的相似度.该怎么做呢？
注:使用LSA和gensim计算文档相似度很容易：
浏览 6提问于2016-03-14得票数 3
1回答
我正在做一个经常需要检查两个web url之间相似度的项目，最初我通过从网页中抓取所有文本来完成这个任务，然后计算出文档的相似度。然而，这真的很费时，相反，我要寻找的是一种方法，可以通过使用url的内容来检测url之间的相似性，而不是遍历所有的文本。
浏览 13提问于2022-08-08得票数 1
回答已采纳
1回答
您好，我正在使用Gensim来查找文档之间的相似度，因此我对文档进行TF-IDF并计算余弦相似度。当我有新文档时，我可以使用index[tfidfvec]计算这个文档与以前文档的相似度，但是这样TF-IDF不会更新，并且在相似度计算中不考虑新词。有没有什么解决方案可以快速更新TF-IDF而无需重新计算整个矩阵，或者对我的问题有什么最好的解决方案？
浏览 2提问于2018-12-26得票数 2
我感兴趣的是找到一个文本距离(或字符串相似度)算法，当字符进一步分开时，该算法计算一个更大的距离(或更低的相似度)。像Levenshtein、Jaro和Ratcliff这样的常见算法为这两个示例计算相同的值。
浏览 0提问于2022-09-22得票数 -1
我有128个嵌入向量 image.shape = torch.Size([128, 512])
text.shape = torch.Size([128, 512]) 我想计算包含所有元素之间余弦相似度的张量(即： cosine.shape = torch.Size([128, 128]) 其中第一行是第一图像和所有文本(128)之间的余弦相似度，等等。目前我只是这样做，但结果是一个只包含N个余弦相似性的一维数组。我试着转置文本，但不起作用
浏览 42提问于2021-04-21得票数 3
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
