3回答
有谁知道英语动词inflector可以用在动词(现在分词)的词典上，它可以给出动词的其他屈折形式？===============================sing sang, singing, sings
play
浏览 4提问于2010-02-02得票数 6
回答已采纳
1回答
参考这个，我试着对单词"play“进行采样for happy_lemma in wn.lemmas("play"): #for each "happy" lemmarelated lemma
forms.add(related_lemma.na
浏览 0提问于2020-06-12得票数 0
1回答
我使用StandardAnalyzer对以下文本进行索引：“男孩努力玩赢了比赛”，然后我使用"play“进行查询搜索……只有当我使用WildcardQuery构建器时，Lucene才能找到命中结果。
浏览 1提问于2011-07-24得票数 2
来自Bash参考手册shell扫描参数展开、命令替换和算术扩展的结果，这些结果没有出现在双引号内，用于分词。来自Filename展开部分的规则：没有设置-f选项。为什
浏览 0提问于2016-03-16得票数 0
1回答
我有一个单词列表，将近5000个英语单词，每个单词我都需要这些屈折的形式：动词:不定式，现在简单，现在简单第三人称，过去简单，现在分词(形式)，过去分词副词
浏览 1提问于2016-05-05得票数 2
回答已采纳
我已经检查了所有三个分词器，我注意到一件事是，ByteOrdered分区器有开销，所以我不使用它。现在，我在Random和Murmur3分词器之间出现了一些分歧。
浏览 6提问于2014-08-17得票数 5
回答已采纳
2回答
IFS用作分词字符，但当IFS为null/空时会发生什么情况。例如，考虑包含内容的输入文件abc.txtsecond lineIFS='' # or IFS= or assume IFS is nullfirst line second line
既然现在\n也不是IFS，那么输出不应该只在一行中吗？
浏览 11提问于2021-10-09得票数 0
3回答
我是新来的巴什，我看到有自动分词，由巴什：如果我重复echo $a的"a“，我就得到了1 2 3 4，它已经隐式地进行了分词。我还从上读到
shell扫描参数展开、命令替换和算术扩展的结果，这些结果没有出现在双引号内，用于分词。
浏览 9提问于2013-08-28得票数 3
回答已采纳
希望在nlp中使用spacy将主动式语音转换为被动语态。有谁可以帮我？示例：汽车是底特律制造的这个房间每天由玛丽打扫nlp = spacy.load('en_core_web_sm')s = list(doc)for i in doc:
if i.pos_
浏览 1提问于2019-03-10得票数 2
回答已采纳
我正在尝试使用预训练的BERT模型进行文本分类。我在我的数据集上训练了模型，并在测试阶段；我知道BERT只能接受512个令牌，所以我编写了if条件来检查我的数据帧中测试的长度。如果它长于512，我将句子分成序列，每个序列有512个标记。然后进行标记器编码。序列的长度是512，但是在执行tokenize编码之后，长度变成了707，我得到了这个错误。 The size of tensor a (707) must match the size of tensor b (512) at non-singleton dimension 1 下面是我用来执行上述步骤的代码： tokenizer = B
浏览 208提问于2020-10-12得票数 2
1回答
这个名为"args“的脚本有助于演示分词示例：printf "%d args:" $#echo$ .但是，当我用非空白字符(比如: )替换IFS时，如果我直接将字符串作为参数传递，脚本就不会执行分词操作。1 args: <one:two:three>
但是，如果我(1)将字符串分配给一个变量，然
浏览 1提问于2017-04-01得票数 8
回答已采纳
我正在读，它说它有7种类型的扩展/替代，包括“分词”。另一方面，它在该项目的开头说：
请让我知道什么是“扩展执行后，命令行已被分割成文字”。意思是。word1 = commandword3 = var2$1 = "word"
浏览 4提问于2016-08-25得票数 2
回答已采纳
1回答
在使用ApacheOpenNlp为泰语等语言创建模型时，使用分词化的语料库来训练MxentModel是好的，还是应该使用未分词化的句子。
浏览 2提问于2017-04-28得票数 1
1回答
我已经安装了solr及其中文分词软件包。它在中工作得很好。solr分析工具可以很好地与中文分词软件包配合使用。
我的问题是，如何将分词请求传递给solr，以及如何获得良好的响应？
浏览 1提问于2011-12-22得票数 0
3回答
将要翻译的内容(现在是英文的)是使用分词呈现的，因此我有点倾向于创建不同语言的分词，然后根据用户的语言选择调用相关的分词-你会推荐这种方法吗？
浏览 3提问于2009-11-13得票数 2
回答已采纳
1回答
我一直在尝试构建一个NN标记器，其中输入将是字符和输出，令牌。我发现做类似事情的源代码要么是旧的，要么不是简单易学的。你能描述这种模型的输入和输出的形状和意义吗？如果输出是一个热的，那么它是不是太重了，因为令牌的总数大约是100到100万(可能的英语单词数)？
您是否推荐使用keras/tensorflow (希望2.0)训练令牌器的教程或示例？
浏览 0提问于2020-10-15得票数 -1
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
