使用pytorch的torchtext构建文本分类模型。词汇对象在data.field中： def create_tabularDataset_object(self,csv_path): self.TEXT.build_vocab(data,min_freq=100,vectors = "glove.6B.100d") 在训练之后，在生产中服务模型时，我如何持有文本<em
浏览 21提问于2020-04-16得票数 1
回答已采纳
我在google colab中运行我的代码，但我遇到一些错误。torch:1.1.0，torchtext:0.4.0，我更新了它们，但没有用[2019result = unpickler.load()
AttributeError: Can't get attribute '_default_unk_index' on <module 'torchtext.voc
浏览 2提问于2019-09-14得票数 2
我现在正在使用pytorch，但我遗漏了一个层:帮助处理ids的tf.keras.layers.StringLookup。对于pytorch，有没有类似的变通方法？我正在寻找的功能的一个示例： vocab = ["a", "b", "c", "d"]
data = tf.constant([["a", "c", "d"], ["d", "
浏览 52提问于2021-10-17得票数 1
回答已采纳
1回答
我正在使用pytorch为自然语言处理构建ML模型，但是当我在我的文本中使用"vacab“定义词汇表并尝试使用vocab.itos时，我得到了：'Vocab‘对象没有属性'itos’错误。这是我的词汇： vocab = torchtext.vocab.vocab(counter, min_freq=1) 我该如何解决这个问题？
浏览 172提问于2021-08-11得票数 1
回答已采纳
有些人能解释一下火炬中的build_vocab是什么，从在线文档中还不清楚吗？为什么我们需要它，这与预先训练过的嵌入有关？
浏览 1提问于2019-11-14得票数 0
在Google中，我尝试使用以下方法导入BucketIterator：但它一次又一次地引起了同样的错误
浏览 24提问于2020-09-23得票数 1
1回答
我最近开始使用PyTorch的ML/DL。下面的pytorch示例解释了如何训练一个简单的模型来将德语翻译成英语。https://pytorch.org/tutorials/beginner/torchtext_translation_tutorial.html 然而，我对如何使用该模型在自定义输入上运行推理感到困惑2)在对德语段落运行推理时，我们首先需要使用德语词汇文件将德语文本转换为张量。 3)上述张量将传
浏览 43提问于2020-01-01得票数 2
torchtext 0.4.0库存在(可以通过pip下载)，但是conda install torchtext=0.4.0不能工作。如何将火炬文本下载到anaconda环境中？
浏览 11提问于2019-07-31得票数 7
回答已采纳
我要从凯拉斯到PyTorch。I希望用GloVe向量创建一个PyTorch嵌入层(一个大小为V x D的矩阵，其中V超过词汇表，而D是嵌入向量维)，但对所需的步骤感到困惑。])# PyTorch code.model.embedding.weight.da
浏览 3提问于2020-06-09得票数 5
回答已采纳
conda install -y pytorch==1.9 torchvision torchaudio torchtext cudatoolkit=11.0 -c pytorch -c nvidia但由于某种原因，它永远不会下载cuda 11.0或更高版本的版本。错误消息太大，无法粘贴，但您可以在这里看到详细信息：conda create -n env_a40 python=3.9
conda activate env_a40conda install -y
浏览 11提问于2021-09-17得票数 0
回答已采纳
pip install pytorch_lightning -qqq但会得到以下错误：<ipython-input-7-d883b15aac58> in <module>()/
浏览 8提问于2021-03-09得票数 8
2回答
我正在尝试准备一个从csv文件加载的自定义数据集，以便在火炬文本文本二进制分类问题中使用。这是一个基本的数据集，新闻标题和市场情绪标签被指定为“正面”或“负面”。为了达到这个目的，我一直在关注一些关于PyTorch的在线教程，但是他们在最新的火炬文本包中做了一些重大的修改，所以大部分内容都过时了。下面，我成功地将我的csv文件解析为一个包含两列的熊猫数据格式--文本标题和一个标记，该标签要么为正/负，要么为
浏览 8提问于2022-07-30得票数 2
回答已采纳
我使用pytorch和torchtext库来预处理数据。是否可以使用dataframe作为源来读取torchtext中的数据？/data')如果不是torchtext，您建议的其他什么包可以帮助预处理datarame中的文本数据。任何帮助都是最好的。
浏览 0提问于2018-10-02得票数 8
我是PyTorch的新手，正在尝试实现我用TF开发的模型，并比较结果。该模型是一个自动编码器模型。输入数据是包含n个样本的csv文件，每个样本具有m个特征( csv文件中的n*m个数字矩阵)。目标(标签)位于与输入文件格式相同的另一个csv文件中。我一直在网上寻找，但找不到一个好的文档来读取csv文件中的多个标签的非图像数据。你知道如何在训练过程中读取和迭代我<e
浏览 1提问于2020-05-07得票数 0
BertTokenizer.save_pretrained("OUTPUT_DIR") 将vocab.txt、special_tokens_map.json和tokenizer_config.json保存到我的输出目录中，可用的列车模型存储为pytorch_model.bin，配置也在那里。如何使用这些来进行推理，最好是与torchtext一起使用？
浏览 69提问于2020-09-04得票数 0
1回答
在我的env(colab)中，我需要以下库。以下是清单：!pip install --quiet pytorch-lightning==1.1.3!pip install torchtext==0.8.0 torch==1.7.1 pytorch-lightning==1.1.3
在我从干草堆库<
浏览 18提问于2021-10-20得票数 1
我试图在colab中使用.build_vocab()从torchtext构建词汇表。它返回错误消息: AttributeError：“示例”对象没有属性“侮辱”代码如下所示，我还做了一个。import os
浏览 1提问于2020-04-07得票数 0
回答已采纳
我使用参考- 生成了基于无监督方法的精细调整/训练的快速文本嵌入。现在，我正在尝试将这个嵌入加载到TorchText vocabu.build()函数中。但我错了。我该怎么做呢？
浏览 0提问于2021-11-17得票数 0
我想加载一个预先训练的word2vec嵌入与gensim到一个PyTorch嵌入层。
如何将gensim加载到PyTorch嵌入层中的嵌入权值计算出来？
浏览 0提问于2018-04-07得票数 49
回答已采纳
我从Torchtext文档中了解到，导入csv文件的方法是通过TabularDataset。我是这样做的：
train = data.TabularDataset(path='.文件中2列的标题名称。我将它们定义为data.Field，但是"label“和"statement”似乎并不实际包含来自csv文件的数据，尽管控制台可以毫无问题地将它们识别为数据字段对象。当我试图用statement.build_vocab(火车，
浏览 13提问于2018-08-11得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
