我正在使用Spacy nlp.pipe()来获取熊猫Dataframe列中文本数据的doc对象，但是在代码中作为" text“返回的解析文本只有32的length。而的形状为(14640，16)。这是数据，如果有人想要读取这些数据。
nlp = spacy.load("en_core_web_sm")
for text in nlp.pipe(iter(df['text']), batch_size = 1000, n_threads=-1):
print(text)
len(text)
结果：
32
有人能帮我解决这件事吗？我做错什么了？
浏览 10提问于2019-11-13得票数 2
回答已采纳
我正在使用Spacy进行文本分析。我需要计算在文本中出现的数字数量，其中文本包含表达式'1/2‘。
如何在不使用正则表达式的情况下分别计算"1“和"2”？
我的代码：
for token in doc:
if token.pos_ =='NUM':
m.append(token.text)
for item in set(m):
print(f'"{item}" was found {m.count(item)} times in text')
浏览 3提问于2022-04-20得票数 0
2回答
我试图做一些关于简体中文文本的NLP (需要提取句子结构和做命名实体识别)。我以前在英语文本中使用过spaCy，但我看到关于中国模式的一点注记表明它们是一项正在进行的工作，对于我尝试过的例子来说，for提取的准确性很低。
哪个NLP库拥有最成熟的预建汉语模型？理想情况下，基于Python的。
浏览 0提问于2020-08-02得票数 1
对于中文模型加载，如何加载所有模型，同时仍然可以设置pkuseg和jieba设置？ nlp = Chinese() # Disable jieba through tokenizer config options
cfg = {"use_jieba": False}
nlp = Chinese(meta={"tokenizer": {"config": cfg}}) 由Chinese()创建的'nlp‘除了分割模型之外没有其他模型。这只能加载分段器模型。如果我这样做是为了获得'nlp‘对象： nlp = spacy.load
浏览 111提问于2020-06-30得票数 0
回答已采纳
1回答
我想纠正法语文本中拼写错误的单词，似乎spacy是最准确和最快的软件包，但它太复杂了，我尝试使用textblob，但我不能用法语单词来纠正
它在英语中工作得很好，但当我尝试用法语做同样的事情时，我得到了同样的拼写错误的单词
#english words
from textblob import TextBlob
misspelled=["hapenning", "mornin", "windoow", "jaket"]
[str(TextBlob(word).correct()) for word in misspelled]
浏览 2提问于2019-11-04得票数 3
我正在努力打印中文文本的实体和pos。
我已经安装了# !pip3安装jieba，并使用Google作为下面的脚本。
但是我得到的是实体的空元组，而pos_没有结果。
from spacy.lang.zh import Chinese
nlp = Chinese()
doc = nlp(u"蘋果公司正考量用一億元買下英國的新創公司")
doc.ents
# returns (), i.e. empty tuple
for word in doc:
print(word.text, word.pos_)
''' retur
浏览 1提问于2019-08-12得票数 0
回答已采纳
我在一个NLP项目中工作，我必须使用spacy和spacy Matcher来提取所有命名实体，它们是nsubj (主题)和与之相关的动词:我的NE nsubj的管理者动词。示例： Georges and his friends live in Mexico City
"Hello !", says Mary 我需要提取第一句中的"Georges“和"live”，以及第二句中的"Mary“和”and“，但我不知道在我的命名实体和与其相关的动词之间会有多少个单词。所以我决定更多地探索spacy Matcher。所以我正在努力在Matcher上写一个模式来提
浏览 129提问于2021-04-26得票数 1
回答已采纳
我试图创建一个自定义的NER模型。我使用spacy库来创建模型。这一行代码是从base.config文件创建配置文件。我的代码是:
!python -m spacy init fill-config /content/drive/MyDrive/NER_RE_New/NER/base_config.cfg /content/drive/MyDrive/NER_RE_New/NER/config.cfg
错误：
catalogue.RegistryError: [E893] Could not find function 'spacy-transformers.Transfo
浏览 10提问于2021-10-24得票数 1
回答已采纳
我使用以下命令(来自spacy网站)在Windows10home 64位下安装spacy和en_core_web_trf，但是在运行最后(第三行)命令时遇到了问题。
pip install -U pip setuptools wheel
pip install -U spacy
python -m spacy download en_core_web_trf
错误：
INFO: pip is looking at multiple versions of en-core-web-trf to determine which version is compatible with other re
浏览 11提问于2022-01-15得票数 1
回答已采纳
我正在构建一个包含Python库的docker容器。我现在正在尝试减小这个容器的大小，而spacy似乎是磁盘大小的主要因素。
没有安装任何型号，没有任何其他代码/依赖等，spacy在安装时消耗了大约500MB的磁盘！有没有人对以磁盘空间友好的方式安装spacy有任何有用的提示/技巧。
我的重现步骤是：
mkdir foo1 # create a folder
cd foo1 # change directory
python3 -m venv .venv # create virtual environme
浏览 0提问于2019-07-18得票数 1
我有以下代码：
import spacy
nlp = spacy.load('en_core_web_lg')
word = nlp.vocab["world"]
final_synonym = ['universe','existence','creation','cosmos','macrocosm','domain','reality','earth','globe','populace','
浏览 3提问于2022-10-11得票数 0
3回答
在Python中，我在使用Spacy库时尝试了以下命令：-
import spacy
降至误差以下
Traceback (most recent call last):
File "<stdin>", line 1, in <module>
ModuleNotFoundError: No module named 'spacy'
然后尝试使用以下命令安装spacy：
pip install spacy
消息：
它给出的要求已经满足。
使用的命令:-
import spacy
pip install spacy
浏览 17提问于2022-11-22得票数 2
1回答
问题
在之后，我尝试添加一个额外的训练数据集，并在本地cpu环境中训练一个模型。
但我不会更改base_config.cfg和config.cfg文件的内容。
如何修复这些错误来构建模型并对其进行评估？
错误
我不确定第一个问题是否是一个问题，我也不知道如何填写config.cfg文件。
到目前为止，即使在执行以下过程中的代码之后，config.cfg文件仍然是空的。
执行列车命令时会显示错误消息。
ℹ Using CPU
✘ Error parsing config overrides
paths -> train not a section value t
浏览 4提问于2021-07-23得票数 1
回答已采纳
2回答
是否有人按时间顺序列出了由
import spacy
nlp = spacy.load('en_core_web_sm')
doc = nlp(text)
我可以看到nlp.pipe_names的主要组件
['tagger', 'parser', 'ner']
和一个按字母顺序排列的nlp.factories工厂操作列表
{'merge_entities': <function spacy.language.Language.<lambda>>,
'merge_noun_chunk
浏览 1提问于2018-09-28得票数 2
回答已采纳
1回答
我试图通过实现我的预训练向量来提高我的spacy NER模型的性能。我使用不同的文本使用word2vec创建了自己的向量，并将它们保存在.txt文件中。然而，我得到了完全相同的分数，这似乎不对。
下面是我为一个带有自定义预训练嵌入的文件执行的步骤：
!python -m spacy init vectors en /content/drive/MyDrive/MODELS_W2V/JSTOR_uncleaned_sents_model.txt ./uncl_txt --name JSTOR_unlceaned_sents_model
nlp = spacy.load("./uncl_
浏览 17提问于2022-09-01得票数 1
回答已采纳
在spacy 2中，我使用它向空的spacy模型(spacy init)添加了一个词汇表：
nlp3=spacy.load('nl_core_news_sm') #standard model without vectors
spacy.load("spacyinitnlmodelwithvectorspace",vocab=nlp3.vocab)
在spacy夜间版本3.0.0rc中，vocab参数不再存在于spacy.load中。有没有人建议我如何在spacy模型中添加语音？
浏览 3提问于2020-12-04得票数 0
回答已采纳
1回答
我已经安装了俄语模型，但我无法加载它。
安装：
(tf2) C:\Windows\System32\spacy-ru>pip install git+https://github.com/buriy/spacy-ru
Collecting git+https://github.com/buriy/spacy-ru
Cloning https://github.com/buriy/spacy-ru to c:\users\alienware\appdata\local\temp\pip-req-build-x7fqevak
Running command git clone -q
浏览 2提问于2020-01-11得票数 1
背景 我在以下本地环境中工作，需要在GoogleColab上使用spaCy 3.0。 然而，由于spaCy版本的原因，在3.0之后安装python似乎是可以接受的。 spaCy version 3.0.5
Python version 3.9.1 错误 如何在GoogleColab上使用3.0以后的spaCy，或者现在不能使用？ Requirement already satisfied: spacy in /usr/local/lib/python3.7/dist-packages (2.2.4)
ERROR: Could n
浏览 28提问于2021-07-23得票数 2
回答已采纳
我试图使用spacy，以便从文本中获得正确的名称，但是当我运行代码时，我得到了
Traceback (most recent call last):
File "C:/Users/L/Desktop/spacy.py", line 2, in <module>
import spacy
File "C:\Users\L\Desktop\spacy.py", line 3, in <module>
from spacy.matcher import Matcher
ModuleNotFoundError: No mo
浏览 0提问于2019-08-22得票数 0
回答已采纳
在spacy 3.0中，我注册了我的自定义语言，如下所示： import spacy
from spacy.lang.en import English
class CustomEnglishDefaults(English.Defaults):
stop_words = set(["custom", "stop"])
@spacy.registry.languages("custom_en")
class CustomEnglish(English):
lang = "custom_en"
Defa
浏览 35提问于2021-04-19得票数 0
回答已采纳
1回答
我已经使用conda install -c conda-forge spacy安装了conda install -c conda-forge spacy，使用了pip install spacy-transformers安装了spacy-transformers。但是当我尝试导入spacy_transformers时。我得到以下错误
---------------------------------------------------------------------------
ModuleNotFoundError Traceback (mos
浏览 14提问于2022-10-27得票数 1
我正在尝试在spacy v3中准备一个自定义的ner模型。从训练的角度来看，与v2相比，V3有了很大的变化。 我使用en_web_lg的默认配置。我已经使用convert命令准备了训练数据(training.spacy)。但是，训练命令需要一个dev.spacy文件。 不确定dev.spacy中需要哪些数据。这是在询问training.spacy文件的纯文本语料库吗？但是有没有办法将纯文本文件转换为spacy格式呢？ 来自spacy站点的命令- python -m spacy train config.cfg --output./output--paths.train./Train.spac
浏览 72提问于2021-04-08得票数 1
回答已采纳
1回答
基于Spacy的新闻文章文本分类
、、、、
Dataset：包含1500数据的Csv文件，列为(文本、标签)，其中文本是尼泊尔语的新闻文章，Label是其类型(健康、世界、旅游、天气等)。
我正在使用来训练我的文本分类模型。到目前为止，我已经将数据集转换为如下所示的数据格式
然后通过代码转换成可接受的空间格式。
dataset['tuples'] = dataset.apply(
lambda row: (row['Text'],row['Labels']), axis=1)
training_data = dataset['tuples'].tolist()
这
浏览 3提问于2020-06-09得票数 0
回答已采纳
我正在尝试从磁盘加载一个带有自定义管道的自定义预训练模型，作为spacy 3.0中的管道： 工厂的代码是这样的： @CustomEng.factory("ner-crf")
def create_my_component(nlp, name):
crf_extractor = CRFExtractor().from_disk("path-to-model")
return CRFEntityExtractor(nlp, crf_extractor=crf_extractor) 然后我将'ner-crf‘添加到我的语言类中，如下所示：
浏览 28提问于2021-04-25得票数 1
回答已采纳
我想卸载kaggle中的现有spacy，kaggle默认为我们下载的是spacy == 2.1.3，但我想安装version==2.0.18 !pip uninstall spacy==2.1.3 但是我这里有库存 Uninstalling spacy-2.0.18:
Would remove:
/opt/conda/bin/spacy
/opt/conda/lib/python3.6/site-packages/spacy-2.0.18.dist-info/*
/opt/conda/lib/python3.6/site-packages/spacy/*
Proc
浏览 32提问于2019-06-03得票数 0
1回答
我目前正在使用NLP库Spacy处理文本。然而，Spacy并不能正确地列出所有的单词，因此我想扩展查找表。目前，我正在将Spacy的常量查找表与我的扩展合并，然后覆盖Spacy的本机查找表。
然而，我有一种感觉，这种方法可能不是最好和最一致的方法。
问:在Spacy中是否有其他更新查找表的可能性，例如更新或扩展函数？我已经看过文档了，但找不到这样的东西。或者，这种方法“很好”吗？
我当前方法的工作示例：
import spacy
nlp = spacy.load('de')
Spacy_lookup = spacy.lang.de.LOOKUP
New_lookup = {&#
浏览 2提问于2018-03-23得票数 5
我在安装spacy_readability时遇到了困难，这似乎是由一个旧版本的ujson引起的。所以我安装了最新版本的ujson：
!pip install --upgrade ujson --user
Requirement already satisfied: ujson in c:\users\desktop pc\appdata\roaming\python\python38\site-packages (1.35)
Collecting ujson
Using cached ujson-5.1.0-cp38-cp38-win_amd64.whl (36 kB)
Installin
浏览 6提问于2022-02-04得票数 1
1回答
当我尝试重新培训spacy英语模型时，正如我在示例中所发现的那样，它失败了：
Python 3.6.2 (v3.6.2:5fd33b5926, Jul 16 2017, 20:11:06)
[GCC 4.2.1 (Apple Inc. build 5666) (dot 3)] on darwin
Type "help", "copyright", "credits" or "license" for more information.
>>> import spacy
>>> from spa
浏览 4提问于2017-10-11得票数 0
回答已采纳
我正在尝试用SpaCy训练一个文本分类管道： import spacy
nlp = spacy.load("en_core_web_sm")
nlp.add_pipe("textcat", last=True)
other_pipes = [pipe for pipe in nlp.pipe_names if pipe != 'textcat']
with nlp.disable_pipes(*other_pipes):
optimizer = nlp.begin_training()
# training logic 但是，
浏览 155提问于2021-02-25得票数 4
回答已采纳
我目前使用的是Windows操作系统。我已经安装了用于创建环境的Anaconda。我已经用python2.7成功地创建了另一个环境。我还使用以下命令在该环境中安装了spacy：
conda install --name myenv -c spacy spacy
但现在我需要下载模块来运行它。在spacy官网上，他们提到了下面的命令：conda install -c conda-forge spacy python -m spacy download en，然后我用以下命令激活了第二个环境：
activate myenv
但是运行第二个命令(python -m spacy..)会给出一个错误：
浏览 3提问于2018-10-07得票数 2
我是Python NLP的新手，我正在尝试用SpaCy处理CSV文件。使用Pandas可以很好地加载文件，但当我尝试使用SpaCy的nlp函数处理它时，编译器在处理文件内容的过程中出现了大约5%的错误。
代码块如下：
import pandas as pd
df = pd.read_csv('./reviews.washington.dc.csv')
import spacy
nlp = spacy.load('en')
for parsed_doc in nlp.pipe(iter(df['comments']), batch_size=1
浏览 14提问于2017-08-18得票数 1
当我尝试运行我的.exe文件时，我得到这个custom_kernel.cu not found。我使用的是Python3.9.4、Pyinstaller4.2、Thinc8.0.3和Spacy3.0.6。
我尝试了两种解决方案：
一个带钩子的：
# HOOK FILE FOR SPACY
from PyInstaller.utils.hooks import collect_all, collect_data_files, copy_metadata
# ----------------------------- SPACY -----------------------------
dat
浏览 0提问于2021-05-31得票数 1
1回答
我想做的是 我想提取的词，这是在spaCy上，自然语言操作系统的具体标签。 specific labels on spaCy 在下面的例子中，我希望打印单词English，因为选择了标签LANGUAGE。 English 问题 没有用于提取每个单词上的标签的示例代码。 我如何修复下面的错误？ TypeError: Argument 'string' has incorrect type (expected str, got spacy.tokens.token.Token) 当前代码 import spacy
from spacy import displacy
nlp =
浏览 20提问于2020-11-26得票数 0
回答已采纳
我在Spacy遇到了一个奇怪的问题，我不知道我是不是做错了什么，还是它是一个真正的bug。
我使用Spacy项目并通过以下方法创建默认配置文件：
python -m spacy init config spacy.cfg
然后，我尝试使用以下配置加载NLP对象：
import spacy
config = spacy.util.load_config('./spacy.cfg')
nlp = spacy.load("en_core_web_sm", config=config)
执行此操作时，我将得到以下错误：
ConfigValidationError:
浏览 6提问于2021-03-02得票数 0
回答已采纳
ImportError: cannot import name 'SentenceSegmenter' from 'spacy.pipeline'
Spacy版本: 3.2.1
我知道这个类是用于早期的spacy，但是对于这个版本的spacy，它会有类似的东西吗？
浏览 9提问于2021-12-30得票数 3
回答已采纳
我使用了中提供的命令。我遵循以下所有步骤：-
使用spacy格式创建模型TRAIN_DATA =[ ("Pizza is a common fast food.", {"entities": [(0, 5, "FOOD")]}), ("Pasta is an italian recipe", {"entities": [(0, 5, "FOOD")]})]
使用以下代码转换.spacy文件中的列车和开发数据：-
import os
from tqdm import tqdm
impo
浏览 2提问于2022-06-27得票数 1
回答已采纳
在我的AWS SageMaker笔记本中，我遵循了SageMaker安装指南
pip install -U pip setuptools wheel
pip install -U spacy
python -m spacy download en_core_web_sm
当我做import spacy时，我会出错
ModuleNotFoundError: No module named 'spacy'
我确保我的python和spacy路径是一样的
我遗漏了什么？
浏览 1提问于2021-10-26得票数 2
我的制作文件：
./corpus/%.spacy : ./assets/%.json
python3 ./scripts/convert.py $< $@
两个问题：
，即使A.spacy和A.json存在，并且A.json比A.spacy更新得更近，我还是得到了以下输出。
$ make $ make：*无目标。停下，
，如果只有A.json存在，要添加什么来使A.spacy成为A.spacy？我尝试了下面的代码，它没有工作，我觉得我没有完全理解makefile中的目标和依赖关系。
转换：./ echo /%..spacy python3 ./script/centt.py$(
浏览 6提问于2022-09-07得票数 0
回答已采纳
2回答
我正在尝试在一个新的python3环境中下载spaCy库。 这就是我所拥有的： python3 -m venv .env
source .env/bin/activate
conda install -c conda-forge spacy
conda install -c conda-forge spacy-lookups-data
python3 -m spacy download en_core_web_sm 我得到的错误是: /Users/KerryChowChow/Dropbox/2019data_art/.env/bin/python3:没有名为spacy的模块 我在环境下同时安
浏览 25提问于2019-12-19得票数 1
回答已采纳
我正在尝试下载spacy ray for spacy v3.0。我希望在conda虚拟环境中实现这一点，在这个虚拟环境中，我拥有spacy v3.0和其他依赖项。我想不出怎么下载它。我试过conda install spacy-ray和conda install -c conda-forge spacy-ray。他们说找不到这样的模块。然后我放弃了，尝试使用pip install spacy-ray，但得到了以下消息： ERROR: Cannot install spacy-ray==0.0.0, spacy-ray==0.1.0 and spacy-ray==0.1.1 because t
浏览 66提问于2021-04-01得票数 2
我正在使用公寓环境。 完整堆栈跟踪： Traceback (most recent call last):
File "utils_exp.py", line 10, in <module>
import spacy
File "/home/ubuntu/anaconda2/lib/python2.7/site-packages/spacy/__init__.py", line 12, in <module>
from . import pipeline
File "/home/ubuntu/anac
浏览 33提问于2020-07-08得票数 0
2回答
我正在尝试计算spacy中的标记相似度。即单词标记彼此有多近。我使用的是spacy版本2.0.5。这是我的一个简单的例子。
import spacy
from spacy.lang.en import English
from spacy.tokenizer import Tokenizer
nlp = spacy.load('en')
x = nlp(u'apple')
y = nlp(u'apple')
x.similarity(y)
它的回报率是-81216639937292144.0，但我原本预计是1.0。
此外
x = nlp(
浏览 2提问于2017-12-12得票数 0
我正在开发一个使用Spacy的代码库。我使用以下方法安装了spacy：
sudo pip3 install spacy
然后
sudo python3 -m spacy download en
在最后一条命令的末尾，我收到了一条消息：
Linking successful
/home/rayabhik/.local/lib/python3.5/site-packages/en_core_web_sm -->
/home/rayabhik/.local/lib/python3.5/site-packages/spacy/data/en
You can now load the m
浏览 2提问于2017-11-14得票数 53
回答已采纳
在从StanzaLanguage导入spacy_stanza时，我得到了以下错误：
ImportError跟踪(最近一次调用)在() 4导入节5 stanza.download('es') ->6从spacy_stanza导入StanzaLanguage 7 8
(/usr/local/lib/python3.7/dist-packages/spacy_stanza/init.py)：无法从“spacy_stanza”spacy_stanza导入名称“StanzaLanguage”
浏览 3提问于2021-03-08得票数 3
我已经按照训练了模型
我将它保存到某个目录中，然后加载并再次使用它。但是当我试图访问doc.vector时加载了它之后，它抛出了以下错误。
Traceback (most recent call last):
File "C:/Users/ankita.a.rath/Desktop/my_codes/Rasa_nlu/rasa_nlu-master/train_spacy_ner.py", line 248, in <module>
main("en", "new_model")
File "C:/Users
浏览 3提问于2017-09-10得票数 2
Spacy 'train‘命令使用命令行选项--gpu 0，允许在使用GPU和不使用GPU之间进行“最后一分钟”的选择--只使用CPU。
但是，使用在GPU和CPU之间进行选择会导致(基本)配置上的重大差异。在我的例子中(与NER打交道)，我得到了两个不同的管道：
for CPU：= "tok2vec"，"ner"for GPU:管线= "ner"
(下面的组件设置非常不同)。
由于我的GPU只有6GB的内存，所以我很快就耗尽了GPU内存--不能使用它。但是，当我切换到只使用CPU时，这两个管道之间的培训行为就大不相同了：
"to
浏览 3提问于2021-05-03得票数 1
我正在尝试加载en_core_web_sm spaCy模型，但没有成功。
发生的错误如下：
OSError: [E050] Can't find model 'en_core_web_sm'. It doesn't seem to be a Python package or a valid path to a data directory.
我在Anaconda虚拟环境中工作。下面的复选框被勾选：
在安装environmentThen，之前，做了conda activate gcp-env，英语语言模型运行了conda install -c conda-for
浏览 13提问于2022-06-01得票数 1
回答已采纳
1回答
试图在希伯来语中使用spacy语句标记。
import spacy
nlp = spacy.load('he')
doc = nlp(text)
sents = list(doc.sents)
我得到：
Warning: no model found for 'he'
Only loading the 'he' tokenizer.
Traceback (most recent call last):
...
sents = list(doc.sents)
File "spacy/token
浏览 1提问于2018-02-01得票数 3
回答已采纳
1回答
我安装了spacy_stanza并下载了拉丁文模型，但是我得到了以下错误：
ImportError: [E048] Can't import language la or any matching language from spacy.lang: No module named 'spacy.lang.la'
下面是我使用的代码：
import spacy
import stanza
import spacy_stanza
stanza.download("la")
nlp = spacy_stanza.load_pipeline("la&
浏览 13提问于2022-03-28得票数 1
回答已采纳
我有一个spacy对象，类型为<class‘spacy y.tokens.doc.Doc’>
import spacy
import requests
nlp = spacy.load("en_core_web_sm")
spacy_doc = nlp("hello")
如何在api请求中将此对象作为有效负载发送？目前，当我尝试使用下面的代码发布它时
requests.post(API_URL, json={'doc': spacy_doc}, timeout=3)
我得到下面的错误
ERROR:Object of type '
浏览 2提问于2020-11-03得票数 0
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
腾讯会议
实时音视频活动推荐
腾讯云开发者
