然后将这些数据传输到客户端，客户端的驱动程序将其反序列化为程序的原生类型(例如: document -> python )。最近，我有很多这种(反序列化)开销，并开始研究其他dbs。考虑我的典型用例:发出一个db.query(SOME_QUERY)，迭代游标，将它们传递给一个或多个函数，获取结果并将其写回。因此，在带有python驱动程序的MongoDB中，游标是一个反序列化的python，包含其他python对象。
我想知道这是如何在Postg
浏览 0提问于2023-01-18得票数 -1
通常，我使用不同版本的Python在驱动程序中运行代码，而不是在工作节点中运行，使用的是纱线-客户端模式。例如，我通常在驱动程序中使用python3.5，在工人中使用默认python2.6，这非常有用。我目前在一个项目中，我们需要打电话给但是这似乎是试图在工人中在python中执行这个句子，然后我得到了在工人中安装相同版本python的要求，这就是我想要避免的因此，要使用"sqlContext.createDataFrame“，需要在驱动程
浏览 5提问于2016-11-28得票数 0
回答已采纳
1回答
我想在机器A上序列化，在机器B上反序列化，一个python。这有几个明显的问题：
如果没有相关的闭包，如何检测给定的la
浏览 1提问于2012-08-09得票数 17
回答已采纳
2回答
我使用用python编写的UDF来更改数字的基。
因此，我读取了一个拼花文件，并写入了一个拼花文件，并应用了UDF。
浏览 4提问于2017-06-18得票数 6
回答已采纳
我在python-memcached中使用SQLAlchemy。对于我的大多数函数来说，这已经足够快了，但是在查询数以千计的对象的函数中，在cPickle.loads中花费了相当多的时间来反序列化对象。因为元组/字典行的序列化和反序列化可能比对象的序列化和反序列化快几倍，所以我想知道是否可以以某种方式缓存行。
浏览 0提问于2015-04-01得票数 1
df_slow_join = df_table_a_slow.join(df, on=['INT_COL', 'DATE_WEEK'], how='left')
我想对这两个联接的执行时间进行计时，所以这里有一个函数来近似转换时间
浏览 4提问于2019-08-02得票数 0
回答已采纳
如何反序列化协议缓冲区消息，只知道原型生成类的字符串名称？由于某些原因，我在DESCRIPTOR.full_name中得到的消息的完全限定名与python类的实际位置不匹配，因此我无法用以下函数反序列化它：
def get_class( kls ):：如果有帮助，我想解决的更大的问题是将protobuf消息序列化到数据库，然后反序列化它(在本例中，我使用postgresql和sqlalchemy )。由于常规的python泡菜不起作用，我希望存储一个元组(message_cls_name
浏览 3提问于2015-03-05得票数 5
回答已采纳
1回答
Pyspark有一个函数sequenceFile，它允许我们读取存储在HDFS中的序列文件，或者所有节点都可以使用的本地路径。但是，如果在驱动程序内存中已经有一个字节对象，需要反序列化并将其写入序列文件，该怎么办？例如，我正在处理的应用程序(不能更改应用程序逻辑)运行一个火花作业，它将该文件写入非HDFS兼容的文件系统，然后我可以作为内存中的python字节对象检索该文件，该对象似乎只包含一个序列化的序列对象，而我应该能够在内存中反序列化该对象我需要做的是在内存中反序列化它，这样我就可以将它写成一个jso
浏览 15提问于2021-12-08得票数 1
1回答
我开发了一个脚本，可以根据之前手动标记的反馈来预测某些文本的可能标记。我使用了几篇在线文章来帮助我(即：https://towardsdatascience.com/multi-label-text-classification-with-scikit-learn-30714b7819c5)。 因为我想要每个标签的概率，所以下面是我使用的代码： NB_pipeline = Pipeline([
('clf', OneVsRestClassifier(MultinomialNB(alpha=0.3, fit_prior=True, class_prior=None)))
浏览 20提问于2020-07-14得票数 0
回答已采纳
1回答
我有一个Python程序，其中有一个函数应该能够接受Python lambda，然后传递给正在运行的C++程序。我相信应该有一些我不知道的现有解决方案。
浏览 1提问于2015-10-22得票数 3
我无法从MongoDB Json文档反序列化ObjectId()和datetime()。u'C037799'}, u'xDirLevel': {u'masterCode': 1}}), (u'_id', ObjectId('58872e99321a0c8633291b3f'))]"from bson import json_u
浏览 10提问于2017-02-08得票数 0
回答已采纳
我从一个文件中获取json数据： { "age" : 15 { "age" : 14 ]这是我的初始代码： students = open('students.json')
data = json.load(st
浏览 1提问于2021-07-19得票数 0
回答已采纳
我有一个改变复杂对象的函数的C++源代码。如果不进行逆向工程或研究它的类，我如何将它序列化为一个文件(可能在挂载的内存磁盘上)，然后在Python中轻松地反序列化它？我需要Swig来做这个吗？我只想在C++源代码中添加一两行代码(就在对象发生变化之后)，在每次文件更新时生成一个Linux用户信号或其他东西，并为该自定义信号安装Python处理程序，该处理程序对文件进行反序列化并对对象执行某些操作
浏览 6提问于2015-11-09得票数 1
因此，我试图让一个远程Pyro5对象接收序列化的任意函数来执行它们。远程对象在单独的机器上运行，并在Pyro5名称服务器上注册。Pyro5中内置的序列化器(serpent)不支持函数序列化，因此我使用Dill手动序列化函数，生成一个字节类型，在通过Pyro5调用远程对象时发送。随后，我在远程端反序列化函数，这将产生错误：
ImportError:无法从“name”导入名称“Annotated”(/usr/lib/python3.8/name ing
浏览 9提问于2022-09-12得票数 0
4回答
使用distributed，我尝试提交一个位于另一个名为worker.py的文件中的函数。在工作人员中，我有以下错误：
但是我不知道我做错了什么.‘失败distributed.core - INFO回溯(最近一次调用)：文件"/usr/local/lib/python3.5/dist-packages/distributed/core.py"，行74，在loads中返回pickle.loads(x) ImportError:没有名
浏览 0提问于2016-10-11得票数 12
回答已采纳
2回答
因此，我有一个程序，它创建一个2D字典(也就是说，一个将每个值映射到另一个字典的字典)。我将它的字符串表示形式存储在一个类似于下面的文件中。{' ': {'A': 0.07801487990167236, 'C': 0.01087880333163352, 'E': 0.048483897540501315, 'D': 0.07454333869428209, 'G': 0.08257822408765805, 'F': 0.0283345
浏览 4提问于2014-03-14得票数 3
回答已采纳
我正在使用python序列化一个python对象，以便将其存储在我的缓存中。对于这个序列化，我使用json.dumps()，在我将它从缓存中取出后，为了反序列化它，我使用json.loads()。我可以使用什么函数来序列化这个对象，这样反序列化就可以保留它的原始值？我尝试使用pickle，但它无法序列化对象。
浏览 2提问于2017-06-13得票数 1
回答已采纳
我设置了一个集群，它似乎正确地连接到调度器(3台LinuxUbuntu18.04和3台Windows 10机器，调度器位于Win 10机器之一上)。我得到了一个超时错误的代码，我已经成功运行，当所有的开放源码软件都赢了10。tornado.application - ERROR - Multiple exceptions in yield list File "C:\Apps\Anaconda\lib\site-packages\distributed\comm\core.py"
浏览 0提问于2019-01-30得票数 1
回答已采纳
假设我有一个字符串"A，B，C“，我想把它转换成一个列表A，B，C，我已经用谷歌搜索过了，我知道我应该使用pickle.dumps，但似乎在我pickle.loads之前，我似乎必须要泡菜对象，是真的吗？如果是，我该如何绕过它呢？
浏览 1提问于2013-01-29得票数 1
1回答
如何序列化函数？
、、
有一种方法可以序列化/反序列化obj-c应用程序中的函数吗？
在不久的将来，我需要在不更新可执行文件的情况下更改函数的实现。我知道没有一种方法可以序列化函数指针/ way操作/块，所以我正在寻找一个替代的way...maybe。我可以在我的应用程序中包含python解释器并从websever下载脚本吗？
浏览 0提问于2012-07-20得票数 0
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
腾讯会议活动推荐
腾讯云开发者
