为什么python中的mmap速度如此之慢？
在回答为什么Python中的mmap速度较慢之前，首先需要了解mmap的概念和用途。
mmap（Memory-mapped files）是一种内存映射文件的技术，它允许将文件映射到进程的地址空间，使得文件可以像访问内存一样被访问。在Python中，mmap模块提供了对内存映射文件的支持。
然而，Python中的mmap速度较慢主要有以下几个原因：
- 解释器层面的限制：Python是一种解释型语言，相比于编译型语言，解释器的执行速度较慢。因此，无论是使用mmap还是其他操作，Python的执行速度都会相对较慢。
- GIL（全局解释器锁）：Python的解释器中存在GIL，它限制了同一时间只能有一个线程执行Python字节码。这意味着在多线程环境下，无法充分利用多核处理器的优势，从而导致mmap操作的速度较慢。
- 数据拷贝：在使用mmap时，Python需要将文件数据从磁盘读取到内存中，并且由于Python的内存管理机制，还需要进行额外的数据拷贝操作。这些额外的数据拷贝会增加IO和内存开销，导致速度下降。
- Python与底层操作系统的交互：Python的mmap模块是通过调用操作系统提供的底层接口来实现的。由于不同操作系统对mmap的实现方式和性能有所差异，因此在某些操作系统上，Python中的mmap速度可能会较慢。
尽管Python中的mmap速度较慢，但在某些特定场景下仍然可以发挥其优势。例如，当需要处理大型文件时，使用mmap可以避免将整个文件加载到内存中，而是通过内存映射的方式进行部分读取和操作，从而节省内存资源。
对于替代方案，可以考虑使用其他语言编写性能更高的模块，并通过Python的扩展机制进行调用。此外，还可以结合其他Python库或框架，如NumPy、Pandas等，来提高数据处理和计算的效率。
腾讯云相关产品和产品介绍链接地址：
- 腾讯云产品：云服务器（https://cloud.tencent.com/product/cvm）
- 腾讯云产品：云数据库 MySQL 版（https://cloud.tencent.com/product/cdb）
- 腾讯云产品：云存储 COS（https://cloud.tencent.com/product/cos）
- 腾讯云产品：人工智能（https://cloud.tencent.com/product/ai）
- 腾讯云产品：物联网（https://cloud.tencent.com/product/iotexplorer）
- 腾讯云产品：移动开发（https://cloud.tencent.com/product/mobdev）
- 腾讯云产品：区块链（https://cloud.tencent.com/product/baas）
- 腾讯云产品：元宇宙（https://cloud.tencent.com/product/mu）
请注意，以上链接仅为示例，具体产品选择应根据实际需求进行评估和选择。
相关·内容
我们一直在尝试安装从TDS创建的sitecore升级程序包，并发现在不同的machine.Any想法下，out.We总是有不同的计算机和Sitecore实例，这背后可能存在什么问题？
日志文件中的条目：
我们还尝试通过/sitecore/admin/UpdateInstallationWizard.aspx .In安装相同的包，这样我们就能够成功安装，但安装一个包含1500个项目的包花费了1小时20分钟。
我们尝试在不同的数据库服务器上安装，但不能在这个特定的server.Can上安装，这是一个糟糕的数据库performance.How的情况，我们能解决这个问题吗？
谢谢,
浏览 0提问于2016-05-02得票数 0
1回答
添加这行代码会导致我的编译时间从10秒增加到3分钟。
var resultsArray = hashTagParticipantCodes + prefixParticipantCodes + asterixParticipantCodes + attPrefixParticipantCodes + attURLParticipantCodes
将其更改为此选项将使编译时间恢复正常。
var resultsArray = hashTagParticipantCodes
resultsArray += prefixParticipantCodes
resultsArray += asterixP
浏览 1提问于2016-09-14得票数 5
回答已采纳
有没有人尝试过向/从安卓Emulator目标推送/拉取大文件(超过20MB)？当我执行adb push/pull操作时，它慢得离谱。
平均速度是75KB/s。哦，天哪，这是15年前我高中网络的速度。但是Emulator目标就在我的硬盘上，那么为什么adb推送/拉取如此之慢？
谢谢!
亚瑟
浏览 146提问于2012-08-21得票数 2
1回答
我想知道为什么Python的mmap()性能会随着时间的推移而下降？我的意思是，我有一个小应用程序，对N文件进行修改，如果设置是大的(不太大，比方说1000)，前200是恶魔的速度，但在那之后，它变得越来越慢。看起来，我应该偶尔释放内存，但不知道如何释放内存，最重要的是，为什么Python不自动释放内存。
有什么帮助吗？
-编辑--
差不多是这样的：
def function(filename, N):
fd = open(filename, 'rb+')
size = os.path.getsize(filename)
mapped = mmap(fd.fi
浏览 5提问于2011-07-25得票数 2
我是python的新手。但我很好奇为什么python中的mmap实现为共享库，而不是.py文件。这使得我的IDE不能索引mmap的源代码。
以下是我的python3.2环境(ubuntu 12.04)的输出：
markz@markz-hp6200:~$ python3.2
Python 3.2.3 (default, Oct 19 2012, 20:10:41)
[GCC 4.6.3] on linux2
Type "help", "copyright", "credits" or "license" for more info
浏览 2提问于2013-03-07得票数 2
回答已采纳
1回答
我试图为Python和C/C++进程的任何组合之间的进程间通信建立一个快速库。(i.e. Python <-> Python, Python <-> C++, or C++ <-> Python)
为了实现最快的实现，我尝试使用mmap来利用共享内存。该计划是让两个进程通过"mmap-ing“共享内存，并从这个共享内存中读取并写入以进行通信。
我希望避免对实际文件的任何实际写入，而只是希望使用文件名作为两个进程连接的句柄。但是，在下面调用mmap时，我被挂断了
self.memory = mmap.mmap(fileno, self.maxlen)
浏览 12提问于2021-02-12得票数 3
回答已采纳
有没有可能在Python语言中执行mmap.read() (或等效物)而不移动指针？ 我需要一遍又一遍地在易失性存储器中读取相同的地址，为了优化性能，我不想每次都去寻找相同的地址。 file = os.open("/dev/mem", os.O_RDWR | os.O_SYNC)
memory = mmap.mmap(f, 0x50000000, mmap.MAP_SHARED)
for index in range(1000000):
memory.seek(address)
# Unpack the bytes little-endian (lea
浏览 38提问于2020-12-06得票数 1
3回答
有人能解释一下在这种情况下，0是如何影响python中的mmap的：
mmap.mmap(0 , 256, "some tag")
我认为我总是需要传输文件描述符，而不是0，那么为什么是零呢？
浏览 2提问于2011-07-28得票数 3
回答已采纳
1回答
我在用我的Beagleboard和照相机做一些实验。摄像机一开始运转得很好。后来，我通过禁用“自动曝光”并手动设置自己的值来扩展我的实验。但单凭这一点，相机的功能就变得如此之慢，是之前表现的15倍。
原因是什么？
浏览 0提问于2012-09-28得票数 1
回答已采纳
这段简单的python代码如下：
import mmap
with file("o:/temp/mmap.test", "w+b") as fp:
m = mmap.mmap(fp.fileno(), 0, access=mmap.ACCESS_READ|mmap.ACCESS_WRITE)
m.write("Hello world!")
生成以下错误(在mmap.mmap(...)上)行)：
WindowsError:错误1006文件的卷已从外部更改，因此打开的文件不再有效
知道为什么吗？
浏览 0提问于2010-07-14得票数 1
回答已采纳
当在Safari 6.0.8中加载以下给定的HTML代码时，滚动函数在大约1500毫秒内执行。在Chrome中，这个数字是~50ms，在FireFox中是~5ms。我已经确定了scroll方法是罪魁祸首，但我不明白为什么Safari的执行速度如此之慢。是Safari的实现细节，还是我做错了什么？
<html>
<head>
<style>
.container {
width: 20%;
height: 100px;
background: #FF9800;
浏览 1提问于2015-05-13得票数 0
以下是示例代码：
from copy import deepcopy
List = [range(3), range(3), range(3)]
a = deepcopy(List)
b = [each[:] for each in List]
我知道初始化a所需的时间比b慢，但为什么会发生这种情况？deepcopy和[each for each in List]有什么区别？为什么深度复制速度如此之慢？
浏览 0提问于2016-10-11得票数 1
1回答
c3p0的连接超时问题
、、、
我使用c3p0作为Java8应用程序的连接池，同时使用ibatis作为对象关系管理工具。数据库经常出现连接超时问题。以下是配置参数。 <property name="minPoolSize" value="60" />
<property name="maxPoolSize" value="200" />
<property name="initialPool
浏览 46提问于2019-08-26得票数 0
1回答
我正在尝试使用匿名mmap在python进程和从python进程启动的nodejs进程之间共享内存。本质上，python进程开始，初始化mmap，并使用call或Popen启动子进程，以启动运行某些节点代码的子进程。这段nodejs代码使用mmap尝试访问内存中的相同区域。然而，我得到了两个不同的映射，并且它们之间没有共享数据。为什么会这样呢？ import mmap, math, os
from subprocess import call
mm = mmap.mmap( -1, 1024,
flags=mmap.MAP_SHARED | mmap.MAP
浏览 21提问于2020-10-21得票数 3
回答已采纳
长话短说。分析后，此命令占用0,1%的处理时间
var ChangesetList = TFSConnection.GetInstance().GetVersionControl().QueryHistory
(Path, VersionSpec.Latest,0, RecursionType.Full, "", null,
VersionSpec.Latest, Int32.MaxValue,true, false);
这个，65.7%。(有趣的是，内部的所有处理只消耗3%)
foreach (Changeset changeset in Changeset
浏览 1提问于2011-03-01得票数 4
回答已采纳
我了解到mmap比fileinput更有优势，因为它会将页面读入内核页面缓存，并在用户地址空间中共享页面。然而，fileinput实际上将一个页面带入内核，并将一行复制到用户地址空间。因此，fileinput会产生额外的空间开销。
因此，我计划迁移到mmap，但我想从高级python黑客那里了解它是否提高了性能？
如果是这样，有没有使用mmap的fileinput的类似实现？
如果你知道的话，请给我任何开源代码。
谢谢
浏览 0提问于2011-03-30得票数 5
3回答
可能重复：
我听说(在互联网上读到) mmap()比顺序IO更快。这是正确的吗？如果是，那为什么它会更快呢？
mmap()没有按顺序阅读。
mmap()必须与read()一样从磁盘本身获取
映射的区域不是顺序的，所以不需要DMA (?)。
那么，mmap()实际上应该比文件中的read()慢吗？我以上哪一个假设是错误的？
浏览 8提问于2012-03-22得票数 45
回答已采纳
使用NDK r8c、Eclipse4.2、Windows7 64
SDK附带的Java调试器运行速度也很快。因此，我很困惑为什么gdb连接和跨过代码行的速度如此之慢。
在我当前的应用程序中，大约有20个静态库和1500个源文件，连接大约需要15秒，步进大约需要2秒。我更关心的是踏步。
有没有人分析过gdb，看看问题出在哪里？如果是这样，有什么建议吗？
浏览 0提问于2013-01-15得票数 3
回答已采纳
1回答
对于Ubuntu 20.04，我使用mmap映射一个磁盘文件(大约4G)。文件每天都在变化，所以我每天都要映射另一个文件。
我发现有时候(并不总是)，尽管mmap完成了，磁盘读操作还是增加得很快。
为什么mmap不将所有文件加载到内存中？
浏览 0提问于2020-10-11得票数 0
f = open('C:\Python33\File.doc')
s = mmap.mmap(f.fileno(), 0, access=mmap.ACCESS_READ)
if (s.find("blabla")) != -1:
print("True")
当我运行以下代码时，我会得到错误"TypeError：'str‘不支持缓冲区接口“，为什么会这样，我能做什么来解决这个问题呢？
我已经在网上搜索了答案，一个常见的结果是我在Python 2上使用Python 3，他们处理数据类型的方式。但我还没有找到一个直接的答案。
浏览 1提问于2015-05-07得票数 3
回答已采纳
当我们阅读Kotlin编程语言的描述时，它是这样说的：
JetBrains首席执行官Dmitry说，除了Scala之外，大多数语言都没有他们想要的特性。然而，他认为Scala编译时间慢是一个明显的缺陷。4 Kotlin的目标之一是以Java的速度编译。
他们是如何实现这一目标的？为什么Scala的编译时间如此之慢，以至于Kotlin创建者无法接受呢？换句话说，Scala编译器的哪些特性使它比Kotlin编译器慢？
浏览 2提问于2016-01-05得票数 9
回答已采纳
在线程中，建议使用mmap()而不是shmget()来获得Linux中的共享内存。为了获得一些文档，我访问了页面和页面，但是第二个页面给出了一个关于mmap()的模糊示例。
作为一个新手，并且需要在两个进程之间共享一些信息(以文本形式)，我应该使用shmget()方法还是mmap()？为什么？
浏览 3提问于2014-01-23得票数 72
回答已采纳
我有一个由大约263 k行组成的FlatXMLDataSet，我正试图将这些行加载到MySQL数据库中。我有一个小得多的数据集(5k行)，它不存在任何问题。大型数据集并不太复杂(名称、地址、电子邮件等)。
我尝试过的：
禁用外键检查
SET FOREIGN_KEY_CHECKS=0;
设置批处理大小
dbUnitConnection.getConfig().setProperty(org.dbunit.database.DatabaseConfig.FEATURE_BATCHED_STATEMENTS, true);
dbUnitConnection.getConfig().setProper
浏览 0提问于2019-09-12得票数 0
回答已采纳
我需要用Python解析一个相当大的csv文件。为此，我使用csv (文件包含引号)，并希望使用多处理并行这个过程。每个进程只读取mmap文件对象中的行。但是在实现这种方法时，我遇到了下一个问题(我知道关于python的语句，这只是一个演示)：
import csv
f = open('temp', 'r+b')
reader = csv.reader(f)
reader.next()
f.close()
乌普特：
['1000415037534300', '2013-07-14 13:25:13.000000',
浏览 0提问于2015-08-08得票数 2
回答已采纳
在的评论中，CodesInChaos说：
MS搞乱了NextBytes的实现，因此速度之慢令人吃惊。
..。其性能与为每个字节调用Next一样糟糕，而不是利用所有31位。但是，由于System.Random的设计和实现几乎在各个层次上都很糟糕，这是我的小抱怨之一。
他为什么说MS几乎在每个层次上都进行了设计和实现？
Random类是如何错误实现的？
浏览 1提问于2017-05-28得票数 0
回答已采纳
1回答
我使用的是一个36核的HPC节点。该节点具有2个Intel Xeon E5-2695 v4 CPU，每个CPU具有18个内核。我试图从主进程写入内存映射，子进程读取内存映射并更新它。子进程在更新之前休眠一段时间。我并行启动多个子进程。
我正在做一些性能测试，我遇到了一个场景，我在下面的代码结果中解释了这个场景。
import time
from mmap import mmap
from multiprocessing import Process, Lock
f = open("results.csv", "w")
f.write("mmap_tim
浏览 4提问于2019-09-04得票数 0
2回答
我有大约700个矩阵存储在磁盘上，每个矩阵大约有70k行和300列。
我必须相对较快地将这些矩阵的一部分加载到内存中的另一个矩阵中，每个矩阵大约1k行。我发现最快的方法是使用内存映射，最初我能够在0.02秒左右加载1k行。然而，性能是不一致的，有时，加载需要1秒的矩阵！
我的代码大致如下：
target = np.zeros((7000, 300))
target.fill(-1) # allocate memory
for path in os.listdir(folder_with_memmaps):
X = np.memmap(path, dtype=_DTYPE_MEMMA
浏览 2提问于2016-05-21得票数 9
回答已采纳
我搞不懂为什么3D数组的NumPy嵌套循环比Cython慢。我写了一些琐碎的例子。
Python/NumPy版本：
import numpy as np
def my_func(a,b,c):
s=0
for z in xrange(401):
for y in xrange(401):
for x in xrange(401):
if a[z,y,x] == 0 and b[x,y,z] >= 0:
c[z,y,x] = 1
浏览 2提问于2014-10-28得票数 4
1回答
我写了这个LINQ to xml查询：
Dim xd1 As XDocument = XDocument.Load("C:\doc1.xml")
Dim xd2 As XDocument = XDocument.Load("C:\doc2.xml")
Dim xd3 As XDocument = XDocument.Load("C:\doc3.xml")
Dim q = From a In xd1...<row>, b In xd2...<row>, c In xd3...<row> Where
浏览 0提问于2012-04-29得票数 0
回答已采纳
C++代码：
#include <string>
#include <fcntl.h>
#include <sys/mman.h>
#include <unistd.h>
#include <sys/time.h>
using namespace std;
#define FILE_MODE (S_IRUSR | S_IWUSR | S_IRGRP | S_IROTH)
int main() {
timeval tv1, tv2, tv3, tve;
gettimeofday(&tv1, 0);
i
浏览 5提问于2016-07-31得票数 1
回答已采纳
我正在使用rclone在微型存储桶和共享存储之间传输数据。我正在迁移一个商店，数据量大约是200 Im的产品图片。每一张图片都有自己的文件夹/路径。所以有很多需要创建的文件夹。Rclone安装在新服务器上，存储通过san连接到服务器。传输已经持续了一个多星期，我们现在的数据是170 is。一切都很好，但在我看来，它真的很慢。从存储桶传输到传统文件系统的速度如此之慢是正常的吗？
浏览 5提问于2020-09-25得票数 0
我试图使用以下代码将正则表达式应用于整个文件(而不仅仅是独立的每一行)：
import mmap, re
ifile = open(ifilename)
data = mmap.mmap(ifile.fileno(), 0)
print data
mo = re.search('error: (.*)', data)
if mo:
print "found error"
这是基于对问题的回答
但我得到了以下错误：
Traceback (most recent call last):
File "./myscript.py", lin
浏览 2提问于2014-08-12得票数 4
回答已采纳
我有一个VirtualMode = true的ListView和大量的条目(目前大约有800,000个)。
我的目标是每次选定项发生更改时，对所有选定项中的字段求和。
问题是，当选择了大量项时，枚举所有选择的项需要很长时间。例如，枚举800,000个选定项需要1秒。这意味着，对于每个单一的选择更改，用户必须等待整整1秒，然后GUI才会再次响应，这很烦人。
我不明白为什么枚举选定的项如此之慢，在一个简单的数组中枚举相同数量的项不需要任何东西。
如何加快枚举ListView中选定项的过程？
浏览 1提问于2010-09-17得票数 1
明天，我需要编写一个线程程序，从某个src文件中读取所有行，执行一些网络绑定的I/O过程，然后将输出写入到一个dest文件中。我担心的是，两个(或更多)线程可能会同时尝试写入磁盘，因此，我的数据将变得杂乱/损坏。
这是我需要担心的事情吗？我这一生中从来没有做过多线程的事情。在这种情况下，全局解释器锁(GIL)会有效地保护我吗？(我这样做的原因是因为单线程的实现将需要30天)。
非常感谢
浏览 0提问于2015-04-07得票数 0
我正在尝试加载一个相当大的numpy数组(~75k图像)，但是由于整个数据集都被加载到内存中，所以我一直收到内存错误。我想使用numpy mmap，但是我一直得到ACCESS_READ错误。当我试图使用中描述的mmap加载numpy数组时，总是会得到错误：
回溯(最近一次调用)：
文件"mmap.py"，第29行，在training_images =np.load(‘data_small/培训_Images.npy’，mmap_mode='r'，mode= 'latin1')中
文件"/usr/local/lib/python2.7/s
浏览 2提问于2017-05-08得票数 0
的函数调用约定定义了在rcx寄存器中传递的整数参数#4。另一方面，Linux使用r10实现相同的目的。所有其他参数都在相同的寄存器中传递给函数和syscall。
这导致了一些奇怪的事情。例如，查看mmap在glibc中用于x32平台的实现(对于该平台存在相同的差异)：
00432ce0 <__mmap>:
432ce0: 49 89 ca mov %rcx,%r10
432ce3: b8 09 00 00 40 mov $0x40000009,%eax
432ce8: 0f
浏览 2提问于2016-07-25得票数 12
回答已采纳
我正在处理R中的一个维度约为7000 x 5000的数据集。文件大小约为100,000 KB。将其加载到R中大约需要半个小时。当我尝试创建相关表以运行PCA时，R会冻结。然后我必须重新打开它，并再次导入数据。 对于这么大的数据集，它的速度如此之慢，我感到很惊讶。我认为数据集必须大得多才能影响到这种程度的速度。我用的是微软的Surface Pro 3。 有没有人知道为什么会发生这种情况，我能做些什么？是我的笔记本电脑吗？或者，这种情况在这种规模的数据集中很常见吗？ 回复评论:我的电脑有8 GB内存。这是我使用的代码： nlsy_training_set <- read_excel(
浏览 30提问于2020-01-26得票数 0
7回答
在开发Grails1.0.5应用程序时，我对grails test-app命令的速度之慢感到震惊。即使实际的测试只需10秒钟，整个执行过程加起来就是
实际1m26.953s用户0m53.955ssys 0m1.860
这包括grails引导、加载插件、编译所有代码等。
任何关于如何加快grails test-app执行的提示都将不胜感激。
浏览 5提问于2009-06-02得票数 25
回答已采纳
我试图用ACCESS_COPY模式映射一个文件。然后，我编写了一个字符和刷新，但是flush()返回失败，并且更改不会被写回文件。知道为什么吗？谢谢。
Python 2.7.3 (default, Apr 10 2012, 23:24:47) [MSC v.1500 64 bit (AMD64)] on win32
Type "help", "copyright", "credits" or "license" for more information.
>>>
import os, mmap
f = ope
浏览 2提问于2014-10-30得票数 2
回答已采纳
我正在测试APUE的代码，在内存映射文件的第14章(高级I/O)中，fstat()总是将fdin的st_size返回为零，然后尝试了stat()，并得到了相同的结果。
#include <fcntl.h>
#include <sys/mman.h>
#include <stdlib.h>
#include <string.h>
#include <stdio.h>
#include <sys/stat.h>
#include <unistd.h>
#define COPYINCR (1024*1024*102
浏览 2提问于2014-11-12得票数 2
我想在Python中创建类似于C的posix_memalign缓冲区
我曾经使用在python中创建内存对齐缓冲区。
但是当我使用32位的ubuntu时，我不能创建更多的mem对齐缓冲区。
因为我只能在32位机器上得到2G mem对齐缓冲区。
是否需要用Python中的另一个库替换mmap？
这是我在32位机上的测试代码。
import mmap
blk = 50*512*1024
def get_buf():
data = '\0'*blk
buf=mmap.mmap(-1, blk, mmap.MAP_SHARED)
buf
浏览 0提问于2018-01-25得票数 1
1回答
我对有问题，它在集群中重新组织地图上的标记。在我的应用程序中，我有1200个标记，聚类非常慢。
下面是我的代码：
Into my for (json){
GoogleLocationCustom classe; // note : GoogleLocationCustom extends ClusterItem
mClusterManager.addItem(classe);
}
在for (json)之后：
mMap.setOnCameraChangeListener(mClusterManager);
mMap.setOnMarkerClickListener(mClus
浏览 0提问于2015-08-13得票数 0
对于python来说，我是新手，对于某些I/O，我必须使用python。我从一个简单的python代码开始，该代码使用os模块中的open()方法，代码运行良好。
#!/usr/bin/python
import os, sys, mmap
# Open a file
fd = os.open( "foo.txt", os.O_RDWR|os.O_CREAT)
s = ' ' * 1024
# Write one string
os.write(fd, s)
# Close opened file
os.close( fd )
现在，由于我想使用直接I/O，
浏览 0提问于2020-08-31得票数 1
回答已采纳
我有以下代码：
def grep(pattern, file_path):
with io.open(file_path, "r", encoding="utf-8") as f:
file_size = os.path.getsize(file_path)
mm = mmap.mmap(f.fileno(), file_size, access=mmap.ACCESS_READ)
return re.search(pattern, mm)
使用Python2.6.6，我可以使用r'a
浏览 9提问于2016-08-17得票数 2
2回答
怎么可能只通过切片将一个mmap的特定部分复制到另一个mmap中？
#!/usr/bin/python3
import mmap
a = mmap.mmap(-1, 5)
b = mmap.mmap(-1, 5)
a[0:] = b'12345'
b[0:] = b'67890'
a[2:6] = b[0:4]
print(a[:])
有办法通过切片复制这样的范围吗？如果这是不可能的，还有什么其他的解决办法？
浏览 0提问于2019-06-18得票数 0
回答已采纳
我正在转换一些通过mmap访问设备驱动程序的C代码。我认为我可以很容易地在Python中做类似的事情。不过，我遇到了这个问题。需要mmap‘’ed的地址是由PCI配置提供的，所以我无法控制这个地址。在这种情况下，找到的地址是3451912192。地址字段当然是一个无符号整数，是32位.
此地址恰好位于一个无符号整数而不是有符号整数的范围内。当我调用mmap时，会得到以下异常：
OverflowError: long int too large to convert to int
所以Python人为地告诉我这个数字不合适，因为它认为它是签名的。是否有可能以某种方式解决这一问题，还是必须用C语言
浏览 1提问于2011-07-19得票数 9
我试图在两个不同的python解释器之间建立一个高速共享缓冲区，为此，我在/tmp中创建了一个文件，然后使用它来创建mmap对象。
fd= os.open("file", os.O_CREAT | os.O_TRUNC | os.O_RDWR)
assert os.write(fd2, bytes('\x00' * Size, encoding='utf-8')) == Size
mem = mmap.mmap(fd, Size , mmap.MAP_SHARED, mmap.PROT_WRITE)
但是后来我做了一些测试，我注意
浏览 2提问于2020-11-26得票数 1
回答已采纳
1回答
我正试图通过python跟踪一个bug，现在把我带到ansi-c的mmap。
import os, mmap
filename = <name to ntfs file>
os.path.exists(filename) # is true
with open(filename, 'rb') as f:
# f.fileno() is 3 or 19 (not -1)
mmap.mmap(f.fileno(), 1, access=mmap.ACCESS_READ, offset=0)
# OSError [19]: No such devi
浏览 3提问于2017-10-19得票数 1
我读到RawArray可以在不被复制的过程中共享，我想了解它是如何在Python中实现的。
我在中看到，RawArray是由的BufferWrapper构造的，然后用ctypes.memset作废。
BufferWrapper是由一个Arena对象构成的，该对象本身是由一个mmap构建的(或windows中的100个mmap，参见中的第40行)。
我读到mmap系统调用实际上用于在Linux/BSD中分配内存，模块使用作为windows。
那么，mmap似乎很方便。它似乎可以直接和mp.pool一起工作-
from struct import pack
from mmap import mma
浏览 0提问于2019-06-07得票数 4
回答已采纳
扫码
添加站长 进交流群
领取专属 10元无门槛券
手把手带您无忧上云
相关资讯
热门标签
云服务器
ICP备案
对象存储
即时通信 IM
实时音视频活动推荐
腾讯云开发者
