Python 共享内存_专题 - Python中文网

当前热门话题： Python 共享内存: 本站为您提供最新、最全的共享内存的Python教程、文档、代码、资源等相关内容，Python中文网技术交流社区同时还提供学习资源下载，如：电子书、IDE编辑器软件、编程视频、代码规范标准、WEB开发、GUI、科学计算与人工智能等相关内容。

本文网址：https://www.cnpython.com/tags/270601
欢迎加入QQ群-->： 979659372

关于共享内存相关联的Python项目和问题：

Python多处理中Pool.map与共享内存数组的结合

我有一个非常大的（只读）数据数组，我希望由多个进程并行处理。我喜欢Pool.map函数，并希望使用它并行计算该数据上的函数。我看到可以使用Value或Array类在进程之间使用共享内存数据。但是， ...

2024-04-28 已阅读: n次

在python中同时读写文件

我正在计划在python3中使用三个文本文件或三个数据库表的应用程序，不知道要做什么使用。这些文件只包含字符串或数据库表中的一列，每行包含一个字符串。该应用程序有三个程序，程序A、程序B、程序C，操 ...

2024-04-28 已阅读: n次

使用共享内存的Python缓存

我想使用twisted或gunicorn之类的框架构建一个在单个主机上运行尽可能多进程的应用程序。每个进程都需要访问一个非常大的LRU缓存，最大可达30GB。理想情况下，缓存将包含python对象（d ...

2024-04-28 已阅读: n次

从共享内存的数组缓冲区形成numpy数组（多处理）失败

我需要在两个进程之间的共享内存中有一个多维数组。我正在尝试制作一个简单的示例：我将[1, 2, 3, 4, 5, 6, 7, 8, 9]发送到另一个进程，该进程将其重塑为[[1, 2, 3], [4, ...

2024-04-28 已阅读: n次

如何将PyObject*内存数据复制到另一个内存地址？

我正在开发一个嵌入了Python的C程序。在主机程序是多进程，通过共享内存（mmap）进行通信。在我在一个进程中创建一个Python对象（例如PyDict_New）。如何将这些数据复制到共享内存中 ...

2024-04-28 已阅读: n次

C++中嵌入Python的多处理

我有一个Python程序，但是似乎我不能真正地扩展它，因为如果缺乏多处理。我们增加了线程，但由于它仍然运行在一个核心上，我们无法进行足够的扩展。在我看到了^ a1}，可以在C++程序中嵌入Pytho ...

2024-04-28 已阅读: n次

调用时Python多处理死锁条件通知（）在其他进程准备就绪之前

我有一个producer和consumer进程，以及它们之间的共享内存区域。当有新数据可用时，我使用Condition对象从生产者进程向消费者进程发出信号。在当前的问题是等一下（）具有以下跟踪： P ...

2024-04-28 已阅读: n次

在GIL之外使用scipy例程

这是一个与我脑海中的特定实现相关的一般性问题，关于在共享内存环境中使用GIL内部设计的python例程是否安全。具体来说，我想做的是在cython函数内的一个大数组上使用scipy.optimize. ...

2024-04-28 已阅读: n次

始终包含最新值的类队列对象

我正在使用多处理库。我想使用一个类似队列的对象（这意味着它可以在进程之间安全地共享和读取），它总是公开内部写入的最新值。我希望这样做时不消耗该值，以便其他进程也可以读取该值我以队列为例，因为我只知道 ...

2024-04-28 已阅读: n次

在一台机器上共享芹菜工人的内存区域

我想在celery中在我的工作节点之间共享一些信息（例如缓存的授权令牌、统计信息等等）。在如果我在我的任务文件中创建一个全局，它对每个worker是唯一的（我的workers是进程，其生命周期为1个 ...

2024-04-28 已阅读: n次

不相关进程的Python多处理

我有许多进程是单独生成的，而不是从父进程到子进程。进程需要向特定的进程发送消息。接收进程地址（pid）可以存储在数据库中，但进程不能共享内存中的任何公共变量。在我找不到任何方法用pythons多进程 ...

2024-04-28 已阅读: n次

使用共享内存中的对象数组进行多处理？

一个函数，我并行化，接受一个大的嵌套列表作为输入。这会很快造成内存限制，这意味着程序被中止。出于这个原因，我一直在尝试通过共享内存访问嵌套列表。我在一台Windows机器上工作在这种情况下，我遇到了 ...

2024-04-28 已阅读: n次

shared-ndarra

使用posix在进程之间共享numpy ndarray的可pickle包装器共享内存。 sharedndarray被设计为通过多处理.管道和队列发送无需序列化或传输底层ndarray或缓冲区。而 ...

2024-04-28 已阅读: n次

shm-dict

shm_dict 共享内存字典，利用posix ipc信号量和共享内存段，并在需要时提供数据的永久磁盘存储。 ...

2024-04-28 已阅读: n次

quadwi

提供通过套接字接收数据并将其泵入共享内存的框架。 ...

2024-04-28 已阅读: n次

sharedbuffers

这个库实现了可以读取和操作的共享内存类型的缓冲区（我们最终将支持写入）没有序列化或反序列化的高效。获取共享内存的主要支持实现是通过内存映射文件，但是库也支持映射缓冲区（匿名mmap对象）也一样， ...

2024-04-28 已阅读: n次

wicomm

提供通过套接字接收数据并将其泵入共享内存的框架。 ...

2024-04-28 已阅读: n次

posix_ipc

posix_ipc是一个python模块（用c编写），它允许创建和 posix进程间信号量、共享内存和消息的操作支持posix实时扩展的平台上的队列a.k.a.posix 1003.1b-1993年 ...

2024-04-28 已阅读: n次

sysv_ipc

sysv_ipc使python程序可以访问system v信号量、共享内存和消息队列。大部分（全部？）unixes（包括os x）支持system v ipc。 windows+cygwin 1.7 ...

2024-04-28 已阅读: n次

ModbusSharedMemor

modbus共享内存-更简单更好。简介厌倦了那些优秀的、功能齐全的modbus库？只是想建立这种烦人的沟通，开始做重要的事情？给你。 modbus共享内存是一个允许您：建立modbus通信， ...

2024-04-28 已阅读: n次

paraproc

概述 paraproc是一个简单的库，可以帮助您轻松地并行计算（独立的数据块）在python中跨越多个进程，特别是当您想混合调用外部命令行程序和手工酿造时 python在数据处理管道中一起工 ...

2024-04-28 已阅读: n次

pastset

pypastset是基于pastset元组的python实现分布式共享内存和计算系统。在某些方面，pastset类似于经典的linda tuplespace，但是显著差异。在pastset中，元 ...

2024-04-28 已阅读: n次

varnishsentr

VarnishSentry允许选择性提交分组的Varnished共享内存将条目记录到哨兵DSN。查看https://github.com/carlosabalde/varnishsentry了解详 ...

2024-04-28 已阅读: n次

gpsdshm

概述 python gpsdshm提供只读（！）python接口到gpsd的共享内存。它提供了一个单独的类Shm，将共享内存结构的字段公开为属性。这个 python gpsdshmapi是（松散地 ...

2024-04-28 已阅读: n次

npshmex

汽蚀余量 npshmex提供了concurrent.futures.processpoolexecutor的替换，使用由SharedArray提供的共享内存（而不是pickle）在进程之间传输n ...

2024-04-28 已阅读: n次

VCC

Varnish自定义计数器（VCC）允许聚合自定义日志项从Varnish共享内存日志中提取。查看https://github.com/carlosabalde/vcc了解详细说明，额外的文件和其 ...

2024-04-28 已阅读: n次

ParallelRegression

并行回归是一组python工具，用于使用并行进程分析共享内存中的数据集。mathdict是一组工具，用于在单个共享内存块中组装矩阵，然后创建不同的矩阵视图，这些视图将共享内存中的列与用于分析的进程本地 ...

2024-04-28 已阅读: n次

multitables

multitables是一个python库，用于高速访问hdf5文件。 pytables库（tables）提供对hdf5的访问。启动多个进程并行读取HDF5，允许并发解压缩。数据通过使用共享内存空 ...

2024-04-28 已阅读: n次

pyshm

#pyshm-python共享内存库[！[许可证]（https://img.shields.io/badge/License BSD%202--Clause orange.svg）]（https:// ...

2024-04-28 已阅读: n次

redison

redis:redis+json：使用redis和json文件的内存共享对象开始纽比 from redison import RedisObject import numpy as np ...

2024-04-28 已阅读: n次

pyshmht

皮什姆特 ======= **基于共享内存**python哈希表扩展有关示例，请参见python文件中的测试用例（pyshmht/cacher.py、pyshmht/hashtable.py）， ...

2024-04-28 已阅读: n次

flyweight2

看看tests.py就知道如何使用它了。 ...

2024-04-28 已阅读: n次

Python 共享内存

关于共享内存 相关联的Python项目和问题：

关于共享内存相关联的Python项目和问题：