Python 并行性_专题 - Python中文网

当前热门话题： Python 并行性: 本站为您提供最新、最全的并行性的Python教程、文档、代码、资源等相关内容，Python中文网技术交流社区同时还提供学习资源下载，如：电子书、IDE编辑器软件、编程视频、代码规范标准、WEB开发、GUI、科学计算与人工智能等相关内容。

本文网址：https://www.cnpython.com/tags/283292
欢迎加入QQ群-->： 979659372

关于并行性相关联的Python项目和问题：

在python中理解DB连接池

我不确定我是否理解数据库连接池的用例（例如：psycopg2.pool和mysql.connector.pooling)在python中。在我看来，在python中，并行性通常是使用多进程而不是多线程 ...

2024-06-06 已阅读: n次

如何使用多个输入管道在tensorflow中实现多gpu的数据并行运算？

我正在为一个GAN编写代码。使用多个GPU上的数据并行性进行训练。为了在训练鉴别器时发现更多细节和差异，我想设置多个独立的管道，每个gpu获取数据（每个图像类别都不同，例如使用狗图片馈送GPU0和馈 ...

2024-06-06 已阅读: n次

pymysql IO期间的高CPU

我试图在一个主要绑定IO的python应用程序上调试高CPU使用率。python应用程序轮询队列中的消息，执行一系列MySQL查询和一个外部API调用。它不是多线程的，我们产生了多个python进程（ ...

2024-06-06 已阅读: n次

将批量数据写入大查询

我想写批量数据到BQ使用软件API。你知道吗我的限制是：我将使用BQ的最大大小，列10000和~35000行（可以更大）架构自动检测是必需的如果可能的话，我想使用某种并行性异步地同时编写许多 ...

2024-06-06 已阅读: n次

如何在TensorFlow 2中重置初始化

如果我在初始化tf.Variable之后尝试更改TensorFlow 2中的并行性 import tensorflow as tf _ = tf.Variable([1]) tf.config.thr ...

2024-06-06 已阅读: n次

进程实例化锁定执行时的Python多进程

我有一些执行非冲突任务的python代码，这种并行性不会导致任何竞争条件。我只是想提高处理速度，我有4个文件，而不是一次读取一个文件，我想打开所有4个文件，同时读取/编辑其中的数据我在这里读到了一些 ...

2024-06-06 已阅读: n次

读取一个在python中以2KB为块的多线程文件。

我必须以2KB的块读取文件，并对这些块执行一些操作。现在我真正陷入困境的是，当数据需要线程安全的时候。根据我在在线教程和StackOverflow答案中看到的，我们定义了一个worker线程，并重写了 ...

2024-06-06 已阅读: n次

Spark数据帧未分发

我不明白为什么我的数据帧只在一个节点上。我有一个由14台机器组成的集群，在spark独立集群上有4个物理CPU。我通过一个笔记本连接起来，并创建我的spark上下文：我希望有8个分区的并行性 ...

2024-06-06 已阅读: n次

Python中的if len（list）

我正在将一个Python代码转换为C，以便利用HPC系统上可用的并行性（这是一个痛苦的过程），我在Python中遇到了一个条件，最初的程序员使用它使我困惑 if rnum <> cu ...

2024-06-06 已阅读: n次

限制python脚本的运行实例数

我有一个python脚本，比如说scriptB，需要运行1000次，从另一个脚本调用，比如scriptA。如何确保脚本b的运行实例不超过n个？我需要使整个过程更快，所以我需要有并行性。在 ...

2024-06-06 已阅读: n次

是否可以在固定时间内向多个接收套接字发送一条消息？

这是一般性的，但我最近需要通过python中的UNIX域套接字将通过websocketapi接收到的大量消息发送到多个子进程。纯线程是没有选择的，因为我需要真正的并发性（希望我没有把它和并行性混淆）， ...

2024-06-06 已阅读: n次

如何在python中轻松实现parallel for？

<>我是C++的家伙，我喜欢并行性，HPC应用程序，我知道OpenMP相当好。现在我在学习python，我知道了一些基本知识。在作为提高python技能的个人项目，我想实现Elkan algorit ...

2024-06-06 已阅读: n次

parallelize

#并行性-python的并行处理``` ...

2024-06-06 已阅读: n次

python-parallel-collections

这个包提供了一个方便的接口，可以在多个进程中对标准python数据结构和生成器执行map/filter/reduce样式的操作。并行性是使用concurrent.futures包的Python2. ...

2024-06-06 已阅读: n次

tao

高级优化工具包（tao）的目标是大规模高性能优化问题的研究建筑。它的主要目标是可移植性、性能、可伸缩性并行性，以及独立于体系结构的接口。道是适用于单处理器和大规模并行建筑。提示您还可以 ...

2024-06-06 已阅读: n次

tbb4p

使用“英特尔线程构建基块”（英特尔TBB）库作为通用工作计划程序，实现两个或多个多线程模块的可组合性。防止由于未经任何源代码更改的资源超额订阅而导致性能降低。python池和threadpool的可组 ...

2024-06-06 已阅读: n次

parallelp

并行性数据科学应用的最小并行处理模块 pip安装parallelpy from parallelpy import Parallelizer parallel ...

2024-06-06 已阅读: n次

python-parallel

平行的 Bringing parallelism closer to humans ✨ 重要：parallel处于早期阶段。欢迎提出任何问题和建议。请submit an issue。开始安装： ...

2024-06-06 已阅读: n次

loo.p

loopy允许您轻松生成必要的繁琐、复杂的代码从gpu和多核cpu中获得良好的性能。网上与loopy相关的位置： Python package index（下载版本）注意pypi标识符中额外的 ...

2024-06-06 已阅读: n次

inparallel

python中基于进程的并行性（cpython 2.7或3.4+）此包Python名称：inparallel 目前版本： inparallel 1 ...

2024-06-06 已阅读: n次

Python 并行性

关于并行性 相关联的Python项目和问题：

关于并行性相关联的Python项目和问题：