简单的多处理框架

multiworker的Python项目详细描述


今天的计算机几乎都是多核机器。然而,由于cpython的gil,利用这些多核 不简单。例如,multithreading模块实际上是无效的,因为多线程处理不会 除非线程在I/O操作中被绑定,否则会发生。

然而,python提供了一种实际利用多核并行性的方法:模块multiprocessing

multiprocessing的问题是,给了您一个非常“低级”的管道机制。它为你提供了 用于创建多个(子)进程的工具,用于在(子)进程之间通信的工具,用于同步的工具 在(子)进程之间……但这就是问题所在。当你开始制作程序来利用multiprocessing时 powers,你会很快发现你必须继续构建完全相同的代码结构。一路上,你 可以说,继续“创造轮子”。

这个包旨在通过删除 必须继续创建“harness”代码。

简而言之,这段代码的目的是multiprocessingrequests做了什么urllib:提取 并提供一个更直观的工具集来实现多核感知程序。

欢迎加入QQ群-->: 979659372 Python中文网_新手群

推荐PyPI第三方库


热门话题
java爬虫获取外部网站搜索结果   java Bluestack未连接到eclipse   java如何从ConstraintViolationException Hibernamte获取数据库字段名   HttpResponse HttpResponse=httpClient引发java运行时错误。执行(httpPost);   Jama中矩阵的java点积和叉积   java有什么方法可以唯一地识别可扩展设备吗?   java我需要用*来写我的名字,但我不断遇到一个错误,我对编码很陌生   java变量是在内部类中访问的。需要被宣布为最终决定。但我不想宣布最终结果   java如何缩短base64图像字符串,Android?   JavaSpringMVC:计划方法不自动触发   图形学习Java 2D API的好资源是什么?   如何在java中对方法进行排队   java JavaFX多行   java Selenium无法在[链接]上找到基于CSS元素的密码字段元素http://www.cartasi.it/gtwpages/index.jsp   Java中的equals()和hashCode()契约   软删除情况下的java Hibernate二级缓存   java为什么这段代码要两次调用这些方法?