multiprocessing 相关问题

多处理是在单个计算机系统中使用两个或更多个中央处理单元(CPU)

从单线程到多线程图像处理

我正在将我的代码从单个线程转换为多线程进程,然后我到达了我正在努力的那部分代码:src,imJ和IllumTrans只是大小为1288 * 728的图像......

回答 1 投票 1

在cython中并行化for循环:超越prange

我正在努力使用cython正确地并行化一个函数。基本上,问题是存储一些数据。实际的代码有点长,但最后它会做这样的事情:def bin_var(...

回答 1 投票 2

Python多处理竞争条件

当使用concurrent.futures从多个文本文件中读取时,我发现了一个奇怪的错误。这是一个可重复的小例子:import os import concurrent.futures def read_file(file):with ...

回答 2 投票 2

从批处理文件运行多处理arcpy python

所以我正在尝试将多处理功能添加到通过批处理文件运行的python脚本中。我在运行时不断收到回溯类型错误,似乎无法解决问题。我能解决的最多......

回答 1 投票 0

为Python脚本创建共享消息流的最佳方法是什么?

我想做什么:我需要一个简单的消息流,因此一些脚本可以在那里发送结果,另一个脚本可以获取结果并以异步方式执行某些操作。主要问题:我想看看是什么......

回答 1 投票 0

使用带有cythonized类的dask。酸洗对象方法时出错

我想用以下类对python模块进行cython化:class C:def __init __(self,x):self.x = x @staticmethod def f(k):return k def g(self,k):.. 。

回答 1 投票 0

使用TensorFlow-GPU + Python多处理时的错误?

当我使用TensorFlow-GPU + Python多处理时,我注意到了一种奇怪的行为。我已经实现了一个带有一些自定义和我自己的数据集的DCGAN。因为我正在调整DCGAN到......

回答 1 投票 0

并发数据加载器的干净,pythonic方式?

Python 3我想知道一个真正干净的pythonic并发数据加载器应该是什么样子。对于我的一个项目,我需要这种方法,对大于......的数据进行繁重的计算。

回答 1 投票 0

在Python中反转ProcessPoolExecutor

这与我之前仍在努力解决的早期问题有关。基本上我需要ProcessPoolExecutor的逆向设计,我有很多查询过程和一个工作者......

回答 1 投票 0

python中的多进程为两个不同的函数

我正在尝试做一个简单的音乐播放器。我想在听音乐时向用户提问。在下一行中,如果用户不想再听音乐,我会添加一个列表......

回答 1 投票 0

为什么不能multiprocess.Process调用getattr方法?

试图在multiprocessing.Process中通过getattr()调用两个方法say_hello和say_world,但是方法say_world尚未执行。我怎样才能成功呢?谢谢。 # - * - 编码:utf-8 - * - 来自......

回答 1 投票 0

如何在python中使用多处理将df的内容写入csv文件

我有一个函数将df的内容写入csv文件。 def writeToCSV(outDf,defFile,toFile,retainFlag = True,delim ='\ t',quotechar ='“'):headers = [] fid = open(defFile,'r')...

回答 2 投票 0

Python中的多处理错误

我是Python的新手,我正在尝试学习如何并行运行多个函数。使用Python文档我开始遵循一些简单的例子,但即使是最简单的例子也会引导我...

回答 1 投票 1

python manager.dict()锁定如何工作:

managers.dict()允许跨进程共享字典并执行线程安全操作。在我的情况下,每个协调器进程创建具有m个元素的共享字典,并且n个工作进程读取...

回答 1 投票 1

使用pandas的Python多处理并非所有进程都一次运行

我正在读取块中的csv并将块传递给4个进程池。 pool =池(进程= 4)chunk_index = 1,用于pd.read_csv中的df(downloaded_file,chunksize = chunksize,...

回答 1 投票 0

如何在Python中使类成员进程安全

我正在一个类上执行一些任务,它通过迭代器生成多个进程,以使每个条目都被处理一次。代码是Like:import multiprocessing as mp Class MyClass():def ...

回答 1 投票 0

python多处理是否通过全局标志变量安全地进行进程间信令?

我正在运行许多子进程(比我有核心),如果一个符合某个条件,我设置一个全局变量全局救助的值。然后,如果设置了救助,所有后续子流程......

回答 2 投票 1

在Mac上完成多处理时挂起,但不在Windows上挂起

我有两个开发环境......一台Windows计算机和一台Mac用于旅途中。该脚本在Windows计算机上运行正常,并将循环遍历所有池。但在Mac上,它只是挂起。 ...

回答 1 投票 1

连续执行Python中的函数

我试图让几个函数一个接一个地运行,但我的代码一直陷入循环中。我已经尝试过实现多处理,就像这个帖子中有人推荐的那样,但是没有......

回答 1 投票 0

使用多处理来处理DataFrame但列值不会更改

我有一个大型数据框,我想删除其中一列中的HTML标记。所以我使用BeautifulSoup和for循环来完成这项工作,它工作正常。像这样:从bs4导入pandas为pd ...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.