python-multiprocessing 相关问题

multiprocessing是一个使用类似于python编程语言中的线程模块的API支持产生进程的包。

如何将多个python多进程保存到一个变量

我正在对一个非常大的图像(25 088 像素 x 36 864 像素)进行一些图像处理。由于图像非常大,我通过 256x256 像素“图块”进行图像处理。我注意到...

回答 1 投票 0

有没有办法关闭Python多处理资源跟踪器进程?

我一周前提交了一个关于终止 ProcessPoolExecutor 后持久进程的问题,但还没有回复。我想这可能是因为熟悉的人不够多......

回答 1 投票 0

为什么我的 CMA-ES 实现的迭代速度会因多处理而变慢?

我已经使用 cma 包在 python 中实现了 CMA-ES。为了加快算法速度,我使用多处理包并行初始化该算法的多个实例。 T...

回答 1 投票 0

multiprocessing.Pool 使用共享值映射多个参数

我正在练习使用共享值进行多处理。我有一个正在使用共享值的现有 Process 函数: def run_procs_with_loop(锁): #这是我的共同价值观

回答 2 投票 0

Python 多线程 - 未终止的进程

下面的代码是我根据我正在处理的代码建模的,并为了解决这个问题而进行了简化,它似乎没有正确使用 p.join() 来管理 p 创建的进程。圣...

回答 1 投票 0

Python Pool.apply_async() 返回 None 类型对象

我有一个 4GB 以上的文件,其中每一行代表一个非常嵌套的 JSON 字符串。该文件的示例如下: {"core":{"id":"1","field1":{&

回答 1 投票 0

在Python中锁定类和线程以进行字典修改

我正在学习和测试python中的线程和Lock类,所以在这里我想为人员添加一个密钥,但是假设这需要一些时间,在另一个线程中我想读取密钥。在第一...

回答 1 投票 0

多处理期间记录到队列失败

TL;DR:为什么控制台视图中的(内部运行)打印语句中没有列出记录器的处理程序? 寻找此日志记录方案无法正常工作的原因的解释。 我关注了...

回答 1 投票 0

无法从另一个 Python .py 文件运行进程

我正在创建一个类,在初始化它时,我正在调用(多进程)它的函数。当我从同一个 .py 文件创建此类时,一切正常。但是,当我初始化这个时

回答 1 投票 0

为什么在 multiprocessing/process.py 中为类 BaseProcess(object) 的 `_parent_pid` 和 `_parent_name` 属性分配当前信息?

根据Python 3.10.12的multiprocessing/process.py文件: 类 BaseProcess(对象): ''' 流程对象表示在单独流程中运行的活动 班级是

回答 1 投票 0

python主进程和fork进程如何共享gc信息?

来自帖子https://stackoverflow.com/a/53504673/9191338: 生成对象被克隆,并且每个对象都在每个进程中最终确定 fork/forkserver 对象在主进程中共享并最终确定 这个

回答 1 投票 0

Python 多处理中进程的生命周期是怎样的?

在普通的Python代码中,我可以理解进程的生命周期。例如执行 python script.py 时: shell接收命令python script.py,os创建一个新进程开始执行...

回答 1 投票 0

带有回调的Python多处理apply_async不会更新字典数据结构

我正在尝试计算目录中的所有标记。由于文档量很大,我想使用多重处理(或任何其他您可以自由使用的并行计算工具)来进行计数

回答 1 投票 0

Python 3.9 中的进程在 ThreadPoolExecutor 内创建时以代码 1 退出

我有一段代码,它将任务提交给启动进程的 ThreadPoolExecutor。我意识到在 Python 3.8 中,进程以退出代码 0 结束。但我已将 Python 更新到 3.9

回答 1 投票 0

在我的例子中处理多个文件时,为什么线程比异步快得多

我正在尝试使用异步和线程来找出在处理大量文件时应该选择哪种机制。实验很简单,我只是想读取文件并添加...

回答 1 投票 0

Python 中使用多处理池方法的矩阵乘法

使用多处理池方法进行矩阵乘法。 将 numpy 导入为 np 从多处理导入池 def 矩阵乘法(args): 矩阵_a,矩阵_b = 参数 返回 np.dot(matrix_a, ma...

回答 1 投票 0

easyocr 和多重处理

我们正在尝试使用 easyocr 而不是 (py)tesseract。它的输出质量非常好,但是有一个不寻常的问题。它不能与 Python 的多处理库一起使用,但可以与 torch 的

回答 1 投票 0

如何使用Multiprocessing在Python中循环遍历x*y域?

我正在尝试编写一些循环遍历 x*y 点网格并执行计算的代码(请参阅代码示例) Nx = 10 纽约 = 10 对于范围内的 i(len(1,Nx-1)) 对于范围内的 j(len(1, Ny-1)) ...

回答 1 投票 0

如何在有限时间约束下用Python高效处理6000个请求?

我有一个 Python 脚本,它向 API 发送请求以根据输入提示生成响应。每个请求通常需要大约 10 秒来处理。我有一个包含 6000 行的 CSV 文件,...

回答 1 投票 0

Python 中多重处理的停滞

我遇到了多处理模块的奇怪行为。谁能解释一下这是怎么回事? 以下 MWE 停止(永远运行而不会出现错误): #!/usr/bin/env python3 导入

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.