multiprocessing 相关问题

多处理是在单个计算机系统中使用两个或更多个中央处理单元(CPU)

支持 Tensorflow 2 在单 GPU 上进行多处理推理

我有一组图像需要进行推理。我想做的是生成 4 个工作线程,每个工作线程对 GPU 内存有 1/4 的访问权限。即使我限制内存,我也会遇到 OOM...

回答 1 投票 0

使用for循环读取多处理缺失的可迭代对象

抱歉,如果我的措辞错误,下面是我的脚本,我试图找出为什么当我查看存档文件(我创建的)时,当要打开/读取的文件有 10000 时,我只看到 9874 行我猜...

回答 1 投票 0

如何在Python多处理映射中拥有不可变的共享对象

我怎样才能让我的所有工作进程共享同一个对象,并且它们都不会发生变化?例如,编写计算参数 vec 点积的函数的最简洁方法是什么...

回答 1 投票 0

Prometheus 如何使用 start_http_server 在多进程应用程序中公开指标

如何在多进程应用程序中使用 start_http_server 公开指标 我在互联网上找到了很多gunicorn的例子,但我想使用start_http_server 我应该如何处理下面的代码才能使其正常工作...

回答 1 投票 0

无法在类中pickle sqlAlchemy引擎

我想在我的自定义类中将多处理模块与 sqlAlchemy 一起使用。 这是代码: 从 sqlalchemy 导入 create_engine 引擎 = create_engine(f'mysql+pymysql://a:b@localhost:3306/',

回答 1 投票 0

使用Python通过多处理在各种处理器上执行程序

我想同时在不同的处理器上运行不同的可执行文件,所以我从这里举了例子: 有没有办法使用 python 将不同的作业(进程)分配给 Linux 中的特定核心...

回答 1 投票 0

无法使用 pickle 序列化使用 make_dataclass 生成的数据类

在我的代码中,我使用 make_dataclass 函数生成运行时类。 问题是此类数据类无法使用 pickle 进行序列化,如下面的代码片段所示。 是

回答 1 投票 0

使用本地函数进行多处理的解决方法

我正在为对外部依赖项非常挑剔的客户移植一个库。 该库中的大部分多处理由 pathos ProcessPool 模块支持。主要...

回答 2 投票 0

骆驼的批量推理

我正在使用 llama3.1:8b 根据给定上下文回答问题。迭代执行 20,000 次需要太多时间。有单GPU的批处理解决方案吗? 我正在通过ol使用它...

回答 1 投票 0

如何在 Python 3.7 中为 multiprocessing.connection.Client(..) 添加超时?

我正在运行两个Python 程序。程序 A 通过多处理模块连接到程序 B: # 程序A中的连接代码 #----------------------------------------- 导入多重处理 导入

回答 2 投票 0

Python 在使用多处理 Process 时会多次导入

我正在使用多重处理来显示来自 pygame 的 mss 模块的屏幕截图。但是,问候消息会显示 3 次。 我想知道这是否会分散性能。另外,当我...

回答 1 投票 0

无法在 Python 3.5 中子类化多处理队列

我的最终目标是将标准输出从几个子进程重定向到一些队列,并将它们打印在某个地方(也许在一个小GUI中)。 第一步是将 Queue 子类化为一个对象,该对象...

回答 1 投票 0

尝试创建 multiprocessing.Queue 的子类时出现 TypeError 问题[重复]

我尝试像为queue.Queue所做的那样创建multiprocessing.Queue的继承子类,但出现错误: 回溯(最近一次调用最后一次): 文件“f:\d\multiprocessing-samples est.py&q...

回答 1 投票 0

Python 3.10+ 尝试创建 multiprocessing.Queue 的子类时出现 TypeError 问题

我尝试像为queue.Queue所做的那样创建multiprocessing.Queue的继承子类,但出现错误: 回溯(最近一次调用最后一次): 文件“f:\d\multiprocessing-samples est.py&q...

回答 1 投票 0

尝试创建 multiprocessing.Queue 的子类时出现 Python 3.1x TypeError 问题

我尝试像为“queue.Queue”所做的那样创建“multiprocessing.Queue”的继承子类,但出现错误: 回溯(最近一次调用最后一次): 文件“f:\d\multiprocessing-samples est.py&

回答 1 投票 0

在 Python 中利用不返回任何值的函数进行多重处理

考虑Python中的以下代码: 从多处理导入池 数据 = [4] * 10 定义更新(j): 数据[j] += j ** 2 def 求解器(): 将 Pool(8) 作为 po: po.map(更新,范围(10...

回答 1 投票 0

在Python中使用多处理和“void”之类的函数

考虑以下Python代码: 从多处理导入池 数据 = [4] * 10 定义更新(j): 数据[j] += j ** 2 def 求解器(): 将 Pool(8) 作为 po: po.map(更新,范围(10...

回答 1 投票 0

限制并发线程多处理数量

我需要将一个函数应用于可迭代的每个元素,并同时运行固定数量的线程(假设为 N),就像 multiprocessing.ThreadPool.map() 所做的那样,但我的函数确实分配...

回答 1 投票 0

SharedMemory numpy 数组多处理问题

问题 我有很多数据,首先使用 SharedMemory 加载到 RAM 中,然后使用 multiprocessing.Pool.map 读取许多子进程。 代码 这是一个简化版本(不是真的

回答 1 投票 0

多处理池停止运行 - Windows 11

以下代码启动 5 个多处理任务。这些任务打印一条消息,然后随机休眠一段时间,然后再次执行此操作。重复 10 次,所以整组任务应该

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.