multiprocessing 相关问题

多处理是在单个计算机系统中使用两个或更多个中央处理单元(CPU)

光谱图像并行处理

我正在使用 hyperspy 进行 EELS 数据处理。 我尝试了两种高斯模型来拟合频谱图像(SI,2D)中的频谱(1D),但它不太适合。 所以我使用 dou 编写逐像素拟合代码...

回答 2 投票 0

如何使用Python多处理和子进程在不同文件上并行运行Pytype?

我有数千个 Python 文件要运行 PyType,这需要几个月的时间。因此,我尝试使用 Python 多处理来创建多个进程,并使用每个进程在单独的进程上运行 PyType...

回答 1 投票 0

如何将多个python多进程保存到一个变量

我正在对一个非常大的图像(25 088 像素 x 36 864 像素)进行一些图像处理。由于图像非常大,我通过 256x256 像素“图块”进行图像处理。我注意到...

回答 1 投票 0

DPDK多进程硬件时间戳问题

我正在尝试在 dpdk 多进程环境中获得硬件时间戳工作。 为了使硬件时间戳工作,我引用了 rxtx_callbacks 示例。它使用 rte_eth_read_clock()。在

回答 1 投票 0

concurrent.futures 和 Pandas DataFrame

我尝试使用多重处理同时创建2个数据帧。两个函数的结果是 Pandas Dataframe。当我尝试使用“concurrent.futures.ProcessPoolExecutor”时,但我无法提取此

回答 1 投票 0

当将 multiprocessing.Queue 实例作为参数传递给 multiprocessing.Process 时,它是如何序列化的?

相关问题出现在Why I can't use multiprocessing.Queue with ProcessPoolExecutor?。我提供了部分答案以及解决方法,但承认这个问题引发了另一个问题......

回答 2 投票 0

在Python多处理中将Pool.map与共享内存数组结合

我有一个非常大(只读)的数据数组,我希望由多个进程并行处理。 我喜欢 Pool.map 函数,并想用它来计算该数据上的函数...

回答 4 投票 0

Python 多线程 - 未终止的进程

下面的代码是我根据我正在处理的代码建模的,并为了解决这个问题而进行了简化,它似乎没有正确使用 p.join() 来管理 p 创建的进程。圣...

回答 1 投票 0

如何知道目标函数中多处理中的进程状态?

在多处理中,我如何知道当前进程和其他进程的状态(如正在运行、已杀死)? 我的场景是 2 个进程正在运行 process_run = multiprocessing.Process(target=run,

回答 1 投票 0

Python Pool.apply_async() 返回 None 类型对象

我有一个 4GB 以上的文件,其中每一行代表一个非常嵌套的 JSON 字符串。该文件的示例如下: {"core":{"id":"1","field1":{&

回答 1 投票 0

Python 对象方法的多重处理

我有一个对设备测量进行操作的Python代码。在一节中,我必须将匹配网络应用于测量。我正在使用 Scikit Rf 处理与射频测量相关的所有事情

回答 1 投票 0

python 多处理事件和线程事件中的Event.is_set()

根据python 2.7.3文档multiprocessing.Event是threading.Event的“克隆”。但是,当我使用以下代码时: 来自多处理导入事件 测试=事件() 测试.设置(...

回答 1 投票 0

在多进程环境中使用时文件追加的限制

我的进程创建一个日志文件并使用 a 在文件末尾附加一个新行,例如: fopen("log.txt", "a"); 写入的顺序并不重要,但我需要确保...

回答 2 投票 0

Python中进程如何获取全局变量的当前值?

我的代码是这样的: 导入pygame 从多处理导入进程、队列 #做一点事 #做一点事 默认键盘(): key_pressed = q.get() 如果 key_pressed[pygame.K_a]: #dosome...

回答 2 投票 0

Colab 如何增加数据加载器中的 num_workers

当我尝试在数据加载器中指定 num_workers 时,出现此错误。有人可以告诉我 Colab 是否不允许这样做或者我需要做些什么吗? `--------------------------------------...

回答 1 投票 0

如何在Windows上以单独的进程运行此功能?

我正在尝试使用 Python 2.7 在 Windows 上的后台(从命令行)运行此代码: 导入http导入 mod = httpimport.load('模块名称','URL') 一切正常,但过程很长......

回答 1 投票 0

读写多处理 postgresql 和 python

我正在尝试使用python的多处理模块并行读取和写入postgresql数据库。我有两个进程,read_database 和 write_database。我正在使用

回答 1 投票 0

使用多线程两次选取值 [VB.NET]

我正在尝试在我的代码中应用一些多线程,因此我尝试练习一些简单的任务。 在下面的简单代码中,我希望每个线程都采用计数器(m)的一个值,然后

回答 1 投票 0

如何修复“异常:进程 0 因信号 SIGSEGV 终止”错误以及单个 GPU 代码是否正常工作?

我启动了 2 个进程,因为我只有 2 个 GPU,但它给了我一个异常:进程 0 以信号 SIGSEGV 终止。此代码确实适用于多个 cpu(或者至少不会引发错误)。一个...

回答 2 投票 0

从 C# 运行多进程 python 模块

多进程自定义Python模块(“area.py”) 我有一个自定义 python 模块,它使用多进程 python 库在多核上运行 CPU 密集型任务。这个函数还有一些 numpy 和...

回答 1 投票 0

© www.soinside.com 2019 - 2024. All rights reserved.