multiprocessing 相关问题

我正在使用spyder 5.1.5，我正在尝试遵循网站上的第一个示例。我收到错误：属性错误：无法在上获取属性“任务” 我正在使用spyder 5.1.5，我正在尝试遵循网站上的第一个示例。我收到错误： AttributeError: Can't get attribute 'task' on <module '__main__' (built-in)> task是我定义的函数。完整示例代码： import multiprocessing import time def task(num): print("a",num) time.sleep(2) if __name__ == '__main__': for i in range(10): p = multiprocessing.Process(target=task,args=(i,)) p.start() 根据Python的文档：注意：此软件包中的功能需要 __main__ 模块可以被孩子们导入。这在编程中有介绍但是，这里值得指出。这意味着一些示例，例如 multiprocessing.pool.Pool 示例将不起作用在交互式翻译器中。 Spyder 使用 IPython 控制台，允许您在 IPython 解释器内执行命令并与数据交互。然而，正如 Spyder 维护者所提到的here： “多重处理在 Windows 上的 Spyder 的 IPython 控制台中运行不佳。” 选项1 更新您的 Spyder 软件，因为您使用的是旧版本 - 正如您提到的 5.1.5 版本。但是，如此处所述，“自我们的 5.2.0 版本（于 2021 年 11 月发布）以来，运行多处理代码时生成的打印将被捕获并显示在所有操作系统的 IPython 控制台中”。选项2 更改控制台设置以使用外部终端运行代码。为此，请访问： Run > Configuration per file... > Execute in an external system terminal（在控制台下）。选项3 如here所述，您可以将函数写入单独的文件并将其导入脚本中。例如：任务.py import time def task(num): print("a",num) time.sleep(2) main.py import multiprocessing from tasks import task if __name__ == '__main__': for i in range(10): p = multiprocessing.Process(target=task,args=(i,)) p.start()

python multiprocessing spyder

回答 1 投票 0

我如何通过调用不同驱动程序中的一个函数来覆盖问题，从而在 selenium python 中使用多处理进行网页抓取

我在网络抓取中需要执行一系列操作，但这花了很多时间，所以我不想一个一个地调用单个函数，而是想将其作为不同的进程传递，如果我这样做，我必须面对

python algorithm selenium-webdriver web-scraping multiprocessing

回答 1 投票 0

如何将键盘中断传播到多处理池工作人员并正常退出？

我正在使用Python中的multiprocessing.Pool来并行化一个任务，该任务需要为工作负载中的每个项目进入和退出上下文管理器。我想确保当键盘中断时

python multiprocessing pool with-statement keyboardinterrupt

回答 1 投票 0

我使用了 2 个工作池来通过 Python 多处理在函数中分割总和，但时间并没有加快，是我遗漏了什么吗？

下面提供了Python代码文件。我在 Linux mint 21.3 上使用 Python 3.10.12（以防需要这些信息）。有 2 名工人的工人比没有工人的工人需要更多时间