为什么我的 joblib.Parallel 子进程在使用 Loky 后端时永远不会返回到主循环

Question

我正在使用

joblib.Parallel

使用

loky

后端运行任务。

有时子进程会挂起，并且在完成所有任务后，控制权永远不会返回到主循环。

我通过登录子进程看到这一点：我看到它记录了一条已完成的消息。然而，调用

Parallel()

的主循环永远不会收回其控制权。

Answer 1

确保您的子进程不会生成自己的子进程，或以其他方式操纵进程，因为这可能会导致指定的行为。