multiprocessing 相关问题

多处理是在单个计算机系统中使用两个或更多个中央处理单元（CPU）

在 PHP 中使用共享内存时出现异常错误（PHP 警告：shmop_open(): 无法附加或创建共享内存段“无效参数”）

我刚刚开始在PHP中使用共享内存来做一些事情。这是我的代码。我刚刚开始在 PHP 中使用共享内存来做一些事情。这是我的代码。 <?php //limit the task to be forked $task = 100; $process_pool = array(); //allocate 1kb memory segment to store process_pool $process_pool_key = ftok(__FILE__,chr(0)); $process_pool_shm = shmop_open($process_pool_key,'c',0644,1024); $datas = array(); for($i = 1; $i<= $task; $i++) { $pid = pcntl_fork(); if ($pid == -1) { die("Can't fork child process."); } if ($pid == 0) { $current_pid = getmypid(); $process_pool_size = shmop_size($process_pool_shm); $process_pool = @unserialize(shmop_read($process_pool_shm,0,$process_pool_size)); //store child process data into specific memory $child_data = array('pid'=>$current_pid,"data"=>[rand(),'hello']); $child_key = ftok(__FILE__,chr($current_pid)); } $size = 1024*1024; $child_shm = shmop_open($child_key,'c',0644,$size); shmop_write($child_shm,serialize($child_data),0); exit(0); } else { $process_pool[$pid] = array($pid); shmop_write($process_pool_shm,serialize($process_pool),0); } } while(pcntl_waitpid(-1,$status) > 0); //Read data from all child process foreach($process_pool as $pid => $pid_info) { $tmp_key = ftok(__FILE__,chr($pid)); $size= 1024*1024; $tmp_shm = shmop_open($tmp_key,'a',0644,$size); $org_data = shmop_read($tmp_shm,0,$size); $child_data = @unserialize($org_data); if (empty($child_data)) { echo "$tmp_key\n"; } shmop_delete($tmp_shm); shmop_close($tmp_shm); if (!empty($child_data)) { $datas[$pid] = $child_data; } } var_dump(count($datas)); //var_dump(count($process_pool)); //var_dump(count(array_keys($datas))); //var_dump(count(array_keys($process_pool))); foreach (array_keys($process_pool) as $p_key) { if (!in_array($p_key,array_keys($datas))) { echo $p_key."\n"; } } shmop_delete($process_pool_shm); shmop_close($process_pool_shm); 上面的代码产生了多个子进程，子进程彼此持有自己的共享内存段。子进程的共享内存段用于存储处理后的数据。父进程会在处理后从子进程的共享内存段中收集数据子进程完成。以我的拙见，这段代码应该运行没有任何问题。但一些意想不到的问题随机出现。有时进展顺利 /home/jhbian/pider/test/process/ReproduceProcessExample.php:60: int(100) 有时会崩溃 PHP Warning: shmop_open(): unable to attach or create shared memory segment 'Invalid argument' in /home/jhbian/pider/test/process/ReproduceProcessExample.php on line 29 PHP Stack trace: PHP 1. {main}() /home/jhbian/pider/test/process/ReproduceProcessExample.php:0 PHP 2. shmop_open() /home/jhbian/pider/test/process/ReproduceProcessExample.php:29 Warning: shmop_open(): unable to attach or create shared memory segment 'Invalid argument' in /home/jhbian/pider/test/process/ReproduceProcessExample.php on line 29 Call Stack: 0.0002 366568 1. {main}() /home/jhbian/pider/test/process/ReproduceProcessExample.php:0 0.0738 367872 2. shmop_open() /home/jhbian/pider/test/process/ReproduceProcessExample.php:29 PHP Warning: shmop_write() expects parameter 1 to be resource, boolean given in /home/jhbian/pider/test/process/ReproduceProcessExample.php on line 30 PHP Stack trace: PHP 1. {main}() /home/jhbian/pider/test/process/ReproduceProcessExample.php:0 PHP 2. shmop_write() /home/jhbian/pider/test/process/ReproduceProcessExample.php:30 Warning: shmop_write() expects parameter 1 to be resource, boolean given in /home/jhbian/pider/test/process/ReproduceProcessExample.php on line 30 Call Stack: 0.0002 366568 1. {main}() /home/jhbian/pider/test/process/ReproduceProcessExample.php:0 0.0755 368192 2. shmop_write() /home/jhbian/pider/test/process/ReproduceProcessExample.php:30 PHP Warning: shmop_read(): count is out of range in /home/jhbian/pider/test/process/ReproduceProcessExample.php on line 49 PHP Stack trace: PHP 1. {main}() /home/jhbian/pider/test/process/ReproduceProcessExample.php:0 PHP 2. shmop_read() /home/jhbian/pider/test/process/ReproduceProcessExample.php:49 Warning: shmop_read(): count is out of range in /home/jhbian/pider/test/process/ReproduceProcessExample.php on line 49 Call Stack: 0.0002 366568 1. {main}() /home/jhbian/pider/test/process/ReproduceProcessExample.php:0 0.1350 1551336 2. shmop_read() /home/jhbian/pider/test/process/ReproduceProcessExample.php:49 104785 /home/jhbian/pider/test/process/ReproduceProcessExample.php:60: int(99) 16896 谁能指出铰链在哪里？当您已经创建了新的共享内存段并且由于某种原因 PHP 没有关闭它时，就会发生这种情况。您需要使用“w”标志访问已创建的段 $shared_memory = @shmop_open($key, "c", 0644, 255); if (false === $shared_memory) { $shared_memory = shmop_open($key, "w", 0644, 255); } 嘿兄弟，我自己也遇到了这个问题，我找到了解决办法，只需在 C/C++ 中运行 ftok，PHP ftok 不起作用，因为它提供了不可靠的密钥编号，但是 C 可以，从 C 打印密钥程序的 ftok，将其复制并粘贴到您的 PHP shmop_open() 中，它对我来说非常有效。

php multiprocessing shared-memory

回答 2 投票 0

在 Electron 中使用多线程/多处理进行文件操作的最佳方法

我正在编写一个应用程序，它从用户的文件系统加载各种文件和文件夹，从文件中获取一些数据（例如文件的图标），然后在应用程序中显示每个文件的信息...

javascript node.js multithreading electron multiprocessing

回答 1 投票 0

使用多处理将列表项追加到字典中并行化

我有一个包含字符串的大列表。我希望从此列表中创建一个字典，以便：列表 = [str1, str2, str3, ....] 字典 = {str1:len(str1), str2:len(str2), str3:len(str3),.....} 我去所以...

python-3.x performance multiprocessing

回答 1 投票 0

如何将对象传递给使用 Multiprocess.Process 创建的进程

我有一个包含两个方法的图像处理服务，我想使用 Python 中的多处理库并行执行这两个方法。第一种方法调用 api 来获取图像