プロセスプールは、ジョブの入力と結果が明確なときに最もうまく機能します。イテレーター、ロック、開いた接続そのものをその境界越しに送ると、所有関係を考えるのが難しくなります。小さなシリアライズ済みのペイロードのほうが、テストも再試行も簡単です。
処理を分割し、順不同に完了した後で入力の順序を復元し、独立したワーカーの状態をモデル化します。このブラウザーでは子プロセスは実行されません。これらは、サーバーアプリケーションで使う境界のための、チェック付きの準備関数です。最後の短いバッチにも処理対象が含まれ、完了順がレポートの順序を決めるわけではなく、別々のワーカーは同じ値から始まったというだけで後の追加を共有することはありません。こうした区別をコードで明示してください。
最後の端数のバッチも処理対象なので、各行をちょうど1回ずつ保持してください。バッチの開始位置は0、size、2×sizeと続きます。短い最後のバッチにも処理対象が含まれます。すべての行は出力バッチ全体で1回ずつコピーされ、空の入力からはバッチが作られません。