AWS LambdaでPythonコード並列処理 - Qiita

はじめに ある日のことAWS Lambdaで並列処理して処理速度向上を図りたいとなりまして。。。 その際に四苦八苦して得た知見を備忘録としてアウトプットしておきたいと思います。 前提 まずAWS Lambdaでは 設定メモリに応じてvCPU数が増減する pythonのmultiprocessingのPoolが使えない らしいです。 個人的にmultiprocessingのPoolを使い慣れていたので困ったもんだなぁと。 方法 Lambdaでの並列処理のやり方を色々調べたのですが、並列化したい処理に戻り値がない場合の解説ばかりでした。 そしてたどり着いたのが以下リポジトリ。 pip installもできるようですが、main.pyをコピペするだけで十分です。 使い方はmaltiprocessingのPoolのような感じで以下のように実装すれば並列処理をすることができます。