目的 to_a できないが each できるリストについて、複数スレッドで処理したい。 具体的なユースケースは AWS::S3::ObjectCollection の処理で、これは each すると 1000 回ごとに AWS の API を呼び出す。to_a すると、いちどきに連続して API を呼び出し、巨大な配列をつくってしまうので避けたい。 だめだった方法 parallel gem : 内部で最初に to_a しているため、each は遅延処理されず、すべてのオブジェクトを入れる配列 (+結果を入れる配列) が必要になる。 Enumerator / Fiber : スレッドをまたいで使えない 解決方法 標準ライブラリ thread で追加される SizedQueue をつかう。これは固定サイズのキューで、複数スレッドから扱うことができ、また値の追加時にキューがいっぱいなら待ってくれ
![each を遅延評価しながら複数スレッドで並行処理 - Qiita](https://cdn-ak-scissors.b.st-hatena.com/image/square/61fb71e5e6c99210171cea635a318161a61b2f5c/height=288;version=1;width=512/https%3A%2F%2Fqiita-user-contents.imgix.net%2Fhttps%253A%252F%252Fcdn.qiita.com%252Fassets%252Fpublic%252Farticle-ogp-background-9f5428127621718a910c8b63951390ad.png%3Fixlib%3Drb-4.0.0%26w%3D1200%26mark64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTkxNiZoPTMzNiZ0eHQ9ZWFjaCUyMCVFMyU4MiU5MiVFOSU4MSU4NSVFNSVCQiVCNiVFOCVBOSU5NSVFNCVCRSVBMSVFMyU4MSU5NyVFMyU4MSVBQSVFMyU4MSU4QyVFMyU4MiU4OSVFOCVBNCU4NyVFNiU5NSVCMCVFMyU4MiVCOSVFMyU4MyVBQyVFMyU4MyU4MyVFMyU4MyU4OSVFMyU4MSVBNyVFNCVCOCVBNiVFOCVBMSU4QyVFNSU4NyVBNiVFNyU5MCU4NiZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTU2JnR4dC1jbGlwPWVsbGlwc2lzJnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9Y2YyMDI5MGQ4NmExM2Q1ZTAwZmQ0NTlhMGQ0ZGYwMTg%26mark-x%3D142%26mark-y%3D112%26blend64%3DaHR0cHM6Ly9xaWl0YS11c2VyLWNvbnRlbnRzLmltZ2l4Lm5ldC9-dGV4dD9peGxpYj1yYi00LjAuMCZ3PTYxNiZ0eHQ9JTQwbGFib2NobyZ0eHQtY29sb3I9JTIzMjEyMTIxJnR4dC1mb250PUhpcmFnaW5vJTIwU2FucyUyMFc2JnR4dC1zaXplPTM2JnR4dC1hbGlnbj1sZWZ0JTJDdG9wJnM9ZmQ0YjEyMDBjOTBmOTUyYjVkZjZjZWFjNjVhMTcxZWY%26blend-x%3D142%26blend-y%3D491%26blend-mode%3Dnormal%26s%3Df5fd6f26cd7ed0602254435e66ae31a5)