今cURLで並列処理を書くならジェネレータを使え！ - Qiita

はじめに PHPでのcURLを用いたHTTPリクエストの並列処理，全てが完全な並列でよければcurl_multi_*関数群を使って「複数のRSSに並列リクエスト後マージして返す関数」の例のようにサクッと書けちゃうんですが，部分的に直列化したいケースが入ってくると一気にハードル高くなりますよね． 例えばこんな要件．これを「出来るだけ並列に効率よくやってください」って言われたらすぐ書けるでしょうか？あ，pcntl_fork()とかは禁止で． https://google.com のHTMLを取得 https://github.com のHTMLを取得 このバイト長を取得 https://github.com/mpyw のHTMLを取得 XPathでプロフィール画像のURLを抜き出す 更に画像に対してリクエストを実行し，レスポンスを画像ファイルとして保存する mpyw/co を使えば非常に直感的