AWS SDKでNode.jsのReadableStreamを使ってみる - QiitaNode.jsのStreamについて知らなかったのでAWS SDKのS3のファイル読み出しをしながら使ってみた時のメモ 参考 以下を読ませていただきました。 Node.js の Stream API で「データの流れ」を扱う方法 Stream今昔物語 また、以下の本のStreamの欄を見てみました。 サーバサイドJavaScript Node.js入門 Streamとは データの流れを扱う際に利用する抽象的なインターフェース 例えばファイルを読み込む場合、すべてのファイルの内容をメモリに持ってから処理するのではなく、少しずつ読み込みながら逐次処理を行う事で効率化できる。Node.jsっぽい Readable StreamでsetEncodingしないとBufferオブジェクトとして読み込む。文字列として読み込みたい場合にはreadStream.setEncoding('utf-8')などす
Node.js で S3 のデータを1行ずつストリームで読み込む | クロジカ
