Puppeteerで知っていると嬉しい「じりじり下にスクロールする」機能: 自宅クラウドでAI・機械学習・CI/CD・自動化、全てやろう！
元々、メルマガ連動目的で始めた初心者・中級者向けブログでした。が、コロナによる在宅勤務が当たり前の時代に突入した2020年。会社に存在していた仕事環境が、自宅内に存在して当たり前の時代に、一気に突入することとなりました。AWSを筆頭としたクラウド環境をベースに、AI、機械学習、CI/CD、自動化等、全てが自宅で動作・操作可能です。全てが可能となるよう、自宅環境整備に役立つ内容をブログに記載していく方針とし、今後の内容に反映させていきたいと思います。 これはいいですね！ 抜粋しておきます。 これとスクリーンショットを組み合わせるのも、ありだな！ const delay = require('delay'); await page.goto('https://twitter.com/nogizaka46/media'); // await page.click('.emphasize'); /
Puppeteer on AWS LambdaをTypescriptからサクッと使う(2019年9月版) - ADliveテックブログ
はじめに Puppeteerはプログラムからブラウザ(Chrome or Chromium)を操作して利用できるNode.js用のライブラリです。Puppeteerを使用することで、 Webサイトを操作する処理の自動化 スクレイピング クローリング WebサイトのPDF化 Webサイトのスクリーンショット取得 などが簡単に行えます。 Puppeteerは裏側でブラウザを起動するため、CPUやメモリなどのリソースを多く使用します。PuppeteerをAWS Lambda上で利用することで、同時実行の際のCPU負荷やメモリ使用量を気にすることなく、スケールする環境で利用できるようになります。 PuppeteerをLambdaを利用するための記事はたくさん存在しますが、古いものだと色々と手順が面倒だったり、動かなかったりするものもあります。 ここでは、2019年9月時点で、PuppeteerをL
AWS Lambda + Typescript + PuppeteerでWebスクレイピング - Qiita
前提条件 開発環境 Windows10 Node.js 12.14.0-x64 AWS CLI VS Code AWSアカウント IAMユーザー※ ※IAMユーザーはServerlessFrameworkのリソース作成に必要な権限が付与されていること（今回はAdministratorAccessを使用）、AWS CLIに--profile serverlessで設定していることを前提とする Serverless Framework のプロジェクト作成 AWSリソースの管理にServerless Frameworkを使います。AWS Lambdaを使う上で必要な面倒くさいことを大体やってくれます。すごい。 Serverless Frameworkのインストール サービス作成コマンドを使うためにグローバルインストールします。 どうしてもグローバルに入れたくない人は、後述するファイル群を自作して
jest-puppeteerを使ったテストを試す - Qiita
jest-puppeteerはpuppeteerの設定をするだけでなく、click前に要素の出現を待機するなどインテグレーションテストのために設計されている。 使い方 jest.config.jsにpuppeteerの設定を書く 今回は試すだけなので、jest.config.jsに書くが基本的に他のテストも書くと思うので、--configを使ってjest.config.e2e.jsなどのファイルを用意するといいだろう。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Javascript - Jest-puppeteer with typescript configuration
ヘッドレス Chrome Node API 「Puppeteer」 - Qiita
