概要 Cloud9上にクローラーを作る環境を構築しました。 作った環境は以下の通りです。 (2017/9/26時点) Ubuntu 14.04(OSはCloud9で設定されます) Python 3.5.2 Scrapy 1.3.3 Selenium 3.4.1 beautifulsoup 4.6.0 lxml 3.7.3 phantomjs 2.1.7 やったことを簡単に以下に記載します。 Cloud9のアカウント登録 Pythonのバージョンアップ Scrapyインストール Seleniumインストール Beautiful Soupインストール phantomjsインストール Cloud9のアカウント登録 詳しく解説しているサイトがあるので省略。 Workspaceを「Blank」で作ると、Python3系のバージョンが「3.4」だったので、 「Blank」ではなく「Python」としま