初心者向けにSeleniumとBeautifulsoupを利用してPythonでスクレイピングする方法について現役エンジニアが解説しています。SeleniumとはWebブラウザの操作を自動化させるためのライブラリで、Beautifulsoup4とはスクレイピングライブラリです。データを収集することができます。 テックアカデミーマガジンは受講者数No.1のプログラミングスクール「テックアカデミー」が運営。初心者向けにプロが解説した記事を公開中。現役エンジニアの方はこちらをご覧ください。 ※ アンケートモニター提供元：GMOリサーチ株式会社　調査期間：2021年8月12日～8月16日　 調査対象：2020年8月以降にプログラミングスクールを受講した18～80歳の男女1,000名　 調査手法：インターネット調査

情報収集の為のPython Seleniumから勉強してみようということで書いてみましたｗ 前回記事はこちら Visual Studio Codeで楽になってSeleniumに出会った-Pythonを学ぶ(3)VirtualBoxを立ち上げるのが面倒になってVisual Studio Codeを使ったら気持ちが楽になってSeleniumからのGoogle Chromeの自動起動に出会った。tbshiki.com 目次 毎日の作業を自動化してみよう 前回記事に書いた 「スクレイピングのライブラリをどれから勉強したらいいかわからない」状態になっていました。 「とりあえず何か書かないと……」 仕事で毎日”あるサイト”に複数のcsvファイルを手作業でアップロードしています。 それを自動化してみよう！と試行錯誤( ･`д･´) Python初心者の初コードなので、汚いコードで間違いだらけだと思うので

2020年8月3日2021年7月10日WSL 2Linux,Ubuntu,Windows,WSL2 Windows 10のWSL2（Windows Subsystem for Linux）にインストールしたUbuntu 20.04で、GUIアプリが動くように環境を構築してみます。 大まかな手順としては、「Windows側にXサーバーをインストール」→「WSL2のUbuntuにGUI関連ソフトをインストール」→「UbuntuにDISPLAY環境変数を設定して、Windows側Xサーバーに出力させる」という感じです。 WindowsのInsider Preview参加者の方へ（追記）Windows 10のInsider Preview（ビルド21362以降）やWindows 11のInsider Previewをお使いの方は、「WSLg (Windows Subsystem for L

この記事は今後，Zennで更新します． docker-composeで利用するversion 3の設定をまとめる． Docker Engineが対応するファイルフォーマットのバージョン Compose and Docker compatibility matrix 1.13.0+ 以降がCompose file verison 3.0に対応する． 設定 build 指定したディレクトリにあるdockerfileでコンテナを起動する． context, dockerfile, argsで指定もできる． build: ./dir build: context: ./dir dockerfile: Dockerfile-alternate args: buildno: 1

こんにちは、分析チームの門脇です。 日頃クリエイターに関するデータ分析業務を行う際、環境ごとのライブラリの管理が面倒だったり、形態素解析エンジンの導入、notebookの設定をやり直す必要があるなど何かと不便でした。 そこで今回は、Dockerを利用して、簡単にクリエイター分析環境を構築してみました。 Dockerについて Dockerはコンテナ型の仮想化環境のことで、Dockerfileに仮想環境に取り入れたいものの処理を記述することで、簡単に同一環境を再現でき、環境ごとに設定をやり直さなくて済むといったメリットがあります。 Dockerによる環境構築ついて詳しく知りたい方はこちらにわかりやすくまとめられています。 今回は記事の中でも紹介されているKaggleが提供しているDockerイメージをベースにDokerfileを作成していきます。 MeCabについて クリエイターについて分析を

Docker ComposeはLAMP環境も手軽に作ることができます。今回はApache、MySQL、PHPでLAMP環境を作ります。 はじめに 以前にDocker Composeを使ってWordPressが動作する環境を作る記事を掲載しました。 その環境もWordPressが動作するので広く見るとLAMP環境となりますが、WordPressの公式イメージがPHPとApacheの動作環境も含んでいるため、個別にイメージを設定する必要はありませんでした。 コンテナを起動すると同時にWordPress環境も作成されるので、WordPressを個別にインストールする必要もないし、WordPressに必要なPHPの環境も同時に作成されます。 利点としてはApacheやPHPを個別にイメージ設定する必要がないのもそうですが、WordPressの公式イメージが動作に必要なPHP環境を含んでいるため、別

概要 ※2019/5/29追記 githubの方にDockerfileを用意していますのでよかったらこちらも参考にどうぞ（スターつけてくれると嬉しいです） github.com （追記終わり） 前回はCentOSにRstudioを入れましたが、今回はUbuntuにjupyterを入れるDockerfileを作ってみます。 rf00.hatenablog.com 実装 Dockerfileは以下のように実装。 FROM ubuntu:18.04 #set up timezone #https://sleepless-se.net/2018/07/31/docker-build-tzdata-ubuntu/ RUN DEBIAN_FRONTEND=noninteractive RUN apt-get update && apt-get install -y tzdata # timezone

iPadでイラストを描く工程を画面のスクリーンショットで説明しながら、プロクリエイト（Procerate）の使い方と役立つテクニックをご紹介します。今回は線画を元にレイヤーを塗り分けていく過程を紹介していきます。デジタルペイント初心者の方もにおすすめの記事です。 キャンバスの準備とレイヤー数の最大数 まずイラストを描くためのキャンバスを用意します。 右上にある「＋」ボタンから追加しましょう。キャンバスサイズに対して使用できるレイヤーの最大数は異なります。レイヤーを多用する塗り方をするなら、練習として初めはスクリーンサイズ（2732×2048px）以上での作成をおすすめします。スクリーンサイズ程度ならよほどのことがない限り最大レイヤー数で困ることはないでしょう。 iPad Pro2020（6GBのRAM）の場合、スクリーンサイズでキャンバスを作るとレイヤーは最大115枚まで使用できます。 下

僕は今iPad Proで使っているお絵描きアプリにたどり着くまでに色んなアプリを使ってきました。（今も探索中） その経験と使ってきた金を考えるとこの経験を捨てておくのはあまりに勿体ない！ 使ってないアプリもあるし金返せ！って気持ちになるのを抑えて、誰かの役に立てればいいなという一心で記事を書きました。 誰かの良い点とか悪い点とか比較しながら、今回はアナログ系のイラストが描けるアプリに焦点をぐっと寄せて紹介していこうと思います。 おすすめのアナログ系イラストアプリ6選 Tayasui sketch Tayasui Sketches Tayasui.com 仕事効率化 無料 アナログ系というか水彩系アプリにおいてはおそらく最強クラスのアプリ。 いくらiPad Proでもアナログ的なお絵描きは出来ないと思ってませんか？出来ます。そう、Tayasui sketchならね。 時間差でにじみが広がるブ

どーもぴろしきです！🙌 突然ですが皆さんは ボードゲームは好きですか？🎰 もうかれこれ子供のときからやってないって人も そもそもボードゲームって子供が遊ぶものでしょ？って人もいるでしょう(ぴろしきも割とそんな感じ) 今回友人の誘いで５人ほどで行ってきました！ ビックサイト！(^ω^) ゲームマーケット！(^ω^)(^ω^) ゲームマーケットってどんなとこ？ ゲームと言ってもテレビゲームではなくアナログゲーム(ボードゲームとかカードゲーム)の祭典で、最新の物、奇抜なものはたまたエロいものなど幅広く展示していました！🎲 1000円でパンフレットを購入し、それが入場券にもなります✉ いざ入場！ ボードゲームということで気になればその場で試遊できます！ ボードゲームとかカードゲームは全然やってこなかったぴろしきだけど いやこれめちゃ面白い！🎮 単純に反射神経を使ってする遊びから 戦略を練っ

ども！ボドゲブロガーのまとんです。 ゲームマーケット2018春、参加してきました！ 東京ビックサイトにて2018年5月5日と5月6日に開催していたゲームマーケット！ 今年もボードゲームを仕入れるべく、突撃してきました！ 事前計画 計画を練っていた記事はこちらです。 highso.hatenablog.com 事前調査したゲームを中心にブースを回りつつ、面白そうなやつを見つけたら買ってみる、というスタンスです。 同人系ゲーム 欲しかったヤツを買えました！ さばげ・・・パッケージが可愛い！絶対面白いやろ！ トイレの香夜子さん・・・「今季最恐ゲーム」の謳い文句に惹かれた！ 企業系ゲーム ニューゲームズオーダー社のブースで、ハイソサイエティをゲット！！ この最新版は2018年製造品のようで、試遊卓も用意されていました。 1800円の軽いゲームだったので、そのまま購入！ amazonでも売られている

今週のお題「ゴールデンウィーク2018」 GW旅の4日間のうち、5日と6日は東京に居たのですが、6日目の予定がなかったので、どうしたものかな〜と思っていたところ、購読しているブログにて、こちらの素敵なイベントを知りました。 keibogame.hatenablog.com ゲームマーケット、その存在をまったく知らなかったのですが、これ凄く良いですよ。 イベント概要は、メーカーや個人製作者によるアナログゲーム（ボードゲームやカードゲーム、テーブルトークRPGのシステムやシナリオなど）の展示即売会で、ビックサイトにて2日間の日程で春と秋に開催されています。 コミケとかワンフェスのアナログゲーム版ですね。 gamemarket.jp 僕はビデオゲームを愛してやまない人間ですが、実はアナログゲームも好きなんです。 学生時代は遊戯王もポケモンカードも齧ってましたし、テーブルトークRPGも実際はできな

みなさんお疲れ様です！5/5(土)1日目に行ってきました！ ゲームマーケットに行きだしたのは、前回の2017秋からで今回2回目です。 ゲームマーケット公式サイトはこちら gamemarket.jp 9:00前くらいに待機列に並びました～。9:30から10:00前くらいに一気に人が増えていた感じがします。 さて、さて戦利品のご紹介ですよ！ 写真に写し忘れていますが、もう1つありました。 個別に見ていきますよ。 Kino.Qさんの"紙神経衰弱"です。白い箱が基本、赤い箱が拡張です。 今回のゲムマで一番ほしかったものがこちらです。 拡張にはおまけ(お菓子)が付いていました。タイトルが書かれている紙にルールが書かれていました。 拡張の箱の裏はこんな感じです。 これ、真っ白なトランプなんです。 貼ってある紙がそれぞれ異なっていて、紙の種類を判別するとういうものです。 まずはじじ抜きからはじめて、紙の

昨日は待ちに待ったゲームマーケット2018春！ お互い初参加となるボドゲ仲間の友人と2人で参戦してきたぜ。会場はかの有名な東京ビッグサイト。俺はビッグサイト自体初だったが、コミケや即売会マスターの友人に導かれなんとか到着。 会場に近づくにつれゲムマ帰りと思われる人たちも増えていって、今から自分もそこに行くんだなぁと考えるとめっちゃわくわくした。 おぉ、これが夏と冬には戦場となるビッグサイトか…！ 天気は快晴で気温も暖かいし、まさに絶好のイベント日和って感じだな。つい先日はがっつり雨だったのでひと安心だぜ。 ところでビッグサイトといえば写真にもある逆三角形の建物がシンボルだけど、ここでイベントとかが開催されるわけじゃないのね。コミケとかはここでやるもんだと思ってたからちょっと驚いた。 ゲムマは西3.4ホールでの開催。2階の受付で事前に買っておいたカタログと入場券を交換しいざ出陣。 会場に入る

ゲームマーケットの日の朝は早い。 目覚まし時計の音を聞くより早く目覚める。 8時すぎにビッグサイトに到着。 ビッグサイトはゲムマや他のイベントもあって人が多い。 ゲムマ開場前待機列では2列目先頭付近に並べて一安心。待機列は日差しが少し暑いけれど、風が吹くと涼しすぎる感じの天気。 後で気がついたけれどこの日差しでだいぶ日に焼けていた。 買う物、回るところは決めてきているので当日の待機列でカタログをチェックしたりしない。 静かに待つのみ。 ゲムマ開場。 早歩きで初手BakaFireParty。列が少しできているもそれくらいは当然だと思いながら最後尾に並ぶ。その列が外に誘導される辺りまでは想定内だったが、まさかそのまま1時間20分くらい屋外待機する事になるとは思わなかった…。 その長い待機列に頭を下げてお礼を言って回るBakaFireさん。 BakaFirePartyの先頭に並んだ人たちが早々に