タグ

2017年7月3日のブックマーク (5件)

  • ヘッドレスブラウザ(Chrome)を使ってSPAをスクレイピングする - Qiita

    一般的なスクレイピング手法とその問題点 スクレイピングというと、HTTPクライアントライブラリを用いてHTML取得し、HTML/XMLパーサーで解析するというのが一般的だと思います。 この手法の場合、以下の場合にうまく処理できません。 ターゲットのページがJavaScriptにより動的にDOMを操作する場合 HTML/XMLパーサーが取得したHTMLを正しく解釈できない場合(正しくないHTMLでもブラウザはなんとか処理するが、パーサーライブラリは正確なHTMLでないと処理できないことがある) 特に問題になるのは前者でしょう。最近のWebサイトではJavaScriptでDOMを操作することは珍しくなくなってきています。SPAであればなおさら難しく、もはやこういった手法によるスクレイピングは不可能でしょう。 ヘッドレスブラウザによるスクレイピング 動的なDOMやパーサーがうまく解釈できないとい

    ヘッドレスブラウザ(Chrome)を使ってSPAをスクレイピングする - Qiita
  • https://developers.google.com/web/tools/setup/workspace/setup-devtools

    Build with Chrome Learn how Chrome works, participate in origin trials, and build with Chrome everywhere.

    kfujii
    kfujii 2017/07/03
  • リーダー(管理者)ではなくエンジニア(実務者)でありたいと願う人々へ - おうさまのみみはロバのみみ

    「お前は向いていないんじゃない、やってないだけだ」 この一文を読んでほんの少しでもなにかを感じた人は是非とも↓のを今すぐに読むべきだ。 エラスティックリーダーシップ ―自己組織化チームの育て方 作者: Roy Osherove,島田浩二出版社/メーカー: オライリージャパン発売日: 2017/05/13メディア: 単行(ソフトカバー)この商品を含むブログ (1件) を見る 著はみんなが考え、感じているリーダーシップという曖昧模糊な概念に対して具体性をもたらせてくれる。 それは「チームリーダーの役割は優れた人材が育つのを助けること」と定義付けていることだ。 このシンプルである意味で質をついている定義付けが著を名書たらしめているとぼくは思う。 このの構成は1部〜4部(おおよそ書の半分ほどを占めている)までが著者によるリーダーシップとはなにか?3つのフェーズの分類とそのときに期待さ

    リーダー(管理者)ではなくエンジニア(実務者)でありたいと願う人々へ - おうさまのみみはロバのみみ
    kfujii
    kfujii 2017/07/03
  • 齢30を越えてようやく気づいたWebエンジニアの勉強に関するベストプラクティス - おうさまのみみはロバのみみ

    …を書こうと思っていた矢先に↓が投稿された。 しかもぼくが書こうとした内容よりも理論付けられていたり、充実した内容だったり、深掘りされてたりして非常に良いのでこれ読めばだいたい終わるし書かなくていいじゃんね!ってなった。 完。 employment.en-japan.com これを読んだあとで「あーこんな良いエントリあるならぼく書かなくてもいんじゃね?っていうかぼくも知らない内容書かれてて充実度で完敗だし書く必要性無くね??」とか思って書かないでおこうかと思っていたのだけども 別にぼくが似たようなことを書いてもPV数やまとまっている内容の充実差で件のエントリに微々たる影響を及ぼすこともなかろう、あと単純に書いて頭の中を整理しておこうと思い直したので今書いてる。 タイトルは元々の主旨なのだけどそれは↑を読めば満足できると思うのでこのエントリはそこからちょっと外れているものを書いておこうと思う

    齢30を越えてようやく気づいたWebエンジニアの勉強に関するベストプラクティス - おうさまのみみはロバのみみ
    kfujii
    kfujii 2017/07/03
  • 韻検索サイトを本気で作ってみた - 踏む.韻 fumu.in

    いつも韻の話ばっかしてるけど、業はWebエンジニアなので、 韻を検索できるサイトを気で作ってみたよ! in-note.com 【韻ノートのここがすごい】 まだ最低限の機能しか付けてないけど、他の似たような韻検索サイトに比べると、すでに一番使い勝手が良いものになってる自信がある。理由は以下の5つ。 1.「っ」「ん」「ー」の有無を吸収してくれる これが一番のウリ。これはいつも言ってるやつだけど、韻においては「っ」「ん」「ー」みたいな母音を含まないひらがなは無視してもいい(し、しなくてもいい)。 たとえば韻ノートで僕の名前「細川貴英」を検索すると、こんな感じで「京都赤旗事件」と踏めますよ、って出てくる。 ほ    そかわたかひで きょ(ー)とあかはたじけ(ん) お    おああああいえ こんな感じで8文字ぴったり母音が合っている。 単純にひらがなから「っ」「ん」「ー」を除外するだけなら簡単な

    韻検索サイトを本気で作ってみた - 踏む.韻 fumu.in
    kfujii
    kfujii 2017/07/03