goqueryでお手軽スクレイピング！ - Qiita
こんにちは、Qiita二回目の投稿です、 yosuke_furukawa と申します、Golang勉強中です。 Qiitaの一回目の投稿もScrapingネタだったのですが、二回目もGolang勉強中ということでQiitaのScrapingネタで行きます。 まず、goqueryの説明に行く前に単純なやり方でscrapingしてみます。 Golangで単純なスクレイピングをするためには、以下のモジュールを利用するとできます。 net/http httpリクエストを送るためのモジュール code.google.com/p/go.net/html html解析をするためのモジュール 超シンプルなサンプルとして、該当のurlのaタグのhrefにある値だけ取得する場合は以下の様な感じになるかと思います。 go.net/htmlで頑張る package main import ( "code.goog
kindle-highlights - Kindleで付けたハイライト部分をスクレイピングを使って取得 MOONGIFT
Kindle使いには朗報なアプリケーションですよ。 電子書籍を読むのに最適なリーダーの一つがKindleではないかと思います。その中で提供される機能の一つがテキストを選択して保存するハイライトです。Kindleの中で確認はできますが、再利用性が低いのが難点です。そこで自分のハイライトしたデータをダウンロードできるのがkindle-highlightsです。 現在は残念ながらAPIは公開されていないとのことで、kindle-highlightsはスクレイピングによって目的を達成します。 インストールはRubygemsで簡単にできます。 $ gem install kindle-highlights 使い方もシンプルで、AmazonのID、パスワードを使って実行します。 require 'kindle_highlights' # pass in your Amazon credentials.
Not Found |ミレスポ！ - Millennials Sports Marketing
横浜F・マリノスユース同期6人による新たな挑戦「ROOTS.」。新時代に適応するアスリートに必要な素質とは。
UIWebViewでスクレイピングするライブラリの試作版を作った - laiso - iPhoneアプリ開発グループ
はてなグループの終了日を2020年1月31日(金)に決定しました 以下のエントリの通り、今年末を目処にはてなグループを終了予定である旨をお知らせしておりました。 2019年末を目処に、はてなグループの提供を終了する予定です - はてなグループ日記 このたび、正式に終了日を決定いたしましたので、以下の通りご確認ください。 終了日: 2020年1月31日(金) エクスポート希望申請期限:2020年1月31日(金) 終了日以降は、はてなグループの閲覧および投稿は行えません。日記のエクスポートが必要な方は以下の記事にしたがって手続きをしてください。 はてなグループに投稿された日記データのエクスポートについて - はてなグループ日記 ご利用のみなさまにはご迷惑をおかけいたしますが、どうぞよろしくお願いいたします。 2020-06-25 追記 はてなグループ日記のエクスポートデータは2020年2月28
2012年度版・ASIN抜き出す方法
Amazon.co.jpでアソシエイトツールバーが表示されている場合、windowオブジェクト以下にあるAssociatesにASINがあることに気づいたのでしばらくこっちを使ってみる。GoogleでのSocialShareAttributes検索結果が0だったのでメモしておく。 他だと以下の2つが抜き出す方法としては優秀な気がする。 document.querySelector('link[rel="canonical"]').hrefの最後から切り出す document.getElementById("ASIN").valueを参照する canonicalはURL自体に色々パラメーター付いてても関係なさそうなので良さそう。id="ASIN"を参照は結構長いこと動いてるような気がするけどなんか不安……。
HTML::TreeBuilder のメソッドを覚えるには人生はみじかすぎる件について - tokuhirom's blog
HTML::TreeBuilder のメソッドを覚えるには人生はみじかすぎる件について HTML::TreeBuilder の ->lookup だの ->find だのを覚えるのは、学習の効率がよくない。つぶしがきかないので、もっと一般的な CSS Selector や XPath などを覚えて、それをつかった方がお得であるといえる。 HTML::TreeBuilder で XPath を利用するには、HTML::TreeBuilder::XPath をインストールすればよく、これは pure perl なので容易に利用できる。 my $tree = HTML::TreeBuilder::XPath->new; $tree->parse($content); my @items = $tree->findnodes(q{//*[@id='topicsfb']//li}); print $
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
https://www.openvista.jp/archives/note/251/?251/
