SITEINFOのnextLinkケーススタディ - os0x.blog
AutoPagerizeのSITEINFOを書くとき、ネックになりがちなのはnextLinkのXPath。 pageElementのXPathは割とシンプルに書ける*1し、insertBeforeは省略しても構わない。 というわけで、nextLinkのXPathのパターンを簡単にまとめてみる。 aタグを直接指定できるケース 次のページのURLを情報*2を含む要素を直接指定できるケース。精度が高く、メンテナンス面も優れる。 Microformats 例:はてなダイアリー AutoPagerize本体にも組み込まれている通り、aタグもしくは、linkタグのrel属性にnextが指定された要素を取得する。 html <link rel="prev" href="/os0x/?of=5" title="前の5日分"> XPath nextLink: '//link[@rel="prev"]' 大抵
XML Path Language 1.0 (XPath 日本語訳)
土壌汚染問題を解決するフィールド・パートナーズがPlatio Connectを導入 労働安全衛生法に基づく点検業務のアプリ化で年間1,800時間の労働時間を削減
JavaScript での XPath の利用の手引き - XPath | MDN
const xpathResult = document.evaluate( xpathExpression, contextNode, namespaceResolver, resultType, result, ); evaluate() 関数は 5 つの引数を取ります。 xpathExpression: 評価する XPath 式を文字列で指定します。 contextNode: xpathExpression を評価する対象となる文書内のノードを指定します。指定されたノードの全ての子ノードに対しても評価が行われます。もっともよく使用される値は document ノードです。 namespaceResolver: xpathExpression に含まれるあらゆる名前空間接頭辞を渡され、その接頭辞に対応する名前空間 URI を表す文字列を返す関数です。この関数により、 XPath 式で使
XML::Simpleの簡潔さにひざをポンとたたいてしまう
PerlプログラマーがXMLをうまく活用する場合、XML::Simpleを使いこなすのは基本中の基本と言える。まだXML::Simpleを知らないあなたもこれを読めば「XML::Simpleの簡潔さは感動的」と思わず口に出してしまうことだろう。 PerlでXMLを処理するために、ほとんどの場合で必要なすべてのものがそろう魔法のツール、XML::Simpleについては、はてなの伊藤直也氏が執筆する「作って学ぶ、今どきのWebサービス：第3回 XML::SimpleであらゆるXML文書を料理する」でもその魅力を十二分に解説しているので、すでにご存じの方も多いと思う。 そんなXML::Simpleについて、IBM developerWorksに掲載された本稿では、XML::Simpleを取得した上で、それを使って2行のコードで構成ファイルからパラメーターを読み込む方法や、元のXML文書に含まれる
ITmedia エンタープライズ：第3回 XML::SimpleであらゆるXML文書を料理する (1/2)
第3回 XML::SimpleであらゆるXML文書を料理する：作って学ぶ、今どきのWebサービス（1/2 ページ） RSSにおけるXML::RSSのように、専用のモジュールがある場合にはそれを使えばよいのですが、そうでない場合は汎用のXMLパーサーモジュールを使ってパースすることになります。今回は、XML::Simpleを使ってあらゆるXML文書を料理できるようにしてみます。 前回まででXML::RSSによるRSSの料理方法は分かったとして、ではRSS以外のXML文書を料理する場合にはどうしたらよいのでしょう？ RSSにおけるXML::RSSのように、専用のモジュールがある場合にはそれを使えばよいのですが、そうでない場合は汎用のXMLパーサーモジュール*を使ってパースすることになります。 XML文書からPerlのデータ構造を作るXML::Simple Perlの代表的なXMLパーサーである
進化する“Webスクレイピング”技術の世界 ― ＠IT
2007/02/20 WebサービスのAPIやRSSフィードを使って複数サイトのサービスや情報をマッシュアップ――。これはWeb2.0が包含するいくつかの概念のうち、最も重要なものの1つだ。Amazon.comやGoogle、Yahoo!、楽天といった大手Webサイトは、RESTやSOAPを用いたAPIを公開しており、さまざまなサービス提供者や個人がAPIを通して各種サービスを利用している。その一方、世の中のWebサイトの大多数はWeb1.0的なHTMLやCGIフォームしか提供していないのが現実だ。こうした背景からWeb1.0サイトから構造化されたデータを引っ張り出す“Webスクレイピング”技術が急速に発展してきているようだ。 HTMLをXML化し、XPathで関連データだけを抽出 例えば価格情報サイトでは製品名から価格が簡単に調べられるが、Webサーバから提供されるのは、製品名や価格にレ
ITmedia エンタープライズ：第2回 RSSフィードの料理はLWPとXML::RSSにおまかせ (1/2)
第2回 RSSフィードの料理はLWPとXML::RSSにおまかせ：作って学ぶ、今どきのWebサービス（1/2 ページ） 今回から、いよいよPerlプログラミングの世界に入っていきましょう。手始めに、PerlにおけるWebプログラミングの要ともいえるLWPを用いた、HTTPコンテンツをPerlでHackする手法を解説します。 前回は、CPANモジュールのインストールを説明しました。今回から、いよいよPerlプログラミングの世界に入っていきましょう。手始めに、PerlにおけるWebプログラミングの要ともいえるLWP（Lib WWW Perl）を用いた、HTTPコンテンツをPerlでHackする手法を解説します。せっかくなのでXMLの扱い方も少々、ということで、比較的扱いやすいRSSも題材にミックスしたいと思います。 LWPの役割 プログラムの中から、あるWebサイトで公開されているコンテンツを
Matzにっき(2003-05-08)
<< 2003/05/ 1 1. [本] 『たのしいRuby』増刷決定 2. ディスクロージャ 2 1. 小切手換金 2. [XP] ペアプログラミング 3. [Ruby]1.8 ToDo 3 1. [Ruby]アジャイルな言語デザイン 4 1. [教会] 命名 5 1. [Ruby]feature freeze 2. [Ruby]call+yield vs Proc+Block 3. [Ruby]Object#methods(false) 4. [家族] 子供の日 6 1. [日記] みつかった 2. Matzさん 3. [Ruby]ProcとBlock 4. 模様替え 5. 昨日の疲れ 7 1. [本] 『達人プログラマー』 2. [XML] 純粋XML批判 3. [Ruby]下手な考え休むに似たり 8 1. [格言]Quote of the Day 2. [家族]風邪再来 3. [プ
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
トップページ
XPathの書き方の基本
第3回 XML::SimpleであらゆるXML文書を料理する