C#でモダンにスクレイピングするならAngleSharp - Qiita
C#やVB.NETでWebページをスクレイピングする方法をWeb検索するとHtml Agility Packが見つかることが多いですが、APIはXHTMLやXPATHといったXML技術をベースにしているので、今これを使うのは少々やぼったい印象があります。 じゃあ何がいいのか？ということですが、私はAngleSharpを強くお勧めします。 AngleSharpの利点 AngleSharpのどこがいいのか？は、改めて別の記事を書くつもりですが、ここでは簡単にまとめます。 HTMLだけでなく、SVG、MathML、CSSもパース可能です。 HTMLをパースするとW3CのWeb標準に従ったDOMが構築されます。HTML5ベースのため、閉じる必要のないタグ（<br>や<img>など）や閉じタグを省略可能なタグ（<li>、<dt>や<dd>、<tr>や<td>など）も正しく理解します。 Selecto
insertAfter()メソッド →Nodeインタフェースに追加する - fisherの日記
W3C DOMではinsertBefore()は用意されているが、 insertAfter() が用意されていないみたい... 自分でmethodを作るなら、↓を参考〜〜 /** NodeインタフェースにinsertAfter()メソッドを追加 */ Node.prototype.insertAfter = function(node, referenceNode) { this.insertBefore(node, referenceNode.nextSibling); }; /** 使用例 */ /* 追加するノードを作成 */ var insertNode = document.createElement('li'); insertNode.textContent = '新しく追加された要素。'+(new Date()); insertNode.style.color = '#ff0
解説 : XMLHttpRequest
XMLHttpRequest を使用出来るようにする為の宣言。ブラウザにより異なる。 IE では、ActiveXObject("Microsoft.XMLHTTP") を使用。 IE のバージョンによっては、ActiveXObject("Msxml2.XMLHTTP.5.0") , ActiveXObject("Msxml2.XMLHTTP.4.0") , ActiveXObject("Msxml2.XMLHTTP.3.0") , ActiveXObject("Msxml2.XMLHTTP") なども使用出来る。 Mozilla 系ブラウザでは、XMLHttpRequest() を使用。 var xmlhttp = false; if(typeof ActiveXObject != "undefined"){ try { xmlhttp = new ActiveXObject("Micro
DOMを利用してXMLデータへアクセス
Dim objDOM, rtResult Set objDOM = WScript.CreateObject("MSXML2.DOMDocument") rtResult = objDOM.load("Sample.xml") If rtResult Then procDispDatas objDOM.childNodes Else MsgBox "XMLオブジェクトの作成に失敗しました。" End If Set objDOM = Nothing Sub procDispDatas(objNode) Dim obj For Each obj In objNode If obj.nodeType = 3 and obj.parentNode.nodeName = "title" Then MsgBox obj.parentNode.nodeName & " : " & obj.nodeVal
無職のプログラミング jQueryでDOM要素を作成し、DOMツリーを構築する方法
「jQuery DOM ツリー 構築 or 生成」などで検索しても、jQueryでDOM要素を作成／生成し、DOMツリーを１から作る方法が出てこなかったので、せっかくだから基礎の基礎をまとめてみる。 1)jQueryオブジェクトを作る jQueryオブジェクトとは、jQueryの関数(メソッド)が使用できるDOM要素(またはその配列)のこと。DOMツリーに含まれてない要素も含む。 jQueryオブジェクトは、セレクタで抽出して取得することが多いが、１から作ることもできる。 jQueryオブジェクトの作成には、$()関数を使用する。 ＜例＞ // <div></div>という要素のjQueryオブジェクトを作成し、$jqObjに格納する var $jqObj = $("<div/>"); 変数名の先頭に $ をつける必要は無いが、「jQueryオブジェクトが格納されている変数であること」を明
phpでxpathを使ってスクレイピング（WEBページの取得）とXpathの書式例｜プログラムメモ
■ 1. まず php-xml のインストール yum install php-xml ■ 2. 実際のサイトからスクレイピングを行って Xpath で要素を取得のPHPコード test.server.com から WEBページを取得してきて＜div id="myid"＞の要素を取得します。 $url='http://test.server.com'; // file_get_contents を使うより高速、ただしメモリは食う require_once 'HTTP/Client.php'; $client =& new HTTP_Client(); $client->get($url); $response = $client->currentResponse(); $dom = @DOMDocument::loadHTML( $response['body']); $xml = sim
XML SchemaでXML文書の妥当性を検証する
XMLフォーマットを採用する理由の1つに、データとレイアウトが分離しているので「データの多角的な利用が容易である」という点が挙げられます。 例えば、本稿で取り上げるデータのソートが代表的な例です。従来、HTMLでソート機能を実現するには、面倒なDynamic HTMLの記述を必要としました。しかし、XSLTはデフォルトでソート機能を持っています。DOMから動的にソートキーの部分だけ入れ替えてやることで、ダイナミックなソーティングをクライアント上で実現できます。 本稿では、別稿「よく使う属性値をまとめて定義する」で使用したarticle.xslを改良して、「公開日」「タイトル」「ステータス」でソートキーを自由に切り替えられるようにしてみます。画面上部のコンボボックスからソートキーを変更すると、変更されたキーに基づいてリストの並び（昇順）がダイナミックに切り替わります。なお、元となるXML文書
XMLファイルの出力[DOMImplementation] Javaテクニカルサンプル集
XMLファイルの出力[DOMImplementation]・Javaの小技、サンプル、ニュースなどを紹介していきます。みんなで参考にしてください。 データベースから情報を読み込んで、ＸＭＬファイルを出力するサンプルです。 下記の例はファイルに出力していますが、サーブレットでWEBに出力する場合は、 response.getOutputStream() で出力ストリームを出力し、StreamResult に渡します。 DocumentBuilderFactory factory = DocumentBuilderFactory.newInstance(); DocumentBuilder builder = factory.newDocumentBuilder(); DOMImplementation domImpl=builder.getDOMImplementation(); Docum
高機能なXMLエディタをプラグインとして作る - @IT
public class XMLEditor extends TextEditor ... { // IContentOutlinePageの実装クラス private XMLOutlinePage outlinePage; ... public void dispose() { if(outlinePage!=null){ outlinePage.dispose(); } ... } public Object getAdapter(Class adapter) { if(IContentOutlinePage.class.equals(adapter)){ if(outlinePage==null){ outlinePage = new XMLOutlinePage(this); } return outlinePage; } return super.getAdapter(adapt
DOM1仕様書
文書オブジェクトモデル(DOM)第1水準 仕様書 Version 1.0 この文書は、W3Cにより作成されW3C勧告として公開されている "Document Object Model (DOM) Level 1 Specification Version 1.0" (http://www.w3.org/TR/1998/REC-DOM-Level-1-19981001/) を、どら猫本舗が翻訳したものです。 最新版の仕様書は http://www.w3.org/TR/REC-DOM-Level-1/ にあります。 正式な仕様書はW3Cサイトにある英語版です。この日本語版は参考にすぎません。 この文書には翻訳上の誤りがあるかもしれません。どら猫本舗は翻訳の正確性を保証しません。あくまでご自身の責任でご利用ください。 お気付きの点がありましたらどら猫本舗までお知らせください。 REC-DOM-L
DOMプログラミング虎の巻
1 入門編 1.1 はじめに XMLの仕様書である「Extensible Markup Language(XML) 1.0 (W3C Recommendation 10-February-1998)」がW3Cから公開されてから約2年。このシンプルなメタマークアップ言語は、インタネットを支える基盤技術としてすっかり定着してきました。 「XMLとJavaが変えるオブジェクト技術」(JAVA PRESS Vol.6)で解説した通り、XMLは単なるWWWの後継技術というだけではなくオブジェクト技術全体にインパクトを与えるキーテクノロジであり、さらにJavaとの組合わせにより統合的なフレームワークとしてITシステム構築の中核技術、必須の構成要素となっています。JavaとXMLの組合わせを軸として、今後のインタネットテクノロジが旋回していくといっても過言ではないでしょう。 そのような技術的な展開が予想
DOMとは - IT用語辞典
概要 DOM（Document Object Model）とは、XML文書やHTML文書を構成する要素をコンピュータプログラムで参照したり操作したりするための仕組み。また、文書の構成要素を木構造(ツリー構造)で表したデータモデル。 HTMLやXMLで記述されたWebページなどの構成要素（見出し、段落、領域、画像、リンクなど）を木構造のモデルで表し、それらの配置や見栄えなどを定めた属性情報などを参照、操作する手法を定めている。 Webブラウザなどに実装されており、ページ上にJavaScriptなどで記述されたスクリプトからページ内の各要素を読み取ったり、内容や設定の変更、要素の追加や削除などを行う標準的な手段として用いられる。 文書をDOMで表したデータは、文書の最上位の要素を頂点として、各要素が包含関係に従って枝分かれしていく木構造（ツリー構造）となっている。これを「DOMツリー」（DOM
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Parsing XML file with VBScript
無効なURLです
IBM Developer
IBM Developer
IBM Developer
IBM Developer
IBM Developer
IBM Developer