(pipes書く人向け)Yahoo Pipes のチューニング - m2
前回のエントリではめんどくさくて結果だけにしちゃいましたが、一番言いたかったチューニングがあんまり注目されてないのでちゃんと書いてみます。 かなり面倒 Yahoo! Pipes の応答速度が結構遅くて、１箇所変更しては２?３秒待っては確認を繰り返す必要あり。根気が必要。 これ、私の場合は 20 秒でした。根気ってレベルじゃない。 ボトルネックは「Regex モジュール」 pipesエディタはよくできていて、選択した工程までの結果とかかった時間を表示してくれます。なのでどこがボトルネックなのかが一目瞭然です。 以下は上で紹介している「Yahoo! Pipes の Page Fetch モジュールでスクレイピングし放題」の「はてブ ブックマーク件数一括取得API」のpipesエディタ画面。 まずは Regex モジュールの前まで。 「Time taken: 0.377219s」と出てますね。
yahoo pipes で RSS をフィルタリングする
以前、RSSのフィルタ用に RSS Pipe という cgi をつくったのですが、その後 Yahoo からもっと色々な事が出来る「yahoo pipes」というサービスが開始され、僕も現在 RSS で何かするときはもっぱら yahoo pipes の方を使っていました。 先日RSS Pipeにつきましてご質問がありまして、そういえば yahoo pipes についてあまり触れていなかったこともあり、yahoo pipes で RSS Pipe っぽいフィルタを書く方法についてちょっとまとめてみたいと思います。 例として、はてなの注目エントリからカテゴリ「コンピュータ・IT」を抜き出す、または除外する方法について説明します。 はてなブックマークの注目エントリ http://b.hatena.ne.jp/hotentry 注目エントリのRSSアドレス http://b.hatena.ne.jp
Pipes - Module Reference
The modules in the Pipes Editor have been grouped into categories based on their functionality. To learn more about the modules, and to see them used in example Pipes, click on the categories below: Sources Most Pipes begin with a data source. These modules grab data from somewhere on the internet and bring it into your Pipe for processing. User Inputs These modules let you define parameters for y
Yahoo Pipes でXPath で指定した要素の直下にあるテキストを取得するためのパイプ - ノードテスト text() の代わりに content 属性を用いる
1. XPath のノードテスト text() でテキストを抽出する XPath で HTML のタグで囲まれたテキストを取得するには、ノードテスト text() を利用する。 XML Path Language – Wikipedia によると、 text() 全てのテキスト （文字列） ノードを指定する。例: <k>こんにちは</k> の中の 'こんにちは' 例えば、Yahoo!Pipesのテスト のページにおいて、 <div name="hogepiyofuga"> <p>ほげ</p> <p><b>ぴ</b>よ</p> <p>ふが</p> </div> 以下の XPath を指定すると、 //div[@name="hogepiyofuga"]/p/text() タグで囲まれたテキストが抽出できる。 cf. Firefox で XPath により要素を指定する - Firebug と
Yahoo! Pipes の XPath Fetch Page でフィードを出力してないサイトからRSS を配信する
Yahoo! Pipes で、フィードを出力してないサイトから RSS を配信するために、Fetch Page モジュールを利用してきた。Fetch Page モジュールは、指定した URL のウェブページを取得するためのモジュール。 現在では、Fetch Page モジュールは、非推奨 (deprecated) となり、代わりに XPATH Fetch Page モジュール が登場した。 Fetch Page モジュールは、文字列によりフィードにしたいウェブページの対象を指定した。これに対して、XPATH Fetch Page モジュールは、XPath を利用して指定する。 New Module: XPATH Fetch Page | Yahoo! Pipes Blog によると、 To use the XPATH Fetch Page module, first enter the U
Yahoo!PipesでFlickrから好みの写真RSSを作成 | 簡単ホームページ作成支援-Detaramehp
Yahoo!Pipesを使えばFlickrに登録されてある写真を呼び出しRSSフィードとして作成することも可能です。ここではFlickrに登録されてある２種類のキーワードから写真の表示する枚数を決め、又その写真の中から不必要な写真を省き、日付順に並べてみるPipesを作成してみます。 Flickrから簡単に写真を読み込ませてみる それではFlickrから簡単に写真を読み込ませてみます。Yahoo!Pipesの左のメニューのSourcecからFlickrをドラッグして、images ofの空白の欄に何かキーワードを入力します。ここでは試しに猫と入力してみます。そしてPipe Outputと繋ぎます。Saveをクリックして名前を付けて保存してください。 それでは保存したPipesを確認してみます。「Map」「Image」「list」と並んでいますのでImageで画像を確認してみましょう。猫に関
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
NameBright - Domain Expired
Yahoo!Pipesの使い方（全モジュール解説）