WindowsにCasperJSをインストールするのが面倒くさい - Qiita
面倒だった。 Chocolateyない インストーラーない npm install するとPython依存 git clone するとPython依存 Zipファイルを解凍するのだけが正解です。 CasperJSとは JavaScriptアプリケーションのEndToEndテストを実行するためのツール。 JavaScriptでスクリプトを書くSeleniumのようなもの。
業種別企業名辞書データを公開しました - Y's note
Web解析Hacks ―オンラインビジネスで最大の効果をあげるテクニック & ツール 作者: Eric T. Peterson,株式会社デジタルフォレスト,木下哲也,有限会社福龍興業出版社/メーカー: オライリー・ジャパン発売日: 2006/11/08メディア: 単行本（ソフトカバー）購入: 3人 クリック: 78回この商品を含むブログ (21件) を見る 企業名辞書 業種と企業名の辞書データが欲しかったんでYahoo!FinanceのデータをCrawlして作りました。帝国データバンクや四季報のデータが使えると良かったんですが、Crawlできそうに無かったので諦めました。残念ながら2600社ほどのデータしか集まっておらず、個人的にはもっといろんなデータが欲しいです。他に良い方法をご存知の方いらっしゃいましたらご連絡いただけると幸いです。 Yahoo!ファイナンス - 株価やニュース、企業情
jsdom + jQuery in 5 lines with node.js | Nodejitsu Inc.
Nodejitsu has joined GoDaddy We are excited to join GoDaddy to help spearhead their largest Node.js product: Website Builder. Please read our blog post to learn more about customer transition plans and our continued support for Open Source within the node community. Want to know all the details? Read the full blog post or read the GoDaddy Announcement. Other popular posts - Scaling Isomorphic Java
PythonでWeb::Scraperっぽいモジュール書いた - ヤルキデナイズドだった
ので置いておく(scrapy.tar.gz)。こんな感じで使える： from scrapy import scraper, process twitter = scraper( process('.vcard > .fn', name='TEXT'), process('.entry-content', {'entries[]': 'TEXT'}), result=('name', 'entries') ) username = 'uasi' r = twitter.scrape(url='http://twitter.com/%s' % username) print "%s's tweets" % r['name'] print for entry in r['entries']: print entry.strip() scrapy/__init__.py # -*- coding:
【Perl】WWW::Mechanize と Web::Scraper で PASMO の利用履歴を得る（その１） - blog.remora.cx
This domain may be for sale!
Ruby製ノコギリで株価を切り刻もう! - hp12c
ブログを下記に移転しました。デザイン変更により移転先では記事が一層読みやすくなっていますので、よろしければ移動をお願い致します。 Ruby製ノコギリで株価を切り刻もう! : melborne.github.com - 株式投資は社会人のたしなみである 投資をせずしてリアル経済を知ることはできない ところが就業中に君がWebにアクセスして 株価をチェックしていると上司は怒る 場合によっては君を解雇する そんなばかなことはあってはならない yahoo_stockライブラリ 君がRubyを使えるなら上司に気づかれずに 株価をチェックできるかもしれない 幸いRubyにはyahoo_stockというライブラリがある Ruby gem for stock / finance data « Nasir Jamal yahoo_stockはYahoo!Financeが提供するCSVデータにアクセスする g
NAL研卒業研究ノート:: Rubyモジュール ExtractContent をPythonに移植してみた
ExtractContent は、HTMLから本文を抽出するRubyモジュールです。 RubyForge: ExtractContent: Project Info Webページの本文抽出 (nakatani @ cybozu labs) Perl用の同名モジュールもありますが、今回はRubyモジュールを基にしてPythonへ移植してみました。 # -*- coding:utf-8 -*- import re import unicodedata class ExtractContent(object): # convert character to entity references CHARREF = { "nbsp" :" ", "lt" :"<", "gt" :">", "amp" :"&", "laquo":u"\xc2\xab", "raquo":u"\xc2\xbb", }
ActionScript3.0でXMLRPCを使ってはてブを取得してみる | ClockMaker Blog
はてなブックマークのブックマーク数カウントをFlashで取得しようとして困ったのでメモ。はてなブックマーク件数取得APIを確認するとXMLRPCとかRubyとか親しみのないキーワードが敷き詰められてました。API公開＝GETパラメータとXMLレスポンスという認識の私はやや諦めの境地に。・・・苦労すると思いつつも、案外簡単にやってのけました。 XMLRPCとは リクエストをXMLで送って、レスポンスをXMLでもらう方式。XMLの書式は決まってます。プロトコルはHTTP通信ですので特別な通信方法というわけではないようです。 ActionScriptで実装するには AS2～3で次のライブラリがありました。私は1番目のライブラリを使用しました。 XMLRPC for Actionscript 3.0 – Free Library Resources – as3-rpclib – Google Co
ElementTree Tidy HTML Tree Builder
July 6, 2003 | Fredrik Lundh The TidyHTMLTreeBuilder parser can read (almost) arbitrary HTML files, and turn them into well-formed element trees. This parser uses a library version of Dave Raggett’s HTML Tidy utility to fix any problems with the HTML before converting it to XHTML (the XML version of HTML). Note: If you don’t want to (or cannot) install binary Python extensions, you can use the Tid
Wrestling HTML
September 8, 2004 Uche Ogbuji Lately I've seen HTML parsing problems everywhere. One project needed a web crawler with specialized features provided through Python code that processed arbitrary HTML. There have also been several threads on mailing lists I frequent (including XML-SIG) featuring discussions of mechanisms for dealing with broken HTML by converting it to decent XHTML. This article foc
[brothercake] Dust-Me Selectors
Dust-Me Selectors 4.1 is now available from the add-ons directory. Version 4.1 fixes the compatibility issues that arose in Firefox 22 (because several key classes were summarily removed, which broke the extension). Version 4.0 was never released, because of problems with the add-ons review process (bugs in the automated validator that incorrectly rejected the first build, then delays and mistakes
【インフォシーク】Infoseek ： 楽天が運営するポータルサイト
日頃より楽天のサービスをご利用いただきましてありがとうございます。 サービスをご利用いただいておりますところ大変申し訳ございませんが、現在、緊急メンテナンスを行わせていただいております。 お客様には、緊急のメンテナンスにより、ご迷惑をおかけしており、誠に申し訳ございません。 メンテナンスが終了次第、サービスを復旧いたしますので、 今しばらくお待ちいただけますよう、お願い申し上げます。
Console :: Firefox Add-ons
As of Firefox 1.5, the JavaScript Console is used not only for JavaScript errors, but for CSS errors as well. This extension takes this into account by providing a simple possibility to display errors by type. Console² let's you display errors filtered by type (Errors, Warnings, Messages), language (JavaScript, CSS, XML) and context (Chrome, Content). Furthermore it provides a simple search box (a
XPath Checker :: Firefox Add-ons
Add-ons extend Firefox, letting you personalize your browsing experience. Take a look around and make Firefox your own.
断続的リーマンblog [Python]Yahoo株価・投資信託価格取得スクリプト（マスターマネー取込用）
家計管理のためにマスターマネー（Master Money 5）を使っている。投資管理機能がついていて、株や投資信託などの金融資産の管理もできる。 投資商品の銘柄ごとに相場価格データを入力すれば、資産の評価額の推移が見られるが、入力ファイルの成形を手動でやるのが面倒だったので、自動で相場価格ファイルを生成するPythonスクリプトを作った。ニーズが少なそうだけど一応公開（マスターマネーユーザかつPythonユーザって、いったいどれくらいいるんだろう…）。（ちなみにMicrosoft Money 2007には、株価や投資信託の価格をインターネットから取得して自動更新する機能がついている。） 株価用：get_stock_price.py 投信用：get_toushin_price.py 引数に指定した銘柄コードについて、Yahoo!ファイナンスから直近30日の株価/投資信託基準価額を取り込み、タ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
GitHub - dmitriiweb/extract-emails: Extract emails from a given website
Web::Scraperで店舗リストを取得 - ジオ屋さん
Loading...
Under Construnction
XPather – Get this Extension for 🦊 Firefox (en-US)
