クローラーを作るためのフレームワーク·Anemone MOONGIFT
RSSフィードやWeb API、Mashupなどの単語が注目を集める中、Webクローラーを通じて外部のWebサイトにあるデータをかき集め、それを解析して別な形にするというのはよく見られるものになってきた。 あるURLを指定し、そこからリンクされているURLを一覧表示できる そうした数々のシステムの中で、クローラーとなる基盤は大きな違いはない。Webサイトのデータを取得し、次のリンクを洗い出して取得していくようなものだ。そうした共通動作部分を切り出したフレームワークがAnemoneだ。 今回紹介するオープンソース・ソフトウェアはAnemone、Webクローラを開発するためのフレームワークだ。 Anemoneは任意のWebサイトにアクセスし、その内容を解析するWebクローラーだ。例えばあるURLに付けられているリンクを一覧で取得するようなことも簡単にできる。外部サイトなのかどうかも区別できるの
オフィスへの導入必須！タイムトラッキング付きマイクロブログ·XTT MOONGIFT
なぜ導入必須なのか、それは個人的にこのシステムを作りたかったからだ。達人を作ったりしていたら出遅れてしまった。だがもう良い、秀逸なソフトウェアが登場してくれたのだから。 マイクロブログ＋タイムトラッキングという妙技！ twitterを使っていると、このつぶやきを何かに活かせないかと思えてくる。例えばオフィス内に設置した場合、外には出せないような発言が出てくるだろう。それによって社内の活性化にもつながる。かの37signalsではIN/OUTと呼ばれる社内専用のツールでプロジェクトの進行を管理していると聞く。それが出てこないことにやきもきした作者が作り上げたのがXTTだ。 今回紹介するオープンソース・ソフトウェアはXTT、タイムトラッキング機能がついた社内向けマイクロブログシステムだ。 XTTはtwitterライクなマイクロブログシステムだ。発言を重ねていく点は全く変わらないが、右側にプロジ
MOONGIFT: » Photoshopもこれで不要？WindowsでGIMPを使いやすく「GimPhoto」:オープンソースを毎日紹介
画像編集と言えばPhotoshopが真っ先に挙がるだろう。高度な編集も容易にこなす、素晴らしいソフトウェアだ。だが高い、個人レベルではとても購入して使おうという気になれない。そこで代替えとして挙げられるのがGIMPだ。 GIMPを使い勝手よく！ GIMPはオープンソースであり、無償で利用できる。だがインタフェースがこなれていない（玄人向け？）なので、一般ユーザには取っ付きが悪かった。そこで使ってみたいのがこのソフトウェアだ。 今回紹介するオープンソース・ソフトウェアはGimPhoto、GIMPをPhotoshop風にして使い勝手を良くしたソフトウェアだ。 GimPhotoはGimPadというソフトウェアと組み合わせて利用する。GimPadはGIMP for WindowsをMIDウィンドウ対応にするソフトウェアだ。これだけでも随分使い勝手が良くなる。また、Windows風やVista風とい
MOONGIFT: » 必見！iPod Touch/iPhone向け統合開発環境「Jiggy」:オープンソースを毎日紹介:
これは必見。もう何が何やら訳が分からない。 iPod Touchの新価はJailBreakしたところから始まるといっても過言ではない（とは言え、JailBreakは自己責任で）。様々なアプリケーションが提供されているが、自分でも作ってみたいと思ったことはないだろうか。 通常のアプリケーションと違うので難しいと思っているだろうか。そんなあなたに統合開発環境をご紹介しよう。しかも、iPod Touch/iPhone上で動くのだ。 今回紹介するオープンソース・ソフトウェアはJiggy、iPod Touch/iPhone統合開発環境だ。ライセンスは明記されていないが、Mozilla系のライブラリをインクルードしているので、Jiggy自体もオープンソースで提供されているはずだ。 Jiggyの面白い点、それはiPod Touch上で動作するサーバ型の統合開発環境であるという点だ。JailBreakした
MOONGIFT: » Ubuntuの1クリックインストーラー「Wubi」:オープンソースを毎日紹介
ソフトウェアのインストールはどんどん手軽な方向へ流れている。インストール型よりもポータブル、そしてWebアプリケーションへと移り変わっている。OSについても、それは同様の流れだ。 Linuxを試したいと思いつつも、面倒に感じるのはインストールの手間だろう。その手間を解決してくれるのがこのソフトウェアだ。 今回紹介するオープンソース・ソフトウェアはWubi、Ubuntuの1クリックインストーラーだ。 WubiはWindows向けに提供されるソフトウェアで、Ubuntuを簡単にインストールできるようになっている。インストールするドライブ、サイズ、言語などを指定するだけで、後は自動でCDイメージをダウンロードしてインストールを実行してくれる。 デスクトップマネージャはUbuntuの他にKubuntu、Xubuntuなども選択できる。それぞれの目的に応じて使い分けられるだろう。そしてインストールさ
MOONGIFT: » タイトル・本文抽出クローラー「Webstemmer」:オープンソースを毎日紹介
これはやばい！凄すぎる。 現在進めようと思っているプロジェクトでは、サイト上の本文抽出が重要な技術になっていた。だが、それを一から開発していたのではあまりに時間がかかってしまう。さらに重要な技術ではあるが、それが売りと言う訳ではなかった。 そこで見つけたのがこのソフトウェアだ。まさに理想的な方法かも知れない。 今回紹介するオープンソース・ソフトウェアはWebstemmer、タイトル・本文抽出クローラーだ。 WebstemmerはPythonで作られたクローラーで、Webクローラー/レイアウト分析/テキスト抽出/URL DB操作/簡易的なテキスト抽出の5つの機能が提供されている。 動作原理については公式サイトを参考にして欲しいが、個人的にも考えていた（考えていただけ）方法に近い。学習時間が長いのが難点だが、複数台のPCで分散化できれば問題なくなるだろう。 特徴的なのは、特定の言語に左右される
ご指定いただいたページが見つかりませんでした | MOONGIFT | オープンソース・ソフトウェア紹介を中心としたITエンジニア/Webデザイナー向けブログ
MOONGIFTはオープンソース・ソフトウェア・フリーウェアを中心に、プログラマー、デザイナーに有益な情報を提供しています。有料会員限定記事もご用意。申し訳ございません。お探しのページは、移動または削除された等の理由により表示することができません。あるいはURLをタイプミスしている可能性があります。
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
