Webスクレイピングが捗るGoutteを使ってみる
シャワー後の水切りでヘドバンしてたら頸椎を痛めてしまいました。あれは絶対やめた方がいいです。と周囲に広めているたきゃはしです。急に本題ですが今回はPHPで簡単にできるWebスクレイピングをご紹介します。 ◯ Webスクレイピングとは Webサイトからデータを抽出するソフトウェア技術のことです。 RSSやWebAPIが公開されていないサイトからでもデータ抽出が出来るようなイメージです。 早速クローラーの Goutte（グットゥ） を使って紹介していきたいと思います。 Goutte は Symfony や Twig、Pimple等の開発者として知られるFabienが手がける人気ライブラリです。 ◯ インストール
PHPでHTMLをパースして解析する簡単な方法
今、個人的に管理しているサイトのHTMLが正しく出力されているかを確認するためのスクリプトを書いています。そのために、出力されたHTMLを解析して、中に適切な情報が含まれているかを知る必要が出てきました。 そういうわけで、いわゆるスクレイピングのようなことをしたくなってきました。 HTMLの解析はなかなか大変 これがJSONデータを解析するとかなら良いのですが、HTMLを細かく解析するのはなかなか大変です。 なぜなら、HTMLというのは結構みんな自由に書かれてしまっているからです。それでいて、そんな自由に書かれたHTMLもブラウザ上は動いてしまうため、それで良しとされてしまっている。時に中身は最悪だったりします。コンピュータが処理するには、厳密性に欠けるデータなんですね。 simplexml_load_stringでは解析できない。 「PHPに便利な関数ないかなー」と探していると、simp
WebRTCとWeb Audio APIを使って音声録音と音声再生をする方法 | azunyan.blog
マイクから音声を取得（音声録音）して、音声再生する復唱アプリ「Kiri!Talk」をWebRTCとWeb Audio APIを使って開発しました。 WebRTCは、ブラウザ間でボイスチャット、ビデオチャット、ファイル共有ができ、Web Audio APIは、音声データを色々加工することができます。 JavaScriptのみで簡単にこんな処理ができるなんてすごい時代になったと思いつつ、勉強がてらアプリを作ったという経緯です。 まだ一部ブラウザしか対応していませんが、後々はスマホ等携帯端末のブラウザにも対応して、ブラウザのみで何でもできる時代が来るのではと期待しています。 今回は、作ったアプリで音声録音と音声再生を行ったので、その処理方法を説明します。 ただ、勉強がてら作ったので「まぁ動いたからいいや」というレベルで、ちょっと不明点ややっつけのままコードを書いた箇所があります。 ので、
JSON APIを PHPから呼び出して結果を表示する - ScalaのようでJavaだけど少しScalaなJSON API - ワルブリックス株式会社
≪ 前の記事余談 - 傭兵は冷徹な稼業ときたもんだ。なぜ今またJavaなのか 次の記事 ≫JSON APIを Pythonから呼び出して結果を表示する PHPも、HTMLのテンプレート言語としてだけ使うならまだ我慢できる 今まで取り扱ってきたものは、Webアプリケーションと呼んではいるものの何らかの処理を行った結果のデータを返すだけの APIにすぎず、実際にユーザーが機能を利用するためには、アプリケーションは HTMLでユーザーと対話できなければならない。その部分を PHPで記述するための簡単な例を示す。 PHPに必要な機能の確認 この場合、PHPには最低限 mbstring (UTF-8を解釈するため), curl (HTTPでAPIを呼び出すため), json (APIを呼び出した結果返ってくるJSON文字列を読み取るため) が組み込まれている必要がある。手元の CentOS 6.4で
Titanium の WebView で HTML をホスト – アカベコマイリ
Titanium の WebView で HTML をホストする方法の覚え書き。 目次 WebView アプリと WebView 内ページの連携 リソース HTML の表示 サンプル アプリ WebView のバグ WebView WebView は Titanium.UI.WebView として定義されるブラウザ コントロールである。URL か HTML ソースを指定することでページが表示される。例えば以下のように使用する。 var window = Titanium.UI.createWindow(); // URL var webView = Titanium.UI.createWebView( { url: "http://www.example.com/" }); // HTML を直に指定 var webView2 = Titanium.UI.createWebView( {
AndroidやiOSの「ハイブリッドアプリ」で，JavaScriptとネイティブ・コードが連携する仕組みを図解 （おまけ：HTML側で施すべき，クロスプラットフォーム対策） - 主に言語とシステム開発に関して
AndroidプログラミングのTOPへ HTMLやJavaScript等のWeb技術を使って，AndroidやiPhoneなどモバイル環境のネイティブ・アプリを作成する事ができる。 そういうアプリの事をハイブリッド・アプリと呼ぶ。 AndroidとiOSでは，ハイブリッド・アプリを実現するためのアイデアは，非常に似ている。 下記の図を見れば，仕組みが酷似している事が分かるはずだ。 なおWindows Phoneの場合も，だいたい似たようなフロー。 以下では，各プラットフォームごとの詳細な事情をメモする。 また，複数プラットフォーム間での移植性を向上させるために，HTML側でどのように対処したら良いか？という課題についても述べる。 （１）Androidの場合 Androidでハイブリッド・アプリを実現するための仕組みは，下記のエントリに記述した。 たった２ファイルで，HTML＋JS製のネイテ
【スマホ用ページ】低解像度、高解像度端末のどちらでもくっきり綺麗に表示しつつ、幅ぴったりにする HTML テンプレート。
こんにちは、ウェブ開発の林です。 スマートフォン向けウェブページを作る際、横幅ぴったりにしたいと思いませんか。 meta viewport というタグを使えば表示サイズを調整することができます。 ただそれを使ったとしても、Android / iPhone は端末により横幅が違うため個別に最適化するのは面倒です。 スマホ端末ごとにコードを分けることなく常に幅ぴったりにする HTML テンプレートを作りました。 こちらを参考に組んでみてはいかがでしょうか。 HTML テンプレートコード（ヒント付き） こちらの HTML コードを丸っとコピペして修正していくと楽だと思います。 追記： ライセンスフリーです。自由に使ってください。 <!DOCTYPE html> <html lang="ja"> <head> <meta charset="utf-8"> <title></title> <!--
iPhone,iPad,Android用htaccessを作成してみよう | LonelyComet | 風俗系のデザイン指南サイト
iPhone,Android対応のサイトにリダイレクトさせるための方法をご紹介いたします。 一番簡単な方法としては、.htaccessでの振り分けがあります。 PCはそのままで、iPod/iPhoneの場合は /m に飛ばしたい場合に、 RewriteEngine On # iPod RewriteCond %{HTTP_USER_AGENT} iPod RewriteRule ^$ /m/ [R] # iPhone RewriteCond %{HTTP_USER_AGENT} iPhone RewriteRule ^$ /m/ [R] # iPad RewriteCond %{HTTP_USER_AGENT} iPad RewriteRule ^$ /m/ [R] # Android RewriteCond %{HTTP_USER_AGENT} Android RewriteRule
Facebookアプリはもう古い！モバイルアプリを作ろう (2/2)
Facebookアプリのメリット モバイルに限らず、Facebookアプリのメリットは、ユーザーのさまざまな情報をFacebookのGraph APIを使って取得できることです。たとえば以下のような情報がGraph APIで取得できます。 【User】 ユーザーの性別 ユーザーの出身地 ユーザーの交際ステータス 【FriendList】 友達リストのID 友達リストの名前 【Album】 アルバムの位置情報 アルバムのタイトル アルバムの説明文 Facebookモバイルアプリでは、これらの情報を使って、それぞれのユーザーに合わせてカスタマイズしたコンテンツを提供できます。性別や出身地によって表示する情報を切り替えたり、アルバムの写真をアプリに取り込んで使ったり、アイデア次第でいろいろなアプリが作れるのです。 HTML5開発を効率化するライブラリー「jAction」 Facebookモバイル
[php] WEBページ内のリンク先URLをすべて取得する
URLを投げると、そのページにある<a href=> タグを全部拾って リンク先URLを配列で返してくれるコード。 相対リンクを絶対リンクに変換するというのが肝。 やっとできた・・・・。結局、人のソースまるもらいました...。 PHP/PHP入門/正規表現/リンク抜き出し - WebTips こちらのサイト様に大感謝でございます。 そのコードが拾ったリンク先URLをechoするものだったので、 $linkarrayという配列に入れるように改造させてもらいました。 ■ テスト サイトマップ -首相官邸ホームページ- ここに対して実行する(ソース3行目の$urlで指定する)と↓ ■ 結果 Array ( [0] => http://www.kantei.go.jp/ [1] => http://www.kantei.go.jp/jp/kan/profile/index.html [2] =>
第1回 PhoneGapとは | gihyo.jp
はじめまして、株式会社キクミミの富田宏昭と申します。おもにWebアプリケーションを開発しています。この連載では、PhoneGapを使ったiOSおよびAndroidアプリケーションの開発方法について全4回に分けて紹介していきます。どうぞお楽しみください。 PhoneGapとは PhoneGapはNitobiが開発、公開しているクロスプラットフォーム・モバイルアプリケーションの開発フレームワークです。スマートフォン向けアプリケーションの開発では、各OSごとに特定の言語を使用をして開発をおこなうことになります。たとえばiOSの場合はObjective-C、AndroidやBlackBerryの場合はJava、Windows Phone 7の場合はC#・Vidual Basicなどです。複数のスマートフォンに対応するアプリケーションを開発する場合、デベロッパは複数の言語をもちいてそれぞれの開発環境
「jQuery Mobile」の登場で、モバイルアプリケーション開発は大きく変わる － Publickey
このところHTML5関連のモバイルアプリケーション開発について調べていて、先週の水曜日にはSwapSkills主催のイベント「jQueryモバイルで簡単！ スマートフォンサイト作成」に参加してjQuery Mobileについて勉強してきました。 jQuery Mobileとは、jQueryのプラグインとして利用するモバイルアプリケーション用のライブラリです。そしてその驚異的なまでの簡単さは、これから業務用のモバイルアプリケーションの作り方を一変させてしまう可能性を感じさせます。 jQuery Mobileの大きな特徴は次の3つです。 1）HTMLを書くだけでモバイルアプリケーションができてしまう 2）モバイルのユーザーインターフェイス対応の部品が多く揃っている 3）iOS、Android、WebOS、Windows Moblie、Symbianなどクロスプラットフォーム対応である 具体的な
スマートフォン向けのWebアプリを作ろう
この特集では、現在利用者が急増している2大スマートフォン、iPhoneおよびAndroid端末向けのアプリケーションを作ります。と言っても、それぞれのOSにネイティブなアプリケーションではなく、iPhone/Androidが搭載するWebブラウザの上で動くWebアプリケーションです。具体的には、HTMLおよびCSSの最新バージョンであるHTML5とCSS3を使ってiPhone/Androidアプリケーションを作成する方法、およびその際のポイントを説明します＊1。 iPhone/AndroidならHTML5とCSS3でアプリを作れる Webアプリケーションは、OSやプラットフォームに依存しないと言われています。確かに、Webアプリケーションの動作や見栄えは、OSやプラットフォームにはあまり依存しません。しかし、Webブラウザの種類やバージョンに強く依存します。異なるWebブラウザで同じように
クラウドなアプリケーション構築 前編-WebView | Techfirm Android Lab
はじめまして。鈴木です。 今回から2回に分けて「クラウドなアプリケーションの構築」と題して Androidの特性を生かしたサーバーサイドアプリケーションの構築を 実践していこうと思います。 これまでのモバイルアプリケーション開発とは一線を画して なんでもできちゃうAndroidですが、Googleケータイというからには、 やっぱりクラウドなアプリケーションを開発したいですよね。 実際、これまでWEBブラウザに頼らざるを得なかったクラウドの世界も、 Androidケータイというフロントエンドを得ることで より強力なサーバサイドアプリケーションを提供することができます。 今回はその礎として、「WebView」を使ってサーバーサイドから アプリ上の画面制御をしてみたいと思います。 HTMLファイルの表示 WebViewは、HTMLファイルを表示するコンポーネントです。 この
作って学ぶスマートフォン対応サイトの基本 (1/4)
iPhone/Android向けサイト制作の基本を学ぶために、今回は実際に手を動かしながら非常に簡単なWebページを作ってみましょう。あわせて、スマートフォンサイト制作に最低限必要な制作環境（エディターとWebサーバー）についても紹介します。 用意するもの1：エディター HTMLを編集するのに必要です。使い慣れたソフトで構いませんが、もしなければ次のようなものを使うとよいでしょう。 ・Em Editor / Windows / 4000円（税込） http://jp.emeditor.com/ ・秀丸エディタ / Windows / 4200円（税込） http://hide.maruo.co.jp/ ・TeraPad / Windows / 無料 http://www5f.biglobe.ne.jp/~t-susumu/library/tpad.html ・JEdit X / Mac /
HTMLタグからswfに引数を渡して、指定したフレームを表示したい
HTMLタグからswfに引数を渡して、指定したフレームを表示したいのですが、FlashのActionScriptの書き方が分からないので手順を教えてください
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
http://qixil.jp/q/242
[Å]【保存版】ブログを効率良く書くために超便利なブログツールまとめ![[Å]【保存版】ブログを効率良く書くために超便利なブログツールまとめ](https://cdn-ak-scissors.b.st-hatena.com/image/square/829a1d9cd55081c1247781d852b9919f51f2a54f/height=288;version=1;width=512/http%3A%2F%2Fwebmemo.biz%2Fwp-content%2Fuploads%2F1365873855.jpg)
Blog
http://www.stylish-style.com/csstec/basic/b-table-deco.html