wgetが超絶便利なwebクローラー、クローリングツールだとは知らなかった・・・！
2013/04/08 この記事は書かれてから1年以上が経過しており、最新の情報とは異なる可能性があります techwgetCrawler ええ、知りませんでした。無知もいいところです・・・。 webコンテンツをざっくりローカルで見られるようにしたいなー。と思って、いろいろぐぐってました。 基点のURLからリンクやらリソースやらを辿って、それらをすべて落としてきて、 そこからさらにパスとかを変換してやればいいのかなーとか思っていたのですが、 ぐぐってみると、もうすでに 全部やってくれる便利なコマンドがある のではないですか。 それが、wget というソースコードをダウンロードするのによく使うコマンドだったことに驚きでした。 ちなみに mac は入ってないっぽいのでさくっと入れました。 brew install wget 普通の使い方は、wget のあとにダウンロードしたい URL を続けて引
Producing Web » Blog Archive » Web企画を立てる際にリストアップする34の要素
Webサービスの企画を行う際に、企画書を作られることがあるかと思います。個人で作るサービスであれば作らないこともあるでしょうが、企業として取り組む場合には必要なものです。 via Changes to site permalink page on Flickr - Photo Sharing! なぜ必要かと言えば、プロジェクトメンバーと意識を共有するためです。これがずれていると、プロジェクトの進行方向が徐々にずれていってしまいます。そうならないよう、初志を書き出しておくことで、定期的に見直し、改訂してプロジェクトを進めていくのが重要です。 そこで今回は私がWebの企画書（自分用ではなく、他社への提案用）を作る際に注意している項目を書き出してみました。実際は、これらを必要に応じて削除/追加したりします。 □ コンセプト 最も大事ですね。端的な言葉でサービスの概要を言い表す必要があります。 □
3分LifeHacking：登録不要ですぐ使えて、無料――最大400Mバイト〜5Gバイトの大容量ファイル転送サービス4選 - ITmedia Biz.ID
登録不要ですぐ使えて、無料――最大400Mバイト～5Gバイトの大容量ファイル転送サービス4選：3分LifeHacking 高解像度な写真データや、音声ファイル、動画ファイルなど、最近のファイル容量は増加する一途。他人とのデータのやりとりもひと苦労だ。メールに添付しようにも、「エラーメールが戻ってきちゃった」。そんな時に便利なのはファイル転送サービス。登録不要ですぐ使えて、しかも大容量で、無料のサービスを4つ選んだ。 高解像度な写真データや、音声ファイル、動画ファイルなど、最近のファイル容量は増加する一途。他人とのデータのやりとりもひと苦労だ。物理的に近ければ、SDカードやUSBメモリなどで手渡しするのもやり方だが、遠く離れた人とやり取りするのは結構難しい。「メールに添付したんだけど、エラーメールが戻ってきちゃった」とか、よく聞く話だ。 そんな時に便利なのはファイル転送サービス。送信側は、サ
YourFileHostの動画を簡単検索「けしからん動画検索」 :教えて君.net
今ムフフな動画を見るなら「YourFileHost」という動画共有サイトが熱い！ しかし動画を探すにはイマイチ検索が使いづらい……そんな弱点を補い、お気に入りの動画の検索を可能にするサービスが「けしからん動画検索」だ。 日本じゃ消されてしまうようなモロにエロい動画がじゃんじゃんアップされており、ブラウザで視聴し放題というオイシイ動画共有サイト「YourFileHost」。検索機能がイマイチ使いにくく、日本語での検索がうまくできないというのが悩みのタネだ。YourFileHostの動画を専門に紹介するエログはあるが、広告が多すぎて巡回に時間がかかる。 「けしからん動画検索」では、YourFileHostにあるムフフ動画を日本語で検索できる。YourFileHostの動画を扱う日本のエログを検索してそこから動画を探す仕組みだが、スゴいのは検索結果のページから動画の情報だけを抽出してサムネイル
YouTubeの高画質版ムービーをダウンロードする方法
YouTubeが高画質版をこっそり提供しており、その動画を見る方法があることを先日紹介した。その高画質版は映像がMP4(H.264)形式、音声がAAC形式になっている。その高画質版のYouTube動画を手軽にダウンロードする方法を紹介しよう。 YouTubeの高画質版を見る方法は簡単で、URLの後ろに「&fmt=18」とつければいい。例えば「IDOLM@STER - Go My Way!!」の「http://www.youtube.com/watch?v=ap-yX7LKZLg」であれば「http://www.youtube.com/watch?v=ap-yX7LKZLg&fmt=18」とすればいい。 YouTubeの動画をダウンロードする方法はいろいろあるが、ブックマークレットを使う方法が手軽だ。ブックマークレットをブラウザのお気に入りに登録しておき、YouTubeのページでそのお気に入
URLにあるキーワードを追加するだけでYouTubeの動画が高画質になる、という裏技 | IDEA*IDEA
ドットインストール代表のライフハックブログ
[修正版]ウェブ制作価格を相場以下で受けている企業が覚えておいて損のない5つの防衛手段*ホームページを作る人のネタ帳
前回のエントリがグダグダになったので改めて整理して書き直したものです。はずかしいのでブクマしないでくださいお願いします。 このエントリは、○○円ならどこまでできる!? ウェブサイト制作の相場早見表 | Web担当者Forumというエントリをみて、なんだかなぁ。 切ないなぁ、この相場より安い私。 と、思った方に向けて発信するエントリです。 web制作の価格は需要による 実際に、ウェブ制作の価格は、需要によって異なり、制作実績が多数ある企業ほど強い。 これは、完成後のイメージを顧客がつかみやすいからという理由も有ります。 当ブログのアクセスアナライザを見ても、東京や名古屋、大阪、京都というのは圧倒的に多い。 ですから、地方のインフラが整備されてきたとしても、ホームページを持ちたいとか、そこからどんな収益がでるのかという顧客のイメージは、地域地域で異なります。 その為、受ける受注額にも大きな格差
![[修正版]ウェブ制作価格を相場以下で受けている企業が覚えておいて損のない5つの防衛手段*ホームページを作る人のネタ帳](https://cdn-ak-scissors.b.st-hatena.com/image/square/20e60dafbd3a5e5c465259c72af3a3a5532bcbcd/height=288;version=1;width=512/https%3A%2F%2Fblog-imgs-55.fc2.com%2Fe%2F0%2F1%2Fe0166%2Fl.jpg)
第9回 より見てもらえるようにユーザーを“そそる”、ワンランク上の画面構成のコツ | Web担当者Forum
第9回 より見てもらえるようにユーザーを“そそる”、ワンランク上の画面構成のコツ 現実の店舗や窓口では、目の前にいるお客が困っていればすぐにわかるし、同じトラブルが重なれば問題が起きないように施策をとる。しかし、ウェブサイトを作っているときにはお客は目の前にいないし、公開後にお客の対応をするのはウェブサーバーやスクリプトという機械だ。そのため、現実の商売では当然のように行っている接客ができない、いや忘れてしまってはいないだろうか？ 今木 智隆（株式会社ビービット） 限られた画面内でユーザーの目線を 効果的に誘導するテクニックを紹介「ファーストビュー」、すなわち「ユーザーがサイトを訪問したその瞬間に画面に表示される領域」は、画面設計・デザインにおいて、常に意識しなければならないポイントの1つだ。限られたスペースの中で、いかにコンテンツに優先度を付け、効果的に構成するか、かなり悩まれた経験のあ
ウェブサイトを使いやすくするための43の法則
R6K.Net Pressにエントリーされている「あなたが避けるべきウェブデザインの43のミス」の意訳です。 43 Web Design Mistakes You Should Avoid 上記エントリーによると、よく見かけるデザインのミスリストは10個くらいが通常ですが、それでは足らなく、増やしていくうちに43個になったそうです。 43の法則は、常識として浸透しているものもあれば、論争になるようなものもあります。 個人的には、いくつかは条件しだいでと思いますが、概ね相違無いです。 The user must know what the site is about in seconds. サイトに来訪したユーザーは、数秒で何のサイトか知らなくてはいけません。 Make the content scannable. コンテンツが一覧できるリストが必要です。 Do not use fancy
GIGAZINEの仕事術
酒は飲まない、たばこは吸わない、休日に誰かと遊びに出かけることもない。ずっとパソコンに張り付きっぱなしでも、それを苦とも思わない。珍しく外に出たと思ったら自分の記事で紹介したおやつや飲み物の買い出し…。 「おかげで引っ越す先々で半径500メートル以内に何の店があるのか分かるまで1年以上かかります」 そんなクレイジーな人物が率いる「GIGAZINE」は、ネットの最先端を最後尾から眺めるニュースサイト。ソフトバンク、ライブドアといった企業を経験し、現在は自分の会社の代表取締役となったGIGAZINEの「darkhorse」こと、株式会社OSA代表取締役である山崎さんの一風変わった仕事術に迫る。 ・仕事術は基本的に「ない」 2000年4月からニュースサイト「GIGAZINE」（最初はウェブマガジンだった）を運営する山崎さん。現在、ブログ検索エンジンテクノラティのランキングに400万個あるブログ中
アスタリスクで隠されたパスワードを確認する方法 [K'conf]
ログインが必要なサイトの多くは、IDとパスワードを入力するフォームが設置されています。 通常、このようなフォーム内のパスワード部分に入力した文字は盗み見防止のため、「********」のようなアスタリスクになって文字が隠されるようになっていますが、しばしば、この入力したパスワードを確認したい状況になる場合も少なくありません。 このようなケースに役立つハックの紹介。 以下のJavaScriptをアドレスバーに入力すると、次のようなダイアログ内にパスワードが表示されます。 javascript:(function(){var s,F,j,f,i; s = ""; F = document.forms; for(j=0; j<F.length; ++j) { f = F[j]; for (i=0; i<f.length; ++i) { if (f[i].type.toLowerCase() ==
![アスタリスクで隠されたパスワードを確認する方法 [K'conf]](https://cdn-ak-scissors.b.st-hatena.com/image/square/1a87d5887c466cccb0b849babb90931bdfa1b8c8/height=288;version=1;width=512/http%3A%2F%2Fkenz0.s201.xrea.com%2Fimage%2Fweblog%2F071121%2F2.gif)
Geekなぺーじ : はてなブックマークを禁止する方法
念のため最初に書いておきますが、ブックマーク禁止やリンク禁止派ではありません。 純粋に技術的にどうするのだろうという興味で書いています。 「ある広告人の告白（あるいは愚痴かもね）: 推奨してるわけでは決してなくて、お嫌な人には拒否する権利があってもいいのかな、ということなんです。」を読んで、はてなブックマークを技術的に阻止するにはどうするのだろう？と疑問に思いました。 アクセスログを見ていると、はてな系のプログラムが出しているHTTP_USER_AGENTは「Hatena」で始まりそうな気がします。 例えば、ブックマークを行うと「Hatena Bookmark/1.0」というHTTP_USER_AGENTがやってきます。 ブックマークをさせないためには、そのエージェントに意地悪をすれば良いのではないかと考えました。 まず、最初にやろうと思ったのが、はてなロボットのリクエストに対して「404
Photoshopで自分の好きな背景画像を作る方法『How to make your own patterns.』 | CREAMU
Design Photoshopで自分の好きな背景画像を作る方法『How to make your own patterns.』 自分の好きな背景画像を作ってみたい。 そんなときにおすすめなのが、『How to make your own patterns.』。Photoshopで自分の好きな背景画像を作る方法です。 以下にご紹介。 例として120x120pxの新規ファイルを作成し、パターンの元となる画像を作成します。 そして、そのレイヤーを複製します。 複製されたレイヤーが選択された状態で、「フィルタ / その他 / スクロール」を選択します。 スクロールダイアログで、カンバスサイズの1/2のピクセル数を入力します。 ここでは120x120pxのファイルを作成したので、60と入力しました。 OKをクリックすると、画像が4分割されて四隅に配置されます。 以上ですね。 以下はオプションです。
リラックスして眠りやすい音楽を作る「Sound Sleeping」
いろいろな自然音を組み合わせることで、ストレスを減少させて眠りやすくする環境音を生成するという一風変わったサイトです。利用は無料。 組み合わせる音はリズム的な音、雨の音、雷の音、波の音、チャイム音、鳥のさえずり、カモメ。 詳細は以下から。 Relaxing music, sleep-aids, anxiety reduction, relaxation tools http://www.soundsleeping.com/ マウスでスライダーを動かして、ボリュームを調節するだけです。かなりお手軽。 以下にミニバージョンもあります。 Mini Relaxation Tools また、シェアウェアですが、こういう環境音を作り出す専用ソフトもあります。 Atmosphere Deluxe 音のサンプルはこんな感じ。MP3で置いてあります。 Audio Sample この音を無限ループで再生するだ
2007 » 2 月 » 11 » あれこれ
参照元の K’conf さんのブログをご覧頂ければ十分わかると思うんですが、実際に試した過程を画像で説明しようと思います。 Free のボタンを押した次のページに移動したものです。通常であればカウントが終了するまで待機します。 そこで強制的に待ち時間をなくすための方法が javascript の利用です。 ブラウザのアドレスバーに javascript:alert(c=0) と打つこみまたはコピペしてページ移動します（Enterキーなど）。 そうすると画像のようなダイアログで出てくるのと同時に、通常の方法だとカウント終了後に出てくるDL画面も出てきます。 ただDLの度に毎回打ち込むのは面倒ですし実用的ではないですよねってことで便利なのがブックマークレット。 Rapidshare 待ち時間解除 上のリンクをブックマークしておき、待ち時間をなくしたい場合その開いたページでブックマークから呼び
phpspot - PHPスクリプト/MySQL/掲示板/入門/サンプル/正規表現/レンタルサーバー
ようこそphpspotへ！ 当サイトではフリーのwindows用php開発環境であるＰＨＰエディタ(forWin)や、 フリーのＰＨＰスクリプト( PHP掲示板,webshot,webimager,CMS 等 )、ＰＨＰツールバー、テレビバー、 便利検索バー(Yahoo,Google,辞典検索)などを配布しています。 その他、ＰＨＰ入門 や ＰＨＰ５-ＴＩＰＳ、ＰＨＰサンプル集、MySQL解説、ＰＨＰレンタルサーバー特集 などのコーナーもあります。 スポンサードリンク 2009/09/14 サイトで配布しているPHPスクリプトに脆弱性！すぐ最新版にアップしてください！ new! 2009/01/21 ＰＨＰで携帯サイト構築を公開! 2008/07/12 PHPによるWebアプリケーションスーパーサンプル 活用編 第二版が出ました 2008/04/22 PHPエディタをVistaに対応させま
GIGAZINE - よく見かけるあの小さなボタンバナーを作る「Button Maker Online」
上記画像のような小さなボタンバナー画像に見覚えはないでしょうか？これを簡単にオンライン上で作成できるのが無料サービス「Button Maker Online」です。80×15か88×31サイズの画像が簡単に作成できます。 Dynamic Drive online tools: Button Maker http://tools.dynamicdrive.com/button/ 使い方は以下の通り。 「Base Color is Transparent」：背景色を透過色にする 「Base Color」：背景色を決める。「Base Color is Transparent」のチェックを外すと選択できる 「Font」：文字のフォント。SilkscreenとSans-Serifの2種類。 「Border Color is Transparent」：境界線の色を透過色にする 「Border Colo
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
生活や実務に役立つ高精度計算サイト