Chrome拡張「Scraper」でWEBページ情報を手軽にスクレイピングしてデータ化する方法
Scraperとは Scraperは、WEBページ上の規則性のあるデータを手軽に取得することができるChrome拡張です。 例えば、テーブルデータや、Aリンクデータ、のような特定のHTML要素に入っている情報を、片っ端から取得してテーブルデータ化することができます。 また、その取得したデータをワンクリックでGoogleスプレッドシートに保存することができます。 テーブルデータのスクレイピングは以下の動画を見た方が分かりやすいかも。 以下では、その使い道などをいくつか考えてみました。 テーブルデータの取得 最もオーソドックスな使い方と言えば、動画にも出てきたテーブルデータの取得です。 例えば、信長の野望の以下のような武将データテーブルがあったとします。 これを、以下のように選択して、Chromeの右クリックメニューから「Scrape similar（似たものをスクレイプ）」を選択します。 す
ピケティ本『21世紀の資本』は、この図11枚で理解できる（髙橋 洋一） @gendai_biz
トマ・ピケティの『２１世紀の資本』が好評である。筆者は、kindle版の英語版を読んだが、山形浩生さんらの丁寧な日本語訳もある。ネットの上でpdf版を探せばある。この年末年始の休みに読むにはちょうどいい本だ。 『21世紀の資本』は反成長でも反インフレでもない kindle版やpdf版で便利なのは、資料リンク（http://piketty.pse.ens.fr/en/capital21c2）を参照できることだ。そこには、本書に使われている図表が250枚以上もある。 本書は、分厚い学術書であるが、そのタイトルから、マルクスの資本論の再来を彷彿させる。しかし、ピケティ自身がいうとおり、本書はマルクス経済学ではなく、標準的な成長理論を使った、ごくふつうの経済学である。 本書は、政策提言を除けば、反成長でも反インフレでもなく、政治的な左も右もない。もし本書を政策提言のみを強調したりして、政治的な左の
稼ぎ頭のドコモに変調､どうする巨人NTT
国内最大の通信事業者、NTTグループの成長戦略に誤算が生じている。原因は、グループの稼ぎ頭であるNTTドコモの変調だ。同社は今期、音声収入の減少や端末の割引費用が増大するため、期初の営業利益予想を前期比691億円減の7500億円としていた。 が、6月に投入した音声定額を含む新料金プランには、強烈な副作用が伴った。10月までに1000万件と想定以上のペースで加入があり、最も低額なデータ通信プランに人気が集中したため、営業利益予想は従来から1200億円もの下方修正を余儀なくされた。近年、8000億円前後の営業利益を稼いでいたが、2015年3月期は6300億円に落ち込む。この急変に、競合他社の幹部から、「プランのシミュレーションがお粗末すぎる」と言われるほどだ。 ドコモが緊急対策を発表 10月の中間決算会見でドコモの加藤薫社長は、緊急対策として下期に500億円のコスト削減を発表。マーケティングや
とっつきにくいけど実はエクセル以上に賢いヤツ フリー統計解析ソフトウェア「R」を触ってみよう【R入門講座】
『MarkeZine』が主催するマーケティング・イベント『MarkeZine Day』『MarkeZine Academy』『MarkeZine プレミアムセミナー』の 最新情報をはじめ、様々なイベント情報をまとめてご紹介します。 MarkeZine Day
笑ってはいけない都知事選24時（追記あり） - やまもといちろうBLOG（ブログ）
若い人は知らないだろうけど、アメリカ横断ウルトラクイズの徳光さんバリの体制で冒頭に書いてしまいますが、舛添要一都知事就任、おめでとうございます。 いまのところ中央値は280万票予想ですが、大丈夫なのでしょうか。 借金の舛添 献金の細川 過払金の宇都宮 未払金の家入 — Kei Nishiyama (@ashikagunso) 2014, 1月 22 田母神俊雄元帥は面白資本家からのご献金があるようですが、それは触れられないのでしょうか。まあ泡沫ですから仕方のないことかもしれませんが。石原慎太郎都知事が応援を決定した時は瞬間風速気味に70万票も見えた数字が、どうも剥げ落ちてしまっているようです。もったいないですね。 まだ選挙戦も始まったばかりですが、ビッグデータ的に興味深そうなところだけピックアップしておきます。 ■「支持する」and「投票する」を合計しても4割に届かない不思議な女性票 今回
データ集計コマンドを極めてシステム処理と業務速度を爆速化するお話 - Y's note
Index データ集計コマンド 爆速で検索したいぜ！ lookを使う LC_ALL=Cを設定する データのランダムサンプリングがしたいぜ！ sedを使う awkを使う sortの--random-sortを使う Script言語を使う shufを使う ランダムサンプリング速度比較 合計と平均値を集計したいぜ！ 列データ取得 重複行のカウント 合計値出力 平均値出力 複数ファイルのデータ結合がしたいぜ！ 共通項目での結合 同じ行数での結合 まとめ データ集計コマンド joinコマンドが便利過ぎて生きるのが辛い - Yuta.Kikuchiの日記 lookコマンドによる二分探索が速すぎて見えない - Yuta.Kikuchiの日記 今日はデータ集計を行う上で絶対に覚えておいた方が良いコマンドと知識を紹介したいと思います。これを身につければシステム処理と業務効率化に大きく繋がると思います。この記
auの次世代高速通信サービス「4G LTE」の提供開始について 〈別紙〉
●1. 特長 (1) 高速データ通信 3G通信 (CDMA 1x EV-DO MC-RevA方式) に比べて約8倍の通信速度となる受信時最大75Mbps、送信時最大25Mbpsの高速データ通信が可能です。なお、2013年には、受信時最大112.5Mbpsに高速化する予定です。(注) (2) テザリング対応 auスマートフォンをモバイルルータとしてご利用いただけます。PCやタブレットなどマルチデバイスでインターネットをお楽しみいただけます。 (3) 音声通話やSMSの発信から着信までの時間を大幅に短縮 世界初となる「eCSFB」技術の導入により、待受時の電力消費を抑えながらも音声通話の発信から着信までに要する時間を大幅に短縮できます。さらに、LTEの電波を高頻度で確認することにより、SMSの送受信についても時間を短縮できます。「eCSFB」は、高速で低遅延なLTEの利点を活かし、LTEネット
有吉弘行「アメトーーク！の出演を断るとき」
2012年06月24日放送のJFN系列のラジオ番組『有吉弘行のSUNDAY NIGHT DREAMER』(毎週日 20:00-21:55)にて、お笑い芸人・有吉弘行が、テレビ朝日系の番組『アメトーーク！』の「広島カープ芸人」企画に出演したところ、視聴者から「本当に広島カープファンなのか？」と疑問を持たれてしまったことについて語っていた。 リスナーメール：この前、アメトーーク！の広島カープ芸人出てましたね。でも、「なんかおかしいな」っていうところが、たくさんありました。 スクワット応援をしている時も、1人だけ微妙にできてなかったし、カープのいいところも1つも言わないし、サイン入りのユニフォームが出てきたときも、みんな目を輝かせていたのに、有吉さん1人だけ笑顔を見せず、よそ見をしていましたね。 それで思ったのですが、有吉さん、本当に広島カープが好きなんですか？ホントのことを教えてください。 有
HDDが買えないならZFSを使えばいいのに
タイの洪水被害の影響でハードディスク（HDD）の価格が高止まりしている。パーツショップでの実売価格は急騰前の3倍程度にまで跳ね上がり、今でも2倍弱の価格をつけている。5000円台で2TバイトのHDDが買えた記憶が新しいユーザーにとっては買い控えたくなる水準だ。フラッシュメモリーによる半導体ストレージであるSSDの容量単価は下落する一方だが、HDDが買えないならSSDを使えばいいのに…と言えるほどSSDは安くない。 もちろん、データの増加は待ってくれない。記者の自宅には、主にファイルサーバーとして利用するLinuxサーバーがある。タイ大洪水以前に約7000円で購入した1Tバイトの2.5型ハードディスクをストレージに充てた。写真1枚が10Mバイト近くある今の利用環境では、みるみる空き容量が減っていく。どのコンテンツもときめくものばかりで、整理には限界がある。「では増設」と思い立っても、HDDは
日本生まれのクラウドノート「KYBER」がすごい理由 (1/3)
オーリッドという日本のIT企業が注目を集めている。売上高は40億円規模。法人向けWebサービスを提供していたが、昨年から個人向けサービス「KYBER」を開始した。16日に発売した「KYBER Smartnote」（写真、3冊1500円）は、そのサービスの目玉だ。 見た目はごく普通のノート。メモをしたり、議事録をとったり、普通のノートとして使える。ノートをiPhone付属のカメラで撮影し、KYBERのWebサイトにアップロードすると、画像のデータがクラウドサーバー上で管理される（Androidには10月対応予定）。そこまではこれまでのクラウドサービスにもあったもの。「Evernote」を思い浮かべる人もいるだろう。 だが、話はここからだ。 しばらくすると、手書きのメモが文字データになって送られてくる。いわゆるOCR（画像からの文字起こし）だが、その精度は異様に高い。ほぼ完璧だ。納品までも最速
Terragen 初心者の為に
Terragenのダウンロード先。https://www.planetside.co.uk/terragen/ 非営利目的の場合は、無償です。シェアウエア版に比して機能限定は有りますが、フリー版で充分に使えます。 （９９＄払って登録するとキーが貰え、512x512ピクセル以上の地形データの利用、もっとアンチエリアスの掛かった 1280x960ピクセル以上の画像の作成、などが出来るようです。） ０ メインボタンの使用説明の概要 １ 最低限の操作 空と山を造って画像にする ２ 視角・ズーム・露出を変える ３ 海と山と空を造る ４ 山に木を生やす ５ 太陽の位置を変える ６ データを保存する ７ データを読み込む ８ データの受渡 エクスポート ９ データの受渡 インポート 少し慣れたら各国語翻訳マニュアルを。Terragen オフィシャルガイドサイトさん Terragen 最新情報日本語サイト
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Engadget | Technology News & Reviews