R による溜池サンプリング（Reservoir Sampling）の実験 - 廿TT
Data Stream Management という本に出てくる Reservoir Sampling（溜池サンプリング）という手法をシミュレーションしてみたい. これはサイズ N の母集団（N は未知でもよい）からサイズ n（）のランダム標本を非復元抽出で取ってくるアルゴリズムで, 大きすぎるデータからリサンプリングしたいときや, センサーなどから逐次的に流れてくるようなデータからランダム標本を得たいときに使えそう. Data Stream Management: Processing High-Speed Data Streams (Data-Centric Systems and Applications) 作者: Minos Garofalakis,Johannes Gehrke,Rajeev Rastogi出版社/メーカー: Springer発売日: 2016/07/22メディア
一階線形常微分方程式を使った流行語のモデル - 廿TT
モデル化 流行語は話題にする人が増えれば増えるほどさらに流行しやすくなり、ある時期を超えると忘れられていくと考えられる。 このダイナミクスをなるべく簡単な微分方程式で記述したいのでこのような仮説を置いた。 流行語の拡散スピードは話題にされる量に比例する 単位時間経過ごとに流行語を話題にする人は減っていく これを式で表すとこのようになる。 r は流行語の伝達スピードについての係数なので「拡散係数」とよぶことにする。 k は流行の減衰についての係数なので「忘却係数」とよぶことにする。 この方程式は解析的に解け、解は となる。 ただし r は話題が飽和する時期 τ を超えるとゼロになるものとした。 c は流行の規模に関わるパラメータと解釈できるが、今回は Google トレンドのデータを使うのであまり意味を持たない。Google トレンドの「人気度」はもともと適当にスケーリングされている。 キー
縦軸に目盛のないグラフ（インターネットもデータ分析も好きなぼくが、入社一年未満でWeb解析コンサルタントを辞めた理由） - 廿TT
主張 縦軸に目盛のない棒グラフや折れ線グラフを描くのはやめよう。 棒グラフ 以前の職場でよく見かけた棒グラフがこのようなものでした。 これは万能棒グラフです。 2007-10-22 - 定義すれば存在する 目盛のベースラインが 0 スタートでなくてもいい 目盛線は省略していい という風に棒グラフを書いてしまうとどんなデータにもあてはまる、万能棒グラフができあがります。 どんなデータにもあてはまるとは、つまりデータの特徴をなにも表せていない統計グラフということです。 統計グラフとしての機能をはたしません。 折れ線グラフ また、このような折れ線グラフもよく見かけました。 ここで、折れ線グラフは縦軸の幅を広くとれば大きな差を小さくみせ、狭くとれば小さな差を大きく見せることができることに注意してください。 縦軸に目盛がないと、この目盛操作に気づくのは困難です。 退職の理由 わたしは新卒で Web
確率収束するならば法則収束する？ - 廿TT
はじめに ポアソンの少数の法則は「起きるのが稀な事象の発生件数はポアソン分布に従う」という意味ではない - 廿TT を書いたとき, 標本分布とかについて復習しとこうと思ってググってて「確率収束するなら法則収束する．」という記述を見つけた（法則収束 - 機械学習の「朱鷺の杜Wiki」）. そのときは意味がわからなかったのでスルーしちゃったんだけど, ウィキペディアーにふつうに解説があった. Convergence of random variables - Wikipedia, the free encyclopedia Proofs of convergence of random variables - Wikipedia, the free encyclopedia 確率収束っていうと定数に収束するというイメージが強かったんだけど, もっと広い意味で定義できるっぽい. 定義（法則収束）
ロジャースのイノベーター理論ってこれでいいの？ - 廿TT
イノベーター理論とは マーケティング界隈でイノベーター理論というのがある。 こんな風だ。 イノベーター（Innovators：革新者）：冒険心にあふれ、新しいものを進んで採用する人。市場全体の2.5％。 アーリーアダプター（Early Adopters：初期採用者）：流行に敏感で、情報収集を自ら行い、判断する人。他の消費層への影響力が大きく、オピニオンリーダーとも呼ばれる。市場全体の13.5％。 アーリーマジョリティ（Early Majority：前期追随者）：比較的慎重派な人。平均より早くに新しいものを取り入れる。ブリッジピープルとも呼ばれる。市場全体の34.0％。 レイトマジョリティ（Late Majority：後期追随者）：比較的懐疑的な人。周囲の大多数が試している場面を見てから同じ選択をする。フォロワーズとも呼ばれる。市場全体の34.0％。 ラガード（Laggards：遅滞者）：最
原点がゼロでないグラフ、２軸のグラフ - 廿TT
前置き ここに書くことはすでに言い尽くされているような気がしますが、どうもなかなかご理解頂けていないようなので、改めてしつこく述べます。 なんだこりゃ。TV屋は相変わらずヘボなグラフ作ってんな・・・・原点がゼロじゃないグラフを作るのはいいかげんにやめろよと ＞ 原油価格はこんなに下がっているのにガソリン価格なぜ下がらない ... pic.twitter.com/AUpQovr9i8— 開米瑞浩 (@kmic67) 2014年8月8日 棒グラフ 棒グラフは原点がゼロである必要があります。 二重波線で省略を示したとしても、ダメです。 下のグラフは、 http://www.shumei-u.ac.jp/faculties/edu/images/img_edutop2014_graph.png このように描くべきです。 だいぶ印象が変わることをお分かり頂けるかと思います。 二重波線で省略を示したと
A/Bテストのガイドライン：仮説検定はいらない（Request for Comments｜ご意見求む） - 廿TT
本記事の編集方針 ※この記事に興味をもたれた方は、 A/Bテスト カテゴリーの記事一覧 - 廿TT も、必要に応じてご覧いただければと思います。 本記事はもともとは、「A/Bテストの数理」への批判：「有意」とはなにか の続き的なエントリでした。 しかし、予想外に反響があったため Request for Comments（ご意見求む）の精神で、随時更新している部分もあります。 ただし、ベースとなる主張、Web系施策のA/Bテストに、仮説検定は向かないという部分は変化していません。 もしぼくの考えが変わり、「やっぱ仮説検定、いいかも」となった場合、本記事の存在価値はほぼ消滅します。 そのようなことがあれば、ページ最上部に「考えが変わりました」と明記します。 また、他の修正箇所も区別して明記し、差分がわかるようにします。 ただし細かい言い回しや、誤字脱字等はだまって修正します。 目次： そもそも
R による検索キーワードのアソシエーション分析 - 廿TT
（追記 10/31）この記事はあまりおもしろくないのでよろしければ マーケットバスケット分析による検索キーワードのグルーピングと視覚化 - 廿TT をご覧ください。 対象サイト：http://aaaaushisan.blogspot.jp/ 期間：2013年05月26日〜06月26日 対象データ：オーガニック検索トラフィックのキーワード 手法：アソシエーション分析 アソシエーション分析のトランザクション*1：検索キーワードのかけあわせ Google アナリティクスを使うと自分のサイトに訪れた人がどんなワードで検索してきたのかわかる、こんな風に。 キーワードをスペースでくぎって集計するとこんな感じ。 （出現頻度上位15件まで図示） このデータを使ってアソシエーション分析をやってみる。 得られたルールから lift が 1 より大きいものだけを抜き出したのがこちら。 lhs rhs suppo
認知療法を始めるための認知療法 - 廿TT
はじめに 認知（行動）療法の本を読んでると「え〜こんなめんどくさいことやりたくな〜い」って気分になるので認知療法を始めるための認知療法が必要だと思った。 この文は抑うつ感、「ゆううつな感じ」についての認知療法を想定して書いていく。 統合失調症などについても認知療法は効果があるらしい。これは僕にとっては意外な事実だった。が、ここでは扱わない。 心理療法を受け入れたら、自分が精神的に弱い、ということを認めることになってしまう。自分の症状は医学的な、というかしかたのない、いわばたまたまそうなってしまったものだと思いたい 「たまたまそうなってしまうものだ」という見方はまちがってない。たとえば、軽症うつ病 (講談社現代新書) では繰り返しその点が強調されている。もっとも、うつ自体がなんで起こるのかはっきり解明されたわけではないみたいだけれども。いずれにしても心と体はつながってるわけだから、心理療法で
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
何時にツイートしたら一番みてもらえるか。Twitter アナリティクスデータの可視化。 - 廿TT
統計の本を読む時に覚えておくと便利な数理統計の公式集 - 廿TT
はじめての人のための精神科受診ガイド - 廿TT
よくないグラフ：折れ線グラフの使い方 - 廿TT
ぼくの考えたグラフ三原則 - 廿TT
アンチ精神分析としての認知行動療法ガイド - 廿TT
誤差の範囲とはなにか？ - 廿TT