Twitterがリリースした時系列異常値検出のためのRパッケージ{AnomalyDetection}を試してみる - 渋谷駅前で働くデータサイエンティストのブログ
もう松の内も明けてしまいましたが、遅ればせながら皆さん明けましておめでとうございます。今年もよろしくお願いいたします。 で、年明け早々にTwitterエンジニアブログに面白いネタが上がっていたのでした。 その名も{AnomalyDetection}というRパッケージ。バルス砲に備えてTwitterが鉄壁の防御を敷いていることは多くの人がご存知だと思いますが（笑）、そういうバルス砲のような異常なアクセスの跳ね上がりだったり、逆にサーバダウンなどでアクセスの異常な落ち込みが出た時にいち早く検出するというのが目的の分析フレームワークのようです。 ということで、話題が新鮮なうちにちょっと試してみようと思います。 どういう仕組みで動いているのか 理論的背景としては、そもそもgeneralized ESD (extremely Studentized deviate) testという外れ値検出の手法が
Rでもワンライナーでエロいことやりたい!! - yasuhisa's blog
エロいかは分からないけど、Rもワンライナーで使えると便利だなと思った。Perlとかでもいいけど、分散とかそういうの計算させるにはRとかのほうが便利だと思うし。Rのワンライナーは例えばこんな風にできる。 R -q -e 'mean(c(1:100)^2)' これはこれで便利だけど、ただの電卓なのでコマンドラインから何か引数もらって計算させることにした。とりあえずカレントディレクトリにあるファイルのバイト数の平均と分散をRに計算させました＞＜。 find -type f -printf "%s\n" | xargs R -q -e 'x <- as.numeric(commandArgs()[6:length(commandArgs())]);sprintf("Mean is %5.0f,variance is %10.0f",mean(x),var(x))' --args > x <- as
データフレームの列に変数を使ってアクセスするときは[[]]を使う - こんにちはこんにちはmonmonです！
やりたいことはhogeという列をもったdfrmというデータフレームがあったときにhogeが入ったrow_nameという変数を使ってアクセスしたいというもの。 row_name <- hoge # TODO: row_nameを使ってdfrm$hogeのようにアクセスするにはどうやって書けばいいの？！ いつも dfrm$name というアクセス方法しかやったことがなく「これきっとシンタックスシュガーで何かしら書き方あるんだろうなぁ」と思ってRクックブックをパラパラしたらP.66にあった。 1つの列を選択するには、以下のリスト表現のいずれかを使います。 dfrm[["name"]] nameという名前の1列を返します。 dfrm$name 構文が異なるだけで上記と同じです。 ということで先の場合には、 dfrm[[row_name]] でいけました。
![データフレームの列に変数を使ってアクセスするときは[[]]を使う - こんにちはこんにちはmonmonです！](https://cdn-ak-scissors.b.st-hatena.com/image/square/f30ed120dff720f9fe6b329611733de817592b8e/height=288;version=1;width=512/https%3A%2F%2Fogimage.blog.st-hatena.com%2F13208692334729892902%2F12921228815711076808%2F1382064130)
はてなブックマーク記事のレコメンドシステムを作成 PythonによるはてなAPIの活用とRによるモデルベースレコメンド - データ分析がしたい
私は情報収集にはてなブックマークを多用しており、暇な時は結構な割合ではてなブックマークで記事を探してます。しかし、はてなブックマークは最新の記事を探すのは便利ですが、過去の記事を探すにはいまいち使えません。個人的には多少過去の記事でも自分が興味を持っている分野に関しては、レコメンドして欲しいと感じてます。 ありがたいことにはてなはAPIを公開しており、はてなブックマークの情報を比較的簡単に取得できます。そこでこのAPIを利用して自分に合った記事を見つけるようなレコメンド機能をRとPythonで作成してみたいと思います。 利用するデータは、はてなAPIを使って収集します。具体的には、はてなブックマークフィードを利用して自分のブックマークしているURLを取得し、そのURLをブックマークしているユーザをエントリー情報取得APIを用いて抽出し、そのユーザのブックマークしているURLを収集します。こ
Rで簡単にHTMLレポートを送れるパッケージを公開しました - yokkunsの日記
先日やったRでHTMLレポート配信を、パッケージ化して公開しました！ [R] knitr+sendmailR でHTMLレポート配信 - yokkunsの日記 sendmailRで画像付きHTMLメールを送る - yokkunsの日記 Rでレポートメール 準備 修正版sendmailRのインストール $ git clone git@github.com:yokkuns/sendmailR.git $ cd sendmailR $ sudo make install または、パッケージを作成して普通に、install.packagesでインストール $ make package > install.packages("sendmailR_1.1-2.tar.gz") インストール > install.packages("EasyHTMLReport", contriburl=contrib.
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
SSSSLIDE
