sortコマンドで簡単にApacheのログを時系列に並び替え - kame-tの日記
ロードバランサを経由するのでApacheのログが複数のサーバに分散する ログはWebalizerで解析するのですが Incrementalモードだと時系列に並んでないとうまく解析できないみたい(Ver.2.01) ファイルを集めるのはいいとして ログを並び替えるのをどうするか http://d.hatena.ne.jp/rougeref/20080909 http://www.kishiro.com/apache/analyze_log.html LLを使えばなんとでもなるのですがそれも面倒なので # DBも面倒です、量も多くないですし sortコマンドでサクッとできないかと調べると http://jehiah.cz/a/sorting-apache-logs はなかなかよかったのですが スペース1つを区切り文字にしているので 例えばユーザ名にスペースが入るとNGです 結論としては % s
追記: sort を使うときは，LC_ALL=C を忘れずに - ny23の日記
> wc --lines unigram_raw.txt 290768333 unigram_raw.txtそもそも，たかだか3億要素，1.7Gのデータのソートに，最近のマシンで sort | uniq -c が858分もかかるのは変ですよね． > export LC_ALL=C > time sort -S 2G unigram_raw.txt | uniq -c > tmp.sort.uniq sort -S 2G unigram_raw.txt 389.93s user 16.32s system 99% cpu 6:49.61 total uniq -c > tmp.sort.uniq 15.40s user 1.56s system 4% cpu 6:49.62 totalIntel Xeon E5462 (3.2Ghz) が Dual Core AMD Opteron 1210
sshの設定（passwordなしでsshログイン（scp）する） - Qiita
パスワードなしでscp まずは、 (1) ssh-keyを作る。 $ ssh-keygen -t rsa すると、 Enter file in which to save the key (/home/<user>/.ssh/id_rsa): と、「どこに鍵を保存しますか」と言われるので、特に問題がなければEnterを押してデフォルトのディレクトリ（~/.ssh/）に保存する。 次に、パスフレーズの設定を要求される Enter passphrase (empty for no passphrase): Enter same passphrase again: ここでは、パスフレーズなしにしたいので、何も入力せずに、Enterを2回押す。 $ ls ~/.ssh id_rsa id_rsa.pub これで鍵が~/.sshの中にできた。 (2) sshしたいサーバー側に公開鍵（public k
5分でわかるカタルーニャの住民投票と独立問題
このへんの話。 http://www3.nhk.or.jp/news/html/20170907/k10011129891000.html http://d.hatena.ne.jp/gryphon/20170908/p2 事情に詳しくない人からすると「なんでそんなにカタルーニャは熱くなってるの？」って感じだろうと思うので、簡単に解説したあとで補足説明をつけます。 5分でわかるまとめ今のスペインには「民族（ネーション）」をめぐって2つの対立軸がある 「スペインは単一民族（ネーション）からなる国だよ（だから地方の独自色はなるべくなくしていくのが望ましいよ）派」と「スペインはたくさんの民族（ネーション）からなる国だよ（だからもっと地方分権して独自の言語を守っていこうよ）派」 今の中央政府（国民党）はゴリゴリの単一民族派で、最大野党もどっちかというと単一民族派寄り、全国政党で多民族国家派なのは急
徳島県警察の誤認逮捕事件についてまとめてみた - piyolog
2017年9月10日、チケット売買を巡り、徳島県警察(三好署)により詐欺容疑で女性Aが逮捕、勾留されていた事件について、別人(女子中学生B)によるなりすましの犯行であり、女性Aは誤認逮捕であったと報道されました。ここでは関連情報をまとめます。 インシデントタイムライン 日時 出来事 2016年8月頃 女性AがTwitter上にチケット売買を書き込み。 2016年8月17日 女子中学生BがAになりすましてC、Dと架空の売買契約。 その後 徳島県内の女子高生C、Dがチケット代として計8万円を振り込み。 2016年9月 チケットが届かなかったとして女子高生Cが被害届を徳島県警察三好署へ提出。 女性A逮捕直前 徳島県警察が女性Aの自宅を家宅捜索。 2017年5月15日 現金をだまし取ったとして女性Aが詐欺容疑として徳島県警察により逮捕。同月送検。*1 ：(19日間) 女性Aを勾留。 2017年6月
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
myhome.cx