上司がアクセス数を出せって言うから...-Six Apart ブログ｜オウンドメディア運営者のための実践的情報とコミュニティ
エンジニアの重田です。 上司がアクセス数を出せって言うから... 上司がログからアクセス数を出せって言うから、今日はコマンドの話をします。 とりあえずファイルの中身を見るには cat ですね。 $ cat /var/log/nginx/access.log | grep favicon.ico 192.168.56.1 - - [07/Apr/2012:15:58:58 +0900] "GET /favicon.ico HTTP/1.1" 200 133 "-" "Mozilla/5.0 (Windows NT 6.1; rv:11.0) Gecko/20100101 Firefox/11.0" 192.168.56.1 - - [07/Apr/2012:15:58:58 +0900] "GET /favicon.ico HTTP/1.1" 200 133 "-" "Mozilla/5.0
LTSVログをパースする最強のワンライナー集 · DQNEO日記
最初に結論 これ最強 cat accesslog | perl -F'\t' -nale '%h=map{split/:/,$_,2}@F;print"$h{time}\t$h{ua}"' なぜPerlワンライナーなのか？ LTSVログを解析するには、Perlのワンライナーに限る。 なぜならPerlはほとんどのサーバにデフォルトで入ってるから。 Perl 5.8で動くワンライナーを覚えておけばどの環境でも使える。 「何にも依存しない」 これ最強。 基本中のキホン まずは基本形です。 これだけは絶対覚えてしまいましょう。 perl -nale 'print' % cat access_log | perl -nale 'print ' time:[22/Feb/2014:15:13:07 +0900] host:10.10.200.102 ident:- user:- method:GET
Amazon Redshiftの利点
Amazon Redshiftについて色々と聞く機会があった。その時聞いたことメモ。 Amazon EMRとAmazon Redshiftの違い まずは、よく比較されることになるEMRとRedshiftの違いから。 Amazon EMR HadoopクラスタとHiveを簡単に使うためのサービス。自由な台数のクラスタを自由なタイミングで起動したり破棄したりできる。 Hadoopクラスタ運用(初期設定、チューニング、等)の手間が完全に不要なのはものすごいメリット。 クエリの速さは、ログの量によりますが、数分～数十分くらいかかる。(ログの行数が数百万～数千万ある時) 利用者から見た基本的な用途・できることはEMRとほとんど同じ。ただ、仕組みが全く違う。 RedshiftはRDBのような(Postgresベースらしい)テーブル設計を持つ。例えば、VARCHAR(255)みたいなカラムを持つ。EMR
Amazon Redshiftの開発者がこれだけは知っておきたい10のTIPS / 第18回 AWS User Group - Japan
This document provides an overview of AWS CloudHSM, a managed cryptographic key management service by AWS. It discusses AWS CloudHSM and AWS KMS services for key management, compares their features, and describes how AWS CloudHSM provides FIPS 140-2 Level 3 compliant HSMs for single-tenant key storage and cryptographic operations offloading. The presentation agenda includes cryptography basics, AW
Amazon Redshift編～パフォーマンスチューニング distkey編～
こんにちは！中の人です。 前回の『Amazon Redshift編～パフォーマンスチューニング sortkey編～』では、Redshiftのパフォーマンスチューニングとしてsortkeyの設定方法と、設定によるパフォーマンスの違いを紹介しました。 今回は『Amazon Redshift編～パフォーマンスチューニング distkey編～』と題して、Redshiftに対してdistribution keyを設定した場合のパフォーマンスについて紹介します。 テスト方法 今回は、こちらのクエリを使用します。 select avg(column01) from SAMPLE_TABLE where column01>5000 and date like '13-06%'
Amazon Redshift編～パフォーマンスチューニング sortkey編～
こんにちは！中の人です。 前回までのレシピでは、Redshiftに対して様々な環境下でのパフォーマンス比較をおこなってきました。 ■ Amazon Redshift編～複数クエリ同時実行時パフォーマンス比較（シングル）～ ■ Amazon Redshift編～複数クエリ同時実行時パフォーマンス比較（マルチ）～ ■ Amazon Redshift編～複数クエリ同時実行時パフォーマンス比較（XL vs 8XL）～ ■ Amazon Redshift編～複数クエリ同時実行時パフォーマンス比較 (まとめ)～ ■ Amazon Redshift編～パフォーマンス比較（MySQL vs Redshift）前編～ ■ Amazon Redshift編～パフォーマンス比較（MySQL vs Redshift）後編～ 今回は『Amazon Redshift編～パフォーマンスチューニング sortkey編～』
30分でわかる（かも知れない）Scala超々入門！(1/8):初心者のためのPlay Framework入門 - libro
では、Scalaのプログラムの書き方について、ごくざっと頭に入れて行きましょう。まずは、Eclipseでプロジェクトを作成しておきましょう。Scala IDEがインストールされていると、Scalaアプリケーションのプロジェクトを作ることができます。 1. 「ファイル」の「新規」内にある「新規プロジェクト...」メニューを選び、テンプレート選択のダイアログで「Scalaウィザード」というフォルダにある「Scalaプロジェクト」を選択します。 2. 続いての画面で、プロジェクト名を入力します。その他の項目はデフォルトのままでOKです。この後、ビルド設定に進みますが、これは何も設定することはないので、先に進まず、このまま「完了」ボタンを押してプロジェクトを作成してかまいません。また、終了時に、Scalaのパースペクティブに変更するか尋ねてきたら、切り替えてください。 3. プロジェクトを作ったら
Scalaメソッド定義メモ(Hishidama's Scala def Memo)
定義方法（def） [/2015-09-22] 名前渡し [/2011-07-18] 値の返し方（return） 呼び出し方法 [/2011-02-26] 名前付き引数 [2010-12-18] 特殊なメソッド名 [/2013-06-08] 関数の型 [/2011-07-17] 複数の引数リスト [2010-12-27] valでオーバーライド [2011-10-16] 暗黙の型変換 [/2011-03-05] 無効化 [2011-04-17] pimp my library [2010-12-26] implicit class [2013-06-08] 暗黙の引数 [2010-12-30] context/view bound [2011-01-04] view bound [2011-01-04]
Vagrantの仮想マシンとの紐付けの直し方 - ウチのメモ
何かの拍子でVagrantと既存の仮想マシンとの紐付けが削除されて、vagrant up実行時に新たな仮想マシンを作成してしまうことがあります。 たまによくあります。 【環境】 Windows 7 Vagrant version 1.2.7 VirtualBox 4.2.16 r86992 ご利用のVagrantのバージョンによっては設定ファイルの構成が異なります。その場合は本記事末尾のリンク先が参考になるかもしれません。 作成済み仮想マシンを起動しようとして、 $ vagrant up すると、通常は [default] VM already created. Booting if it's not already running… のように表示され、既存の仮想マシンが起動するが、 何かの拍子でVagrantと仮想マシンの紐づけが外れてしまったのか、Vagrantが新しい仮想マシンを作り
ビル・ゲイツが薦める「TEDカンファレンスに向けて読んでおくべき6冊の本」
By OnInnovation Microsoftの設立者で、現在はビル&メリンダ・ゲイツ財団の活動を行っているビル・ゲイツは毎年、その年に読んで印象に残っている書籍をリストにしてブログで公表しています。これとは別に、ゲイツがTEDカンファレンスで講演を行うにあたってまとめた「読んでおくべき6冊の本」のリストが公開されています。 6 Books I Recommended for TED 2015 | Bill Gates http://www.gatesnotes.com/About-Bill-Gates/6-Books-I-Recommended-for-TED-2015 ◆1: 人と企業はどこで間違えるのか?---成功と失敗の本質を探る「10の物語」: ジョン・ブルックス この本は、1991年にまだ出会って間もないウォーレン・バフェットから読んでおくようにと薦められたもので、それから
基礎から学ぶNode.js 記事一覧 | gihyo.jp
第7回Node.jsアプリケーションをWindow Azureで動かす 高橋俊光 2012-11-27
Express - node Webフレームワーク | 日本語ドキュメンテーション
インストール サーバーの作成 HTTPSサーバーの作成 環境設定 セッティング ルーティング ルート処理の受け渡し ミドルウェア ルート・ミドルウェア HTTPメソッド 例外処理 ルート・パラメータの事前処理 ビューの表示 ビュー・パーシャル ビュー・ルックアップ テンプレート・エンジン セッション・サポート 移行ガイド APIリファレンス - リクエスト + - レスポンス + - サーバー + Express ハイパフォーマンス、ハイクラスなWeb開発をNode.jsに。 インストール $ npm install express またはグローバルオプションを付けてインストールします。 $ npm install -g express クイックスタート expressを始めるもっとも簡単な方法は、express コマンドを利用してアプリケーションを生成することです。 アプリケーションの作
Express 4 をはじめよう - Qiita
Express 4 がリリースされたので、さっそく試してみました。 なお、コードは github に上げてみました。 https://github.com/hoshi-takanori/express-sample プロジェクト作成 Express 3.x ではプロジェクトの雛形を作成するための express コマンドが用意されていましたが、Express 4 では廃止というか、別パッケージ (express-generator) に分離されたようです。 基本的に app.js (と package.json) があればいいので、express コマンドは使わなくても大丈夫です。グローバルに express パッケージをインストールする必要もありません。 適当なディレクトリを作って app.js と package.json を作ります。 var express = require('e
Developers Summit 2015の発表資料 | Scala Tech Blog
こんにちは。DynalystのHanです。 Developers Summit 2015で私とLODEOの新田さんがプロダクト立ち上げ時の話とScalaの開発について発表しました。 多くの方がセッションに参加してくれてとてもいい機会でした。また、発表後には「Ask Speakerコーナ」でScalaの開発周りの話で盛り上がってました。 平日でセッションに参加できなかった方もいると思うので発表した資料を公開したいと思います！ 1. LODEOの開発プロセスとJavaエンジニアからScalaへ挑戦した話 2. ScalaのMonadファミリ(Option, List, Try, Future)の話
【5分でできる】MySQL/MariaDBをリバースエンジニアリングして、ER図を作成する - Qiita
この投稿は？ すでにあるMySQL/MariaDBから、ER図を作成するまでの説明です。 自分用メモでもあるので、文字ばかりです。 とても簡単なので、問題ないはず。 わからなければコメントください。 何を使うの？ MySQL Workbenchを使います。 http://www-jp.mysql.com/products/workbench/ ダウンロードしてインストールしちゃってください。 ダウンロードページに進むと、いつもどおり(？)「OracleのWeb Account作りなよ！」といわれますが、 スルーしたい場合は Login / Sign Up ボタンの下にある No thanks, just start my download. リンクを押下して、ファイルをダウンロードすることもできます。 ER図を作ってみよう MySQL Workbenchを起動し、上部メニューから下記を選択
1日1億超のトラフィックをさばく広告配信システム「AdStir」を支える技術とエンジニアの実態を探る
そんな中、モーションビートが提供する「AdStir」（アドステア）は、特にスマートフォン向けに特化した広告配信サービスとして注目を集めているものの一つである。AdStirは、アドサーバ機能、複数のアドネットワークを一元管理して広告配信の最適化を行うイールドオプティマイゼーション（SSP）機能を持ち、近年特に関心が高いリアルタイム入札（RTB）にも対応したサービスとなっている。 スマートフォンユーザーの急激な増加に伴う多様な広告配信ニーズの増大により、その基盤となるシステムに対しては高い信頼性と可用性、そして高速性が求められている。AdStirでは、どのような技術と体制によって、その要求に応えているのだろうか。モーションビート、メディアプラットフォーム事業部でAdStirの開発に携わる、メディアプラットフォーム事業部の落合省治氏とfukata氏に話を聞いた。 LVSをベースにnginxとLu
VOYAGE GROUP エンジニアブログ : 知らなきゃ損するVOYAGE GROUPエンジニアが薦めるブログ、ウェブサイト
2015年01月30日16:41 カテゴリ 知らなきゃ損するVOYAGE GROUPエンジニアが薦めるブログ、ウェブサイト こんにちは、ECナビでアプリケーションエンジニアとして働いている@araiguma47です。 つい先日今年が始まったと思ったらもう１か月経ってしまいました。 年々時間が過ぎるのが早くなっている気がします。 VOYAGE GROUPエンジニアが普段見ているブログやウェブサイトをヒアリングしたところ、技術に関することから普段愛用しているサイトまで色々集まりました。◇技術系ブログ、まとめサイト ブログ・サイトコメント推薦者イイネ！ 徳丸浩の日記ITエンジニア必見のセキュリティに関することが書かれているブログ@araiguma47koheisg SICP暇になったらみて問題といてる@suzu_vjewel Rebuild結構更新多くて全部聞けないけどシニアエンジニアの意見が聞
webディレクターだけど、初心者に役立つサイト教える : ライフハックちゃんねる弐式
2015年02月07日 webディレクターだけど、初心者に役立つサイト教える Tweet 35コメント ｜2015年02月07日 10:45｜サイトまとめ｜Web・テクノロジー｜Editタグ ：web制作 1 ：以下、＼(^o^)／でVIPがお送りします：2015/02/06(金) 17:41:24.70 ID:flJZIImcH.net 最近クソみたいなデザインとグッチャグチャのソースコード書いてる ミーハー丸出しアフィサイトが増えてきて鬱陶しいから、 これからサイト作る初心者用にサイトを紹介していく これ以上俺のウェブサーフィンライフを邪魔すんじゃねえぞ 当ブログサイトはアフィリエイト広告、バナー広告を利用しています。 2 ：以下、＼(^o^)／でVIPがお送りします：2015/02/06(金) 17:42:31.08 ID:flJZIImcH.net まずはドットインストール htt
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
いぬごやねっと
TechCrunch | Startup and Technology News
