急増するLINEインフラの課題と対応 « LINE Engineers' Blog
こんにちは。今回はITサービスセンターより、インフラ運営の観点から急増するLINEインフラの課題と対応について記させていただきます。 はじめに 先日開催したLINE Developer Conference（インフラ編）には大勢の方にいらしていただきました。カンファレンスでは、LINEサービスが始まってから約2年の間に我々はどういった方法でインフラ運営を行い、またどんなことに悩んできたのかを、システム、データベース、ネットワークの観点からそれぞれ発表させていただきました。 カンファレンスはLINE株式会社が様々な技術をどのように使い、どのように運用を行っているのか。現在どのような技術的なことに取り組んでいるのか日本のエンジニアの皆さんに知っていただくために開催されました。結果としてインフラ編では150名の定員に対して430名のご応募をいただいたとのことでLINEサービスに対する関心の高さを
qpstudy 2014.04 インフラエンジニアとは、なんだ
インフラエンジニアというものを、次の側面で理解する - レイヤー - スキル - フェーズRead less
LINE Developer Conferenceに行ってきた - kuenishi's blog
ふとしたことから LINE Developer Conference の存在を知り、その中の「高可用データベース」という文字列をみて高可用データベースを作っている身としては黙っていられないので行ってきた。喉がかわいたので水をもらえてよかった。 ひとつめのセッションはLINEのシステム運用。インフラは基本に忠実に、無駄に安いハードウェア買って困るくらいならそこそこの値段でいいヤツ買います、ソフトウェアも同様、必要なところでは VMware vSphereやOracleを使いますといった感じだった。やはりメッセージングなのでバーストトラフィックがあるらしく、それのせいでスイッチのパケットバッファが普通に溢れてパケ落ちが発生するらしい。ふつうのTCP/IPならその後の再送はランダムに時間置いて飛ぶはずだからそんなに溢れないと思ってたんだけど、TCP周りの設定をいじったらなんとかなりそうな気もする
LINE Developer Conference(テーマ：インフラ)にいってきたメモ - 目の前に僕らの道がある
昨日(2014/04/15)にLINE Developer Conferenceに参加してきました。 寝かすと、永久に書かない気がしたので、消化し切れてないけど、メモ書きだけ残しておきます。 LINE Developer Conference 開催のお知らせ http://line-hr.jp/archives/37147547.html 今まで、LINEのインフラ回りがどうなっているのかってあまり情報を見たことなかったので、興味深く聞けて面白かったです。 普段関わっているサービスとは全然規模が違い、世界展開するサービスならではの話などとても面白かったです。ネットワーク回りで、昔ちょろっと触っていたMPLSの単語が出てきて懐かしかった。 いろいろ話を聞いていて、LINE社は面白そうな技術を使っていてるので、こういう会社で働けるとすごい楽しそうですね。 こういう機会がまたあったら是非参加した
参加レポート: LINE Developer Conference (Infra Day) | DevelopersIO
はじめに 4/15(火)に開催されました、LINE Developer Conferenceに参加してきました！ 本イベントはメッセンジャーアプリでお馴染みのLINE株式会社さんが、そのバッググラウンドで行われている技術的取り組みや運用の工夫についてお話頂けるというものです。私が参加した4/15(火)のインフラをテーマにした回と、4/17(木)のプラットフォームをテーマにした日の、2日間に渡って開催されます。 本イベントは参加枠はそれぞれの日毎に150人・合計300人だったのですが、何とインフラ回だけで460名の応募があったとのこと。二日間合わせた全体では800名強の応募があったそうです。それだけ注目度が高い企業であるということですね。 会場は渋谷ヒカリエにあるLINE株式会社さんのカフェスペース。普段はカフェとして使われているとても広いスペースをセミナー会場として使われていました。LIN
BUSTERWORKS 今すぐフォローすべきITインフラ界のスーパーエンジニア
01 // 1.2.3.4.5.6.7.8.9.10.11.12.13.14.15.16.17.18.19.20.21.22.23.24.25.26.27.28.29. // 03 最近「今すぐフォローすべき○○なエンジニア」というブログエントリが増えています。 しかしながら、まだ「ITインフラ」にフォーカスしたエントリは無いようです。 （クラウド関係はありましたが） というわけで「今すぐフォローすべきITインフラ界のスーパーエンジニア」を 半ば悪ノリで作ってみました。 （僕がフォローしている方から選出したので結構狭いかもしれません＞＜） FUJISAKI Masanoriさん（@fujisaki_hb） ばばとしあきさん(@toshiak_netmark) MSP事業を行っていて、hbstudyというITインフラ勉強会もやっているハートビーツさんの中の人。 小室文さん(@ayakomur
フラッシュメモリがITインフラを大きく変えていく。使いこなすためにアプリからインフラまで見渡せる人材を。ガートナージャパン
フラッシュメモリがITインフラを大きく変えていく。使いこなすためにアプリからインフラまで見渡せる人材を。ガートナージャパン いまから3年後の2016年には、企業システム向けSSDの平均記憶容量は1テラバイトを超え、2012年からの5年間でメモリデバイスの容量単価は5分の1になる。 4月24日から今日まで開催中のガートナージャパン「ITインフラストラクチャ＆データセンターサミット2013」、初日のセッション「メモリの技術革新がもたらすITインフラとストレージの進化」では、リサーチ ディレクター 鈴木雅喜が、フラッシュメモリによるITインフラの大きな変化がこれから起きるとして、その変化にいまから備えるべきだと訴えました。 その大きな変化を引き起こす要素こそ、冒頭に記したフラッシュメモリを用いたストレージ容量の増大と単価の下落。特にSSDで1テラバイトを超えると多くの企業で業務用のデータベースが
ウェブサーバのチューニングについて考えてみた - カイワレの大冒険 Third
前回（http://d.hatena.ne.jp/masudaK/20101111/1289468376）の記事で書いたように、apacheのチューニングって分かったようで分からない。 ただし、過去の経験から言って、多分そーだろーなーと現段階で思えるのは、 無闇にプロセス数が変わるようなことはしない ピーク時に、プロセスを作ったり殺すことは厳禁 最初からフル稼働でよいじゃない ということだと思っている。んで、それに合わせた設定が、 StartServers 100 MinSpareServers 100 MaxSpareServers 100 MaxClients 100 MaxRequestsPerChild 500 というような設定であるとも述べた。んじゃ、どうしてそうなのか、具体的にどの値（ここでは100）にしたらいいのかということを書いてみようかなーと思う。 んで、内容を書くわけで
今春サーバを触っていくのにびくびくしてる人が1週間ですべき7のこと - カイワレの大冒険 Third
今春“プロ”グラマーになる人が、あと1週間ですべき7のこと | Act as Professionalや2011-03-27といったエントリがあって、自分でも書いてみたかったので書いてみる。 時間はない。されど必要最低限のことは押さえられるはず 今春入社する人でエンジニア職などに就くことが決まっているんだけど、サーバ触れることになってびくびくしてる人もいるかもしれない。 覚えられることも時間も限られているけど、これだけは覚えて欲しいってものがあるので、あくまで主観的な判断で抜粋してみる。 1. 何よりもまずログイン DCにあるサーバでも、クラウドでも、まずログインできなきゃ始まらない。ただ、使うマシンもWindowsなのかMacなのか分からないので、まずそこを押さえる。 Windowsなら「putty」や「TeraTerm」があるし、Macだったらデフォルトで「ターミナル」を立ち上げればよ
久々にはてな本読んだけど、やっぱり勉強になった件（恣意的抜粋編） - カイワレの大冒険 Third
色々ディスクのパフォーマンスを見たり、トラブルシューティングしてたりすると、ディスクやメモリの理解ってのが割と大事だったりします。久々にはてな本読みたいなーと思って、読んでいたらその辺のことについて色々タメになることが書いてあったので、ちょっと一部だけ「恣意的」に「恣意的」に抜粋して紹介したいと思います。 [Web開発者のための]大規模サービス技術入門 ―データ構造、メモリ、OS、DB、サーバ/インフラ (WEB+DB PRESS plusシリーズ) 作者: 伊藤直也,田中慎司出版社/メーカー: 技術評論社発売日: 2010/07/07メディア: 単行本（ソフトカバー）購入: 80人 クリック: 1,849回この商品を含むブログ (133件) を見る ただ、絶対手元に置いておいたほうがよいですよ、はてな本！！ （はてな本っていう言い方深い意味はありません！言いやすかったんで使ってみただけで
2013年の新卒研修と社内ISUCONやりました - (2) ISUCON死闘編 - KAYAC engineers' blog
技術部新卒研修担当の fujiwara です。 前回の記事「2013年の新卒研修と社内ISUCONやりました - (1) 研修編」に引き続き、新卒研修の最後を飾るイベント、社内ISUCONについて詳しく振り返ります。 社内ISUCONとは レギュレーションはこちらです。 各チーム1台ずつ使用できる仮想マシン上で、お題のアプリケーションを動作させる 外部からベンチマークを行って処理できたリクエスト数をスコアとする アプリケーション、OS、ミドルウェアなど、どのようなチューニングを行ってもよい ベンチマークスクリプトはデータの整合性をチェックするロジックが組み込まれており、アプリケーションとして不整合を起こしていることを検出するとFAIL(スコアなし) 10:00〜17:00 までの作業中には適宜ベンチマークを実行できる 作業終了後の最終計測でのスコアが高いものが優勝 (FAILしたら失格。1
2013年の新卒研修と社内ISUCONやりました - (1) 研修編 - KAYAC engineers' blog
4月になり、新人が入ってくる季節になりました。技術部新卒研修担当の fujiwara です。 これまで弊社技術部では特に技術部としての研修というものを行っていなかったのですが、今年は何かやりたいねということで人事部に7日間確保してもらい、主に acidlemon と2人で新卒8人に研修をすることになりました。 研修の資料などは GitHub でプライベートリポジトリを作って作業しており、それをまとめたものを GitHub上で kayac/newbie-training として公開しています。 どのような内容にするかは事前に昨年度の新卒を含めたエンジニア陣で(社内勉強会でビールを飲みながら)話し合い、 現場で実務に追われてしまうと身につきにくい基礎的な内容 コードを書ける人は多いけどLinuxサーバの操作は不慣れな人が多いので、そのあたりを底上げする内容 をメインに構成してみました。また、7
DevOps とは何か 何であるべきか
http://togetter.com/li/445424?page=2 の 2013-01-26 15:13 ぐらいから15:38 ぐらいまでの tweet も合わせてご参照ください。
#qpstudy に参加したよ
あれは昨日のことでした。 qpstudy 「DevOpsをぶち壊せ(仮) ～DevOps言うな(仮)～」 に参加してきました。 devops関連のパネルディスカッションということでしたが登壇者が豪華。 パネル自体もあれだけど、登壇者の方と懇親会で話したくて参加してきました。 ただの参加者なのでとても気楽。ビールもたくさん飲みました。 devopsと直接関係はないけどtwitterや懇親会や二次会で大盛り上がりしたのが教育について。 ある一定ライン以上の自動化とかしようとすると数学(確率統計とか待ち行列理論とか)と計算機科学は本当に本当に大事なのでちゃんと修めておけばよかった。 単位はとったけど忘れてる。あのときに知識が残っていたらこんなに伸び悩まないのにな…(泣 懇親会ではmizzyさんkenjiskywalkerさんysaotomeさんはじめいろいろとたくさん話せて満足。 懇親会でも少し
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
qpstudy 2014.04 ハードウェア設計の勘所
20140419【qpstudy】OSとNW設計の勘所
Qpstudy201404 インフラ設計の勘所
http://m.jp.techcrunch.com/2013/05/07/201305056-experts-on-speeding-up-data/?icid=techcrunch__art
バックアップの運用について勉強したことのまとめ - 感謝のプログラミング
「秒速で1億PV稼ぐ条件」をエンジニアに聞いてみた