Announcing Suro
To make the best business and technical decisions, it is critical for Netflix to reliably collect application specific data in a timely fashion. At Netflix we deploy a fairly large number of AWS EC2 instances that host our web services and applications. They collectively emit more than 1.5 million events per second during peak hours, or around 80 billion events per day. The events could be log mes
法令データ提供システムのデータをgithubに上げてみた話 - As a Futurist...
この記事はCivic Tech Advent Calendar 2013の一つになります。 Civic Tech（シビックテック） とは何か …市民がテクノロジーを活用して公共サービスなどの地域課題解決を行うことを指しています。…これまで行政だけではサポートできなかった分野でのサービスを行ったり、市民自身がより深く行政のプロセスに参加したり、公共分野でのイノベーションを起こすことができるのではないかと、欧米などで盛り上がりを見せている分野です。 civictech – 地域課題解決の新しい形、Civic Tech と Code for Japan – Qiita 僕自身、特に Civic Tech に対して何か志や熱意があるわけでは今のところ無いですが、別件で API とデータについてふと考えてた時に、日本国の法令データも更新が頻繁じゃないんだから普通に全部ダウンロードできた方がいいよなぁ
エンジニアの心の闇を祓うマサカリ療法 - seri::diary
この記事は闇 Advent Calendar 2013の４日目です。 @seri_k 闇Advent Calendar書きましょう— ıɯǝɥɔʇoɥ (@hotchemi) 2013, 12月 2 心の闇なんてのは大体エンジニアに限らず社会人なら少なからずだれでも貯めこんでしまうものだと思う。どうすれば解決できるかなんて分からない。 ４日目の記事では、過去の自分が経験した心の闇の話と、それを祓う方法についてそれとなく書いてみる。 今いる会社のエンジニアは割りと生き生き働いている方だと思うけれど、それでもやはりどこか、斜に構えた考え方や、何かについての強いトラウマみたいなものを会話の中から垣間見ることがある。若いころに辛いデスマを経験した話だったり、顧客が会社に怒りに燃えて乗り込んできた話だったり、特定のミドルウェアのバグで大変な目にあったり、会社や顧客に理不尽な要求をされて喧嘩したり、と
TCP Fast Open – Webを速くするためにGoogleがやっていること Make the Web Faster 4 –
TCP Fast Open – Webを速くするためにGoogleがやっていること Make the Web Faster 4 – Jxck HTTPは、その下層にあたるトランスポートレイヤーのプロトコルとして、通常TCPを使用します。 したがって、TCPのレイヤで速度が改善することは、そのままWebの高速化につながる可能性があるといえます。 GoogleはWebを速くするための活動として、TCPのようなプロトコルレイヤの改善にも取り組んでいます。 今回はその中の一つ、TCP Fast Openを取り上げ、解説と動作検証、簡単なベンチマークを行います。 検証環境等は最下部に記載します. Make the Web Faster: TCP Fast Open 3 Way Handshake TCPは、「正確、確実にデータを届ける」ことを重視した設計になっています。 特に接続確立時には、双方の状
先の見えるエンジニア人生を歩みたくなかった｜モイ！ツイキャス・赤松洋介のキャリアレポート［後編］ | キャリアハック（CAREER HACK）
ツイキャス開発者・赤松洋介氏へのインタビュー第2弾。大企業から研究職、スタートアップ企業の成長期、そしてエンジニアとしての起業というキャリアを歩んできた彼は、一体どんな考えのもと自身のキャリア選択を行なってきたのだろうか？エンジニアのひとつのキャリアモデルを探った。 ▼モイ株式会社・代表の赤松洋介氏へのインタビュー第1弾 ユーザーの行動をコードに変えて｜モイ！ツイキャス・赤松洋介に学ぶヒットサービスの要件［前編］ 赤松洋介氏のキャリアにみるエンジニアの可能性 400万人以上のユーザーを抱えるまでに急成長しているライブストリーミング配信サービス《ツイキャス》を生み出したのが、モイ株式会社・代表の赤松洋介氏だ。 これまで数多くのWEBサービス・ソフトウェアを輩出してきた赤松氏へのインタビュー第2弾として、彼のキャリアにフォーカスを当ててみたい。 まずは経歴を簡単に振り返っておこう。京都大学大学
「上野東京ライン」再来年３月に開業 NHKニュース
現在、上野が終着駅のＪＲ東北線と常磐線を東京駅と結び、東海道線と直結させる「東北縦貫線」は「上野東京ライン」として、再来年３月に開業することになりました。 東北縦貫線は、上野・東京間のおよそ４キロを結ぶ路線で、同じ区間を走るＪＲ山手線の混雑緩和につながるなどとして、５年前から建設が進められてきました。 ＪＲ東日本は、この路線について、再来年３月から開業させることを決めました。 また、この区間を走る列車を「上野東京ライン」と呼んで、東北線や常磐線と東海道線の間で直通運転を始める予定です。 この路線は都心に計画されたため、新たな土地が確保できず、一部の区間は新幹線の高架橋の上に、さらに高架橋を造ってレールを敷く初めての方法が取られました。 一方で、東北地方などからの列車の終着駅として親しまれてきたＪＲ上野駅は東北縦貫線の開業で、上野止まりの列車が今より減ることになります。
yrmcds 1.0.0 をリリースしました - Cybozu Inside Out | サイボウズエンジニアのブログ
@ymmt2005 こと山本泰宇です。去る 7 月に yrmcds という memcached 互換な KVS を公開したことをご案内しました。それから 5 ヶ月経ちましたが、今回は安定版となるバージョン 1.0.0 をリリースをご案内します。 ダウンロードはこちらからどうぞ: https://github.com/cybozu/yrmcds/releases/tag/v1.0.0 0.9.0 からの変更点を短くまとめるとバグがなくなって、memcached より多分高速になっています。ちょっと長めの記事ですが、末尾にいいことが書いてありますので、是非ご一読ください。 yrmcds の特長 レプリケーション サーバーサイドロック No slabs その他 memcached との差異 運用実績と性能 クライアント 0.9.0 からの変更一覧 バグ報告を募集します！ yrmcds の特長 y
Go の Test に対する考え方 - Qiita
Go の Test に対する考え方 この記事は Go Advent Calendar 2013 の 9 日目の投稿です。 今回は、 Go の testing というパッケージの使い方を解説しようと思ったのですが、 それだとつまらなすぎるので、合わせて Go が test というか assert についてどういうスタンスをとっているかを書いてみます。 Go でテスト さて、「テストのないコードはレガシーコード」などと言われて久しく、様々な言語が test (主に Unittest) について言語レベルでサポートしたり、デファクトなライブラリが確立したりといった状況が、今日では至って普通のこととなっています。 そんな言語や環境で、息をするようにテストを書いてきたみなさんが、はじめて Go でコードを書く時に見るべきは testing パッケージです。 http://golang.org/pkg
仕事と育児に奮闘--ヤフーの29歳“イクメン”エンジニア須山さん
「大企業の若手社員」と聞くと、どのようなイメージを持つでしょうか。少数精鋭の中小企業と比べると、あまり責任のある仕事を任せてもらえないという印象を持つ人もいるかもしれません。しかし、数千人、数万人規模の大企業にも、世の中を変えるようなサービスやプロジェクトを任されている若手社員はたくさんいます。 この連載では、現在28歳の筆者が、同じく20代で活躍する大企業の若手社員と、同世代ならではの共通点や仕事への思い、さらには休日の過ごし方や好みの本など幅広いテーマについて語り合うことで、大企業や若手ビジネスパーソンの実態を明らかにしていきます。 第1回は、ヤフー CMO室の須山温人さん。2008年にヤフーに新卒入社した現在29歳のエンジニアです。入社以来、動画やスマートフォン向けの広告開発などを担当。2012年4月のヤフー新体制と同時に新設されたCMO室に移り、2013年2月には自ら企画・開発に携
Surfly – The Next Wave in Collaborative & Compliant Online Interactions
Transform your application into a collaboration-enabled platform instantly with our plug-and-play solution, and for additional customization tap into our full suite of APIs, no code or installation required. Enable fully branded and whitelabelled journeys, and pick and choose among our extensive list of features and settings to create custom journeys unique to your business needs. And for even mor
その子はなぜ大人の言うことを聞かないのか？ - デマこい！
保育園のころ、魔法を使える先生がいた。 その人のことを、ここでは「まこ先生」としよう。30代前半で、職場では中堅のスタッフとして活躍していた。もちろん当時の私はあまりにも幼く、先生たちの年齢をきちんと把握していたわけではない。「若い先生／大人な先生／おばあちゃん先生」……それくらいザックリした認識しかできなかった。子供ながらに「まこ先生は頼りがいのある大人の先生だ」と思っていた。 まこ先生は、私が5歳のときの担任だ。 私が通っていたのは公立の保育園だ。高所得家庭の子供だけが集まる(？)私立保育園ならいざ知らず、様々な境遇の親たちが子供を預けていた。 とくに私の学年には、近隣の悪ガキどもが集結していた。暴れる、噛み付く、ひっかくのは当たり前。おもちゃはすぐに壊され、床や壁は汚される。みごとに手のかかる子供ばかりだった。すり傷やたんこぶは日常茶飯事だったし、親たちもいちいち目くじらを立てなかっ
「現代」を知るためにこれだけは読んどけっていうWikipediaの記事 - デマこい！
日本で最初の神前結婚式は、明治33年（1900年）に東京大神宮で行われた。神道は日本古来の伝統的なものだと考えられがちだが、組織宗教として体系化されたのは明治以降だ。現代の私たちにとって当たり前の常識や習慣は、ほんの少し昔まで常識でも習慣でもなかった。 「現代」を理解するためには、過去を知ることが欠かせない。 病気にならなければ健康の大切さが分からないように、過去と照らし合わさなければ現代がどのような時代か分からない。現代を理解するための過去の知識のことを、教養という。 教養を身につけるには、相応の本を読むのがいちばんだ。が、いまの私たちは膨大な文献を読めるほどヒマではない。そこで威力を発揮するのがWikipediaだ。たしかにWikipediaの情報は正しいとは限らないし、どんなに読み込んでも「つまみ食い」程度の知識しか身に付かない。しかし、聞きかじりの知識であっても、何も知らないよりは
オープンリゾルバ根絶に向けての取り組み | IIJの技術 | インターネットイニシアティブ（IIJ）
このコラムはIIJのエンジニアが綴る「最新の技術動向」です。そのはずです。しかし、今回は最新技術の話は全くありません。過去のしがらみをずっと引きずってきた結果、今になってIIJがどんなツケを払わされているのか、そしてその過去をどうやって清算しようとしているのか。カッコイイ話ではありません。むしろ、「なぜ今までそんなことをやっていたんだ」と批判されることを覚悟の上でのカッコワルイ話です。 今回のコラムはIIJエンジニアによるブログ「てくろぐ」と連動しています。 ぜひこちらの記事もあわせてお読みください。 てくろぐ 「昔IIJを使っていた人」にお願いです － オープンリゾルバ対策 オープンリゾルバとは 今年に入ってから、各所よりオープンリゾルバの危険性について注意喚起するアナウンスが相次いでいます。 DNSサーバーの不適切な設定「オープンリゾルバー」について（JPRS） オープンリゾルバ（Op
「昔IIJを使っていた人」にお願いです – オープンリゾルバ対策
2013年12月2日12:00に変更実施します 対象DNSサーバのIPアドレス 210.130.0.1 210.130.1.1 210.130.232.1 202.232.2.38 202.232.2.39 IIJmioのおしらせ IIJ4Uのおしらせ (202.232.2.38, 39は法人向けに提供しているサーバのため、mio/4Uのお知らせに含まれていませんが、同時に実施します。) 今回のてくろぐは、皆さんへのお願いのために書いています。特に読んで頂きたいのは「以前IIJのサービスをご利用頂いていたが、何らかの事情で今は利用していない方」です。 と、言うのも、今回お知らせする件は、「現在もIIJをご利用頂いている方」にはあまり影響がなく、「今は利用していない方」の中の一部の方に影響が出る可能性があるためです。現在もIIJをご利用中のお客様へは、サポートセンターや担当営業からご案内を差
Joel on Software - ゲリラ的雇用面接のすすめ
Joel Spolsky ジョエル・スポルスキ 翻訳: 松村 弘典 2000-03-23 Fog Creek Softwareでは適切にスタッフを採用する事が必須である。我々の業界では対象となる人々を３つのタイプに分類する事が出来る。一方には 未洗のイモ とでも呼ぶべき、この業種に従事するのに基本的なスキルさえも持ち合わせていない集団がいる。これらの人たちは履歴書を注意深く確認して２，３の簡単な質問をする事で比較的容易に除外する事が出来る。対極には スーパースター と呼ばれる、パーム上で動くLispコンパイラを週末の暇つぶしにアセンブリ言語で書いてしまうような人たちがいる。これらの中間にあたるのが大多数の「応募者」で、何かしらやってくれるのではないかと思わせる人たちである。ここで紹介する幾つかのトリックはこれら一般的な応募者とスーパースターとの違いを見極めるためのものであり、Fog Cre
Announcing Zeno — Netflix’s In-Memory Data Distribution Framework
by Drew Koszewnik Netflix’s Video Metadata Service (VMS) is the platform that supplies all of the data about our movies and TV shows necessary to drive the Netflix experience. This data ranges from video titles and synopses to the resolutions and bitrates of streams for playback. In previous blog posts, we revealed how we manage this large volume of data efficiently for our high availability appli
なるべく書かないawkの使い方 - ザリガニが見ていた...。
awkという、古くからのスクリプト言語がある。（1977年生まれ。読み方は「オーク」である。エイ・ダブリュ・ケイではない）man awkをPDFに変換してみると、たったの3ページ強しかない。 $ man -t awk|pstopdf -i -o ~/Downloads/awk.pdf とてもシンプルな言語仕様ではあるが、awkには必要十分な表現力がある。特にテキストを処理する場面においては、最小限のシンプルな記述で、気の利いた処理を素早くこなす。無駄のないawkワンライナーを見ると、ある種の感動を覚える。awk以降に生まれたスクリプト言語は、少なからずawkの影響を受けていると思われる。 awkを知ることで、間違いなく幸福度は上がると思う。いつかきっと「知ってて良かった」と思える時が来るはず。もっともっと、awkを知りたくなってきた。 基本動作 awkの基本動作は、とってもシンプルである。
Monitorama
Thank you to everyone who joined us in Baltimore for our Fall 2019 show. We had a wonderful time hearing about the newest software and methodologies in Monitoring & Observability. Keep an eye out for dates and announcements for future events! We had an amazing time visiting the beautiful city of Amsterdam and meeting so many wonderful people! It truly was an event to remember. Click through to lea
Chef: The Company Formerly Known as Opscode - Chef Blog | Chef
This morning we announced we’ve changed the company name from Opscode to Chef. Aaaaaaand… the Earth is still spinning. As we circulated the idea of changing our company name amongst employees and some members of the Chef Community (and some total strangers, too) the reactions generally fell into one of four categories: Awesome, makes sense. It’s about time. So what? Um, what’s Opscode? So, Opscode
Treasure Dataが新サービス発表。バッチ型クエリと比較して10倍から50倍高速な「Treasure Query Accelerator」とデータ可視化ツール「Treasure Viewer」
クラウド上で大規模データの保存し、分析、レポーティングのサービスを提供しているTreasure Dataは9日、大規模データに対してアドホッククエリを発行する機能と、同社として初めてとなるデータ可視化ツールなどの新サービスを発表しました。 Treasure DataのCTO 太田一樹氏は、同社が100社以上の顧客から預かっているデータが2兆5000億件に達していることを明らかにしたうえで、顧客のデータ活用が定型レポートから始まり、徐々にアドホッククエリなどによってデータをドリルダウンし、いま何が起きているのか分析を行う方向へと進化していくと指摘。「お客様の進化に合わせて新サービスを投入する」と発言。 Treasure Query AcceleratorとTreasure Viewer発表 1つ目の新サービスは、アドホックなデータ解析向けのクエリエンジン「Treasure Query Acc
ネイティブ発想という英語の難しさ: 極東ブログ
先日、応用言語学者でまた独自の語学教育法を開発したポール・ピンズラーとその著書「外国語の学習法」の話をしたが（参照）、その中で、米人はフランス語の発音を奇妙に思う、ということに加えて、その文法も奇妙に思うらしいといった話があった。 米人にはフランス語は、いろいろひっかかる点があるらしい。例えば、目的語の扱いもある。"Je les lui ai lus."みたいな構文である。 確かに、なぜフランス語がこうなるのかは気になる。基本、フランス語というのはラテン語が崩れて出来たようなロマンス語なのだから、ラテン語にそうした根があるのかというと、自分が知る限りでは、冠詞の問題と同じように、そうでもない。まあ、それはさておき。 米人にとって英語はシンプルであっても、他言語の国民からすると、英語もけっこう難しい。しかも英語の難しさは、その表層面からはわからないところがある。どうしてこうなっているのだろう
ある大学で起きた研究不正についての実例 - warbler’s diary
ここで紹介する実例は、 第36回日本分子生物学会で開催された 理事会企画フォーラム「研究公正性の確保のために今何をすべきか？」 http://www.aeplan.co.jp/mbsj2013/mbsj_forum.html の、第１セッションと第５セッションで話題提供させて頂いたもので、その時の原稿をUPします。 私はサイエンスライターとして研究不正の調査をしており、このケースもその過程で知りました。最初にお断りしておきますが、私はフリーのライターとして独立して活動しており、大学や企業には所属しておらず、分子生物学会の会員でもありません。こうした利害関係のない立場からこの企画に協力しました。 ある論文不正事件の関係者を匿名でAさんとしてお話します。 Aさんからは、「私は不正の当事者でもありますので、特定の個人や機関に対する批判や断罪などできる立場ではありませんが、自分の経験が皆様のお役に
langsam : 大学院生活を全うできそうなので、淡々と振り返ってみる - livedoor Blog（ブログ）
Bruce Alberts Alexander Johnson Peter Walter Julian Lewis Martin Raff Keith Roberts Garland Publishing Inc 売り上げランキング: 766 以来、今日までバイオ一筋で生きてきた人間です。そういう意味では世間一般の社会人よりも視野が狭い人間なのかもしれません・・・。 それから経済的な問題については後述しますが、博士課程まで進学できたのは幸いにも自宅が大学へ直接通える範囲にあったというのも大きな一因だと思っています。博士課程前半の苦しかった時期、親がいてくれたからこそ乗り越えられたと思うし、すねをかじっていたあの時期を考えると、本当に両親には頭が上がりませんorz 2. 大学院生活のライフスタイル 先日、増田にあがった以下のエントリーが注目を集めていました。 → たとえ死んだとしても生命科学
Taxman の紹介 - Qiita
こんにちは。Webエンジニアの神保と申します。 この記事では、Open Knowldge Foundation のプロジェクトの一つである OpenSpending が開発している Taxman という API について紹介します。 Taxman とは Taxman は、世界中の国や地域の税金が計算できることを目指して開発が進められている、シンプルな RESTful API です。（Taxman という名前は、ビートルズの曲名に由来しているようです。） まだプロトタイプのレベルですが、http://taxman.openspending.org でいくつかの地域のものがすでに稼働しています。対応しているエリアのリストは、何もパラメータをつけずにリクエストを投げると JSON形式で取得できます。 $ curl -s "http://taxman.openspending.org" | jq
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ユメノコトバ – hkmurakami's Japanese blog
President Obama calls on every American to learn code - YouTube
https://jp.techcrunch.com/2013/12/09/20131207a-few-basic-science-and-tech-facts-many-americans-dont-know/