はじめに Spark SQLに触ってみたので手順などをまとめました。Spark SQLというのは Apache Hiveのようにクエリ実行することで分散処理ができるものです。Hiveとの違いはインメモリであるために高速に処理できることとクエリ言語にSQLが使えることです。10分位で試せると思いますのでSparkやEMRに触ったことがない方はぜひやってみてください。 1.EC2のキーペアを用意する EC2インスタンスにSSHで接続するのでキーペアがない場合は作成する必要があります。以下のAWSのサイトを見て作ってください。 キーペアがすでにある方はスキップしてもらって結構です。 Amazon EC2 のキーペア - Amazon Elastic Compute Cloud 2.サンプルのファイルを用意する 今回は私が趣味でやっているポケモンGOで捕まえたポケモンの名前、CP、タイプ情報が入っ

技術本部 Advanced Dev.Center（略してADC）の大倉です。 私達は、Make Your Goals Come True. Easier + Faster. 、をコンセプトに1600人規模の開発環境の改善や統一化を行ってます。 この記事は、CircleCI Enterprise管理者を対象としております。今後、導入を予定されている管理者の方にとって、少しでも有益な情報になればと思います。 CircleCI kim様、kevin様、いつも迅速なサポートありがとうございます。とても感謝しております。 CircleCI kim, kevin Thank you very much always for your cooperation ! なぜ、オンプレ化したか当初のEnterprise版は.com版と同じようにクラウドサービスとして展開されていましたが、2016年にCircle

株式会社トクバイの根岸です。みなさん、SSSランキングの調子はどうでしょうか。僕は今朝家を出たときには766位でした。一睡もしてません。 さて、今回もブラウザ拡張を作ったよという話です。"外部サイト向けバナー・リンク"という、我々の管理下にないウェブサイトに設置するウィジェットなどの管理・改修をどのように行っているのかについて書きました。 外部サイト向けバナー・リンクについて トクバイが運営しているクックパッド特売情報は、今日のチラシが見られる、お買い物をするひとたちのためのサイトです。閲覧できるチラシ情報自体は、基本的にはスーパーの店員さんによって管理がされています。 では店員さんがなぜチラシをアップロードするのかというと、単純な観点でものを言えば、販促のためです。 それでは、なぜ、販促ができるのかというと、様々な認知・再訪チャネルがクックパッド特売情報には存在し、お買い物をするひとたち

新しい言語やフレームワークを学ぶことは、時には苦闘になることがあります。従来のアプローチは、概念を説明し簡単な例を提供するドキュメントを読むことです。それで十分な場合もありますが、ドキュメントに高度な例や実際のプロジェクトでの使い方が書かれていない場合も多々あります。 ドキュメントに記載されていない問題に出くわすと、大抵の人はStack Overflowで解決策を探します（またはソースコードを丹念に調べます）。しかし、「使っているフレームワークが登場してから十分に期間が経っておらず、思い浮かぶ質問全てにStack Overflowが答えてくれない」ということもありえます。 今まで問題にはまって、こう考えたことはありませんか？ 「誰かが既にこの問題を解決しているはずだ！では、なぜこの問題に対する答えがStack Overflowにないのだろうか？」 そのとおりです。恐らく誰かは既にそれを解決

シャープは9月28日、プログラマブル関数電卓／関数電卓「ピタゴラス」シリーズに新モデル「EL-5160T」、「EL-520T」、「EL-509T」を発表。10月21日に発売する。 プログラマブル関数電卓「EL-5160T」と、関数電卓「EL-520T」、「EL-509T」の3機種で、EL-509Tにはホワイト／ブルー／レッドのカラーバリエーションも用意。主な新機能として、これまで英語表示であったモード切り替えや設定画面を日本語化し、各種機能や項目がわかりやすくなったほか、液晶表示部にアクリルパネルを採用、見やすく堅牢性能が向上した。 計算機能では、従来から搭載している統計計算や微分・積分計算に加え、「四分位数」、「商・余り計算」、「素因数分解」、「整数化計算」などの役立つ機能も新たに搭載し、大幅な機能強化を図った。表示はいずれも96×32ドット、サイズは約幅80×奥行き166×厚み15mm

DDoS攻撃の“歴史”を振りながら、有効なDDoS攻撃対策について考える本連載。最終回となる第6回では、連載開始以降に起きたDDoS関連の出来事や、IoT、FinTech領域でのDDoS攻撃対策の展望を紹介する。 DDoS攻撃の技術的な背景などを振り返りながら、有効なDDoS攻撃対策について考える本連載。前回までは、DDoS攻撃の歴史や特性、防御の難しさ、攻撃方法などについて解説し、現時点で導入可能なクラウドベースの対策技術を紹介した。 最終回となる第6回では、本連載の開始以降に起きた出来事や、IoTやFinTechといったインターネット利用の最先端領域におけるDDoS攻撃対策の展望を紹介する。 観測史上最大の攻撃 2016年6月20日に、Akamai Technologiesによる観測史上最大規模のDDoS攻撃が発生した。攻撃対象となったのはヨーロッパのメディア企業で、その規模はピーク時

技術を活かし、新しい価値を創造する DeNAのエンジニアは、想像を超えるDelightを届けるために何ができるかを考え、技術力と発想力で新しい価値を生み出しています。 多様な専門性を持ったエンジニアが切磋琢磨し、互いに刺激し合える環境や制度がさらなる成長へとつなげます。

技術を活かし、新しい価値を創造する DeNAのエンジニアは、想像を超えるDelightを届けるために何ができるかを考え、技術力と発想力で新しい価値を生み出しています。 多様な専門性を持ったエンジニアが切磋琢磨し、互いに刺激し合える環境や制度がさらなる成長へとつなげます。

こんにちは。人事担当のmarusanです。 8月の終わりから5日間、SUMMER BOOT CAMPを行いましたが、今度は9月12日～14日まで総合職向け企画インターンシップを実施しました。 今回の総合職向け企画インターンシップと8月のSUMMER BOOT CAMP違い 8月実施のインターンシップ（SUMMER BOOT CAMP）は、社員が日常行っている業務をインターン生に行ってもらうというものでした。今回は”pixiv発のエナジードリンク「pixiv DORADO」をどのように世に広めるか”というマーケティング企画のインターンシップです。 SUMMER BOOT CAMPが通常業務をインターン生にもやってもらうという性格上、メンターとなる社員は常に横について（社員の隣にインターン生の席がある）指導してもらいました。 対して今回のインターンシップは0から企画を考えるため、極力社員は中に

Lobiチームの長田です。 今回はLobiの根幹であるチャットサービスの、Streaming APIについて紹介します。 多くのチャットサービスがそうであるように、 Lobiでも新しいチャットメッセージが画面リロードの必要なく表示されるようになっています。 チャットメッセージをデータストリームとしてクライアントに送信するためのAPIがStreaming APIです。 LobiのチャットサービスはiOS・Android・Webブラウザで利用することができ、 これら全てでStreaming APIを使ったチャット画面の自動更新を実現しています。 即時反映の実装方法としては Polling Long Polling Web Socket など複数の方法が挙げられますが、LobiではHTTPリクエストのLong Pollingをベースにした 独自のフォーマットを使用しています。 仕組み app -

Evernote をはじめとするクラウドサービスのメリットの一つが、どこにいても誰とでも仕事ができること。クラウドの登場により、ナレッジワーカーの働き方は大きく変わりました。オーストラリア在住のウェブデザイナー・シンクレア樹理さんも、そんなナレッジワーカーの一人。Evernote を活用することで、日本のクライアントともスムーズに仕事ができているといいます。日本とオーストラリアをつなぐ Evernote の活用法を伺いました。 Evernote がオーストラリアと日本をつなぐ ――シンクレアさんは現在、オーストラリアでウェブデザイナーとしてご活躍されています。ご経歴を教えていただけますか。 シンクレア：もとは東京と千葉でウェブデザイナーとして 5 年ほど勤務していました。2012 年に家族でオーストラリアに移住し、Sinclair Web Design を設立しました。今もウェブデザイナー

このブラウザーはサポートされなくなりました。 Microsoft Edge にアップグレードすると、最新の機能、セキュリティ更新プログラム、およびテクニカル サポートを利用できます。

2016年9月20日に「Backlogユーザーの集い -UIデザイン大幅リニューアルを語り合いましょ会-」を開催しました！当日は台風にも関わらず、多くのユーザーのみなさんで賑わいました。2005年にベータ版をリリースしたBacklogは、おかげさまで11年目を迎えました。ヌーラボを長年支え続けている主力サービスでもあり、今回のBacklogUIの大幅なアップデートはヌーラボ史上のなかでも大きな転換期にあたります。 今回のイベントは、ユーザーのみなさまが抱くリニューアルに対する不安を少しでも軽減してもらうために開催しました。キーノートスピーチにはWebデザイナー中川裕二とソフトウェア開発者の藤田正訓が登壇し、リニューアルにいたる経緯やコンセプト、取り入れた技術についてお話ししました。イベント後には、ユーザーからの質問にBacklogチームがお答えする懇親会/質問会も実施しました。本記事では、

図ではGMailを例に挙げましたが、他のWebアプリケーションやサイトでも、多かれ少なかれ同様の傾向がみられます。この変化は、一過性で将来またもとに戻るといった類の流行ではなく、UIに関する認知科学等の研究や理論が進んだことによる不可逆な変化です。 利用者のマインドの変化 Webアプリケーションの多くが似たような変化をたどれば、インターネット利用者の側もそれらに徐々に慣れていき、「ちょうどいい」という感覚が変化していきます。上の図を見ていただくと、10年前に「シンプルで使いやすい！」と感じていたUIが今の感覚ではちょっと窮屈に感じられるのではないでしょうか。 歯車のアイコンは「設定」、鉛筆のアイコンは「編集」、点が3つ(…)のアイコンは「その他のアクション」といった、デザインの共通言語もこの10年ほどの間にインターネット利用者のマインドに構築されてきました。いちいち「編集」のように文字ラベ

クルマもバイクも自転車も、キーワードは「クロスオーバー」 ここ数年、クルマ業界のトレンドをけん引してきたキーワードといえば「クロスオーバー」だろう。つまり、二つのカテゴリーの特性を併せ持ったクルマ、具体的に言うなら、クロスカントリー四駆の走破性と乗用車の運動性、快適性を融合した「クロスオーバーSUV」がそれに当たる。実はこの潮流、クルマの世界だけにとどまらない。オートバイでも似たようなコンセプトの「アドベンチャーツアラー」と呼ばれるモデルが人気だし、自転車も「グラベルロード」「アドベンチャーツーリングバイク」といったクロスオ―バー的なカテゴリーが続々と誕生している。 自転車におけるクロスオーバーとは、主にロードバイクゆずりの高速走行性能や快適性・巡航性に舗装されていないダートロードを楽しむことができる走破性を加えたモデルのことを指す。もともとクロスバイクもそういう自転車として生まれたのだが

前回、ドキュメントがないために、SEの虎岡さんに負担をかけたり、構築中のシステムの仕様を間違えたりした20年選手の宇佐木さん。 若い頃は力業でこなしていた業務も、最近ではリカバリーがなかなかできなくなってきています。 普段は、外注のプログラマー（PG）の荒川さんが開発からサーバー構築まで様々な作業を担当しており、大概のことは荒川さんに聞けばわかるのですが、現在一週間の海外旅行中です。おまけに、荒川さんは、昔からの習慣でドキュメントを作っていません。 そのため、トラブルが起こっても細かい情報がわからず、残った人たちは右往左往しています。 宇佐木さんを補佐するプロジェクトマネジャー（PM）補佐の鹿野君や、同期のSE虎岡さんは、普段からもっとドキュメントを作るべきだと主張していますが、宇佐木さんの長年染みついた習慣は変えがたく、なかなか腰があがりません。 鹿野（PM補佐）：やっぱりドキュメントは

次世代スーパーコンピュータ、いわゆるポスト「京」の開発が最大2年遅延することが明らかになった。文部科学省のHPCI（High Performance Computing Infrastracture）計画推進委員会が8月10日に開いた会合で遅延を決定したためだ。 近年、半導体の微細化に伴う加工技術開発の困難さと製造コスト上昇の両面から「ムーアの法則（18カ月ごとにチップ性能2倍）」に沿った進歩が鈍化し、世界的に半導体開発で遅延が生じている。このため、文科省は有識者を交えたHPCI計画推進委員会に対して、ポスト「京」のメモリーやプロセッサに用いる半導体技術の再検証を求めていた。 その結果、半導体に（基本設計時点より）新たな技術を採用することとし、それに伴い「試作・詳細設計フェーズ」を当初の2017年度終了から12～24カ月延長することになった（図）。採用する新技術についての説明はなく、開発・

炎上を繰り返し、ドキュメントの必要性が身にしみてきたプロジェクトマネジャー（PM）の宇佐木さん。 同期のSE虎岡さんや、後輩のPM補佐である鹿野さんのサポートもあり、ドキュメントについて学び始めました。 宇佐木：うーん。ドキュメントと言われても何を書けばいいか分からないし、この本には具体的なサンプルが載ってない。なかなか難しいねぇ。 鹿野（PM補佐）：必要なドキュメントを箇条書きに書き出して、助けてくれるドキュメントを優先して作ってみればいいんですよ。 宇佐木：そうは言ってもねぇ…。もうちょっと勉強しないと書けないよ。 鹿野（PM補佐）：勉強勉強言ってる間に、プロジェクトが終わっちゃいますよ！ SE虎岡：ウサさん！博物館から連絡で、また仕様と違うって。 宇佐木：あれ？画像も直ったのにねぇ。 SE虎岡：とにかく、打ち合わせしたいということだから、午後から行こう。 鹿野（PM補佐）：仕様と違う

いきなり、この記事のタイトルについて説明しておく。ITproの「記者の眼」の記事だから、主要読者を意識してタイトルに「技術者」と入れたが、実はもっと汎用性の高い話だ。何なら「技術者」の代わりに「記者」としてもよい。「コンサルタント」や「営業」と言い換えても構わないだろう。この人間の悪しき「性（さが）」が、こうした仕事においては時として致命傷になる。 読者の中には「コンサルタントや営業は話すのが仕事だから、あり得ない話ではない。技術者にもそんな人がいるかもしれない。でも、記者は他人の話を聞くのが仕事でしょ。そんな人がいるのか」と正当な疑問を持つ人もいるかもしれない。でも、これは事実である。もちろん今回の主要テーマは「他人の話を聞かない技術者」。記者の件は記事の最後に少しだけ触れることにする。 さて、技術者の話だ。以前、ある下請けITベンダーの若手技術者と話したことがある。この人は若いがなかな

1990年代初頭から記者としてまた起業家としてITスタートアップ業界のハードウェアからソフトウェアの事業創出に関わる。シリコンバレーやEU等でのスタートアップを経験。日本ではネットエイジ等に所属、大手企業の新規事業創出に協力。ブログやSNS、LINEなどの誕生から普及成長までを最前線で見てきた生き字引として注目される。通信キャリアのニュースポータルの創業デスクとして数億PV事業に。世界最大IT系メディア（スペイン）の元日本編集長、World Innovation Lab(WiL)などを経て、現在、スタートアップ支援側の取り組みに注力中。 私達がスマートフォンを持つようになってからインターネットは接続されていて当たり前と思うようになりつつある。つながりにくい、重いといった不都合を回避できる環境は整いつつありネットにつながらないないことが前世紀の遺産のように感じやすくなっている。 しかし、動画

1990年代初頭から記者としてまた起業家としてITスタートアップ業界のハードウェアからソフトウェアの事業創出に関わる。シリコンバレーやEU等でのスタートアップを経験。日本ではネットエイジ等に所属、大手企業の新規事業創出に協力。ブログやSNS、LINEなどの誕生から普及成長までを最前線で見てきた生き字引として注目される。通信キャリアのニュースポータルの創業デスクとして数億PV事業に。世界最大IT系メディア（スペイン）の元日本編集長、World Innovation Lab(WiL)などを経て、現在、スタートアップ支援側の取り組みに注力中。 アウディ、BWM、メルセデス ベンツといったドイツ系メーカー乗用車向けの車載装置が、道路状況などをオンライン地図サービスを経由して伝えるようになるという。 このサービスを提供する�HERE社は昨年、ノキアからスピンアウントしてドイツの自動車メーカーグループ

前回まで 2. Google APIs 上での設定 2-1. ログイン ↑ 適切な Google アカウントで Google APIs にログインします。「適切なアカウント」とは，取得したい Google Analytics に API を通じてアクセスすることが許されているアカウントを意味します。 2-2. プロジェクトの作成 2-2-1. Project 新規作成 ↑ Projects ボタンから「Create project」を選択し，Data Connector で利用するためのプロジェクトを作成します。 ↑ 今回は「GA to TD」というプロジェクト名を与えています。 2-2-2. Service Account の新規作成 以下，「GA to TD」プロジェクト下で設定を進めて行きます。 ↑ まずは「Service Account」を新規作成します。このアカウントは後ほど G

こんにちは。GMOペパボの広報、ちんさつちゃんです。 去る9月8日、東京・渋谷のセルリアンタワーにあるGMO Yoursにて、恒例となった技術イベント「ペパボテックカンファレンス」が開催されました。 6回目を迎える今回のタイトルは、「第6回ペパボテックカンファレンス〜もっとおもしろくできる、そして……伝説の夜〜」。 中の人も「一体どういうことだってばよ？」と首を傾げるサブタイトルにもかかわらず、多くのお申込みをいただき、当日は80名以上の方がお越しくださいました。 お足元の悪い中、みなさま本当にありがとうございます…！ なにが起こるかわからない、期待と戸惑いの溢れるざわざわとした雰囲気の中で始まった発表、順を追ってレポートします。 今日の司会はEC事業部サブマネージャーのlightyです。 （1）SSLと仲良くするやり方 最初に登壇したのは技術部インフラグループ所属のmickey。 ネット

本日、iOSアプリ「はてなブックマーク」のバージョン3.30をリリースしました。 このアップデートで、Safariではてなブックマークのページリンクを開くと、自動的にアプリで該当ページを表示できるように。アプリを使えばコメントや関連情報が読みやすく、ブックマークも簡単です。現在はトップページやエントリーページなど、一部ページに対応しています。 合わせて、このバージョンからiOS 8のサポートを終了しました。詳しくは告知下部をご覧ください。 ▽ はてなブックマーク / No.1ソーシャル・ブックマークの公式アプリを App Store で Safariからアプリを開かないようにするには？ アップデート初回時に、はてなブックマークのエントリーページなどのリンクを開くとアプリが表示します。もしアプリを起動したくない場合は、画面右上にある［hatena.ne.jp >]をタップいただくことで、引き

いまだ決定打がなく、スマートウォッチのあるべき姿を模索している――。これは、ドイツ・ベルリンで2016年9月2日から7日にかけて開催された世界最大の家電見本市「IFA」を取材して感じたことだ。 IFAでは、サムスンが2014年にスマートフォン「GALAXY Note 3」と同時にNote 3と連携して通話もできるスマートウォッチ「GALAXY Gear」を発表して以来、各社のスマートウォッチの発表が集中するようになってきた。 サムスンは今年2016年も「Gear S2」の改良版ともいえる「Gear S3 classic」「Gear S3 frontier」を発表。昨年に続き、IFAで最新のスマートウォッチをお披露目した。

iPhone 7で盛り上がったシルバーウィークも終わり、秋の訪れを感じるこの頃。しばらく放置していたiPad ProをiOS 10にアップデートしてみたところ、日本語入力がいろいろと改善されていることに気付きました。 少数派である英語キーボードユーザーの苦難 筆者はいわゆるUS-ASCII配列の英語キーボードを、かれこれ20年ほど使っています。 かつて日本で主流だったPC-98シリーズがAT互換機へと本格的に移行を始めた頃、高校生だった筆者は、将来的にキーボードはUS配列が主流になると予想し、米国から英語キーボードを個人輸入していました。当時愛読していた『月刊アスキー』や『スーパーアスキー』の影響かもしれません。 しかし、その後も日本ではJIS配列が広く使われています。PC業界関係者の話を総合すると、積極的にUS配列を選択する人は10％未満とみられ、選択できるのもMacやThinkPad、

Facebookが女性の起業家支援に取り組むようだ。 FacebookとInstagramは9月27日、「#起業女子」イベントを開催。数十名の女性起業家が集まった。 #起業女子はウェブサイトによると「女性の活躍が、経済を活性化する。Facebookは女性の起業家や事業家を応援すると同時に、その後に続こうとする人たちのためのリソースをご用意しました」とある。 またFacebook Japanの代表取締役を務める長谷川 晋氏は「中小企業は日本経済雇用の根幹である。だが女性の起業家は男性の半分以下」だとし、「人口減少や高齢化をむかえる日本において女性がエンパワーすることは非常に大切、真正面から取り組むために本プロジェクトを開始した」という。 長谷川氏は#起業女子の取り組みとして3点を挙げる。 1.パートナー企業とハンズオントレーニング 2.ツールやノウハウをハッシュタグのもとで起業家同士が情報交

とかく不明な点が多く（特に 70年代の Alto に関する資料は盛りだくさんだが時系列で整理されておらず）、それゆえ“識者”と称される人たちにより、ろくすっぽ調べもせずに判で押したように「Mac は Alto の真似」「Win は Mac のパクリ」などと安易に語られるなどしておざなりにされがちな Alto、Star、Smalltalk、Lisa、Mac、そして Win …の GUI デザインの関係。それぞれはいったいどんな素性のどんな GUI で（特に Alto と Star の違い、Smalltalk や Dynabook 構想との関係とか…）、どれがどれにいつ、どんな影響を与えたのか…、その可能性があるのか…、いろいろとモヤモヤしたものがあるので手持ちの資料を出し合って探ってみました。 ▼まとめ＋その後の知見： Alto はハードウエアとして特筆すべき点も多いが、それにもまして、後の

世界中のインターネット人口の約3分の1を占める10億人以上のユーザーが1日合計で数億時間、視聴回数でいえば数十億回もムービーを再生している、というモンスターサービスが動画共有サイトのYouTubeです。いつでもどこでもいろんなジャンルのムービーが見られる、ということで通勤・通学時や寝る前のベッドの中などでお世話になっている人も多いかと思いますが、新興国などではまだまだインターネット環境が完璧に整っているとは言い難い状況。そこでGoogleが開発したのが、YouTube上のムービーの視聴だけでなくダウンロードも可能な公式アプリ「YouTube Go」です。 Official YouTube Blog: YouTube Go: YouTube reimagined for the next generation of YouTube viewers http://youtube.googleb

ヤフーオフィスのここがすごい！ 社外の人も無料で利用できるコワーキングスペース「LODGE」。土日もOK 11階はまるまる飲食スペース！食堂にカフェにコンビニまで併設した贅沢空間 社員のコミュニケーションを活性化するためにあえてジグザグに机を置いたりなど考え尽くされた執務エリア 2016年10月1日より本社を「東京ガーデンテラス紀尾井町」に移転するヤフーさんのオフィスにお邪魔しました。ヤフーさんと言えば、週休3日制の導入を検討していることが話題になったばかり。新しい働き方を常に模索している企業のオフィスはどんな感じなのでしょうか。さっそくオフィスを見ていきたいと思います。 ヤフーさんが入っているのは、千代田区紀尾井町の東京ガーデンテラス紀尾井町。東京メトロの永田町駅に直結しており、赤坂見附駅からも徒歩3分くらいの好立地な場所にあります。 オフィスビルの1階は広々しており開放感があります。

自殺率 昭和30年代は20代が高かったが、今世紀は…… いつの間にか、本連載も18回目になりました。「データで社会を読み解く論稿」ということで、自由奔放に書かせていただいていますが、「たまには、読者のビジネスマンの参考になるようなネタを……」というのが編集部さんのホンネでしょう。 私はビジネスのノウハウなど微塵も知りませんが、データを効果的に表現するユニークなグラフ技法の紹介はどうかな、と考えました。現代は「エビデンス」の時代。企画立案の会議などでは、データを交えたプレゼンテーションが求められることが多いでしょう。 その時に力を発揮するのがグラフですが、このような見せ方のグラフ技法はどうか、という提案をしてみようと思います。私のエゴが入った作品ばかりで、皆さんの参考になるか分かりませんが、気軽に読んでいただければ幸いです。 まずは、自殺率のグラフです。 初っ端から物騒な話題ですが、社会病理

2016/09/12に開催された「チャットがあれば何でもできる！ChatOpsで開発効率を超改善！」より

第6回ペパボテックカンファレンスの登壇資料 ブログにこの発表を補足するエントリーを書きました http://blog.inouetakuya.info/entry/2016/09/08/230253

2016/09/27 AWS社員によるインフラエンジニアの為の実践講座 http://tech-eight.connpass.com/event/38926/ にて発表した資料です。 みんなのウェディング

#oblove 収穫祭での発表資料。「仕事」をするにあたって考えてほしいことなどを話しました。

This document discusses using Docker Compose to run a Rails application with multiple services including PostgreSQL, Redis, Memcached, and Elasticsearch. It provides the docker-compose.yml configuration file that defines each service and links them together. It also includes the Rails Dockerfile that builds the application image and copies in the Gemfile and other dependencies. Instructions are pr

2016 - 09 - 28 KotlinとSpring Bootとか諸々を使ってMicroservicesを作ってみた 最近バックグラウンドで稼働する決済系のMicroservicesをKotlinで作ってめでたく運用開始したので、どんな感じでやったかを雑に共有。 Kotlin選択の理由 自分は Scala が好きなんですけど、周りに書ける人いないし、そんなに時間もないし、で素の Java もダルいしってなって現実的な解となったのがKotlinだったに過ぎません。 kotlinlang.org Java をバックグラウンドに持つ人が多い今のプロジェクトではなかなかよかった気がしてます。 コンパイル 速度もほどんど気にならなかったし満足（規模が大きくなったらどうなるだろうかというのはあるが）。 spring-boot-starter-web 手堅くSpring Bootを利用。もちろんKo

今回はオールアバウトのnnmrが弊社サイトAll About Japanの速度を高速化した経緯についてまとめます。 All About Japanとは そもそもAll About Japan（以下AAJ）とは何かといいますと、弊社が提供している訪日外国人向けの日本紹介サイトです。 外国人向けサイトで、英語、中国語（繁体字）、中国語（簡体字）、タイ語、韓国語の5か国語に対応しております。 「Anime」「Izakaya」「Ninja」といったような特集や、実際に観光する人向けのモデルルート記事が特色です。 ■ 特集 (url : http://allabout-japan.com/en/tag/sushi/ ) ■ モデルルート記事 (url : http://allabout-japan.com/en/article/222/ ) 技術的な紹介 LAMP環境です。 （サーバー構成は後に記述

IT系の男性に誕生日にプレゼントをあげたいけれど、正直どんなものが喜ばれるのかわからない、という女性も多いはずです。今回は、IT系の男性も大喜びしそうなガジェット系のプレゼントを厳選してご紹介！PC関連グッズや家事ロボットなど、おしゃれさと実用性を兼ね備えたガジェットアイテムばかりですよ。

米AppleはiPhone向けに提供している、健康・フィットネス関連のソフトウエアフレームワーク「HealthKit」の改良に向けた取り組みを進めていると、複数の米メディア（Computerworld、9to5Mac、Macworldなど）が現地時間2016年9月26日、米Bloombergの報道を引用して伝えた。 これに伴い、同社は数多くの専門家を雇い入れているという。例えば米製薬大手Merck ＆ Co.出身で、長年Appleのコンサルタントを務めていたStephen Friend氏は今年6月に常勤社員となった。Apple出身で米Flipboardの共同設立者であるEvan Doll氏は7月にAppleに復帰し、健康関連ソフトウエアエンジニアリング部門のディレクターを務めている。またGoogle傘下のNest Labsで技術部門の責任者を務めていたYoky Matsuokaは昨年App

Parrots in captivity seem to enjoy video-chatting with their friends on Messenger

Windows系開発者ならおなじみのマイクロソフトの統合開発環境「Visual Studio」。その次期バージョンとなる「Visual Studio "15"」が、現在プレビュー版（執筆時点ではPreview 4）として公開されています。本連載では、プレビュー版をとおして、Visual Studioの新たな魅力を解説します。 従来のVisual Studioでは、かなりの時間が必要だったインストール、それが劇的に早く終わるように変貌しました。今回は、その新しいインストーラーと、IDEの新機能を取り上げます。 対象読者 Visual Studioを使ったアプリケーション開発に興味がある方 Visual Studio "15" 「Visual Studio "15"」（以下、VS15）は、統合開発環境Visual Studioの次期バージョンです。なお、Visual Studio 2015とは

機械学習関係の自前記事が自分でも何を書いたのかわかりにくくなってしまったので一覧を作る。 記事の多くは、自前のデータで機械学習を行う際に生じるであろうことに対する個人的な経験に基づく見解を書いています。最新のアルゴリズムを理解しきれているわけではないので、多少割り引いて読んでみてください。 自分で学習することに関する記事 画像の機械学習が劣化する理由 機械学習のデータセットの重要性 機械学習のデータの集め方 機械学習データの集め方２ 機械学習のためのデータを収集する各段階の考え方 未検出データを追加すべきか、先送りすべきか。 出現頻度のまま学習データの比率にするのは得策ではない。 データ管理に関する記事 ずぼらな人間が機械学習の実験データを管理する方法 データ管理にgit lfs を安全に使うためのヒント 規模の大きな学習用データセットには git submoduleを使う [機械学習のデ

本記事では、書籍『Python機械学習プログラミング』を読むために必要な知識、読み方等について説明します。 本書の読み方のプラン 以上で説明した本書の構成や章ごとの難易度をもとに、本書の読み方についてここでは2つのプランを提示します。 ●プラン1. 速習コース：最初は関数やクラスを定義してアルゴリズムを記述したり、数式を丁寧に追ったりすることよりも、ライブラリの使用方法を覚え、一通り機械学習を使いこなすことを優先します。Pythonのクラスや数学の知識があまりない場合は、このプランに従って本書を読み進めるとよいと思います。 ●プラン2. 特訓コース：関数やクラスを用いたアルゴリズムの記述、数式に抵抗感がない場合はこのプランに従って読み進めるとよいと思います。 以下ではそれぞれのプランについて説明します。 ●プラン1. 速習コース このプランでは、図2に示す順に読み進めていきます。 図2：速

Posted by Quoc V. Le & Mike Schuster, Research Scientists, Google Brain Team Ten years ago, we announced the launch of Google Translate, together with the use of Phrase-Based Machine Translation as the key algorithm behind this service. Since then, rapid advances in machine intelligence have improved our speech recognition and image recognition capabilities, but improving machine translation remai

米Googleは9月27日(現地時間)、ディープラーニング技術を活用した新しい翻訳システム「Google Neural Machine Translation (GNMT)」の開発を公表した。いくつかの言語ペアでは人間の翻訳に近い自然な表現で正確な翻訳を実現する。同社はすでにGoogle翻訳の中国語-英語でGNMTを用いたサービスの提供を開始しており、数カ月をかけて他の言語にも拡大していく。 Google翻訳にはサービス開始からフレーズベースのマシン翻訳(PBMT)技術が用いられてきたが、PBMTでは入力されるセンテンスが単語とフレーズに分けられてバラバラに訳される。Googleの研究者は2014年から、リカレントニューラルネットワーク(RNN)を用いて入力言語のセンテンスと出力される翻訳された言語のセンテンスを直接マッピングする研究を進めてきた。NMTは入力センテンス全体を1つのユニット

本連載では、ITエンジニアが時代の波に飲み込まれず、ITの世界で生き残っていくための知識を解説していきます。IoTや人工知能といったトレンドも押さえながら、データベース、セキュリティ、数学などの不変の知識もカバーします。応用のためには基礎が必要とはよくいいますが、実際は応用できる知識と、そうでないものがあります。新技術が登場しても陳腐化しない、本当のベースとなるような知識を身につけましょう。第1回は、エンジニアが生き残るための道筋を把握するために、IT業界が抱える人材不足の状況や、求められているスキル、構造上の問題点などを分析します。 新刊のお知らせ 2016年12月17日に、この連載をベースにした新刊『エンジニアが生き残るためのテクノロジーの授業』が発売されました！ ITとビジネスの関係、コンピュータ、ネットワーク、プログラミング、データベース、セキュリティ、人工知能など、本連載で解説し

家電製品や車などの「モノ」と「インターネット」がつながるIoTという概念は、ここ数年で急速に普及しています。 難易度が高そうと感じている方が多いと思いますが、安価で手に入るシングルコンピュータ「Raspberry Pi」や遊び感覚で開発ができる「MESH」などの登場により、IoT開発に取り組みやすい環境が整ってきました。 そこで今回は、IoT基礎知識がわかる記事や、実際の開発体験を綴った記事を21個ご紹介します。興味を惹かれるデバイスがあれば開発に取り組んでみてください。 IoTとは IoTは「Internet of Things」の略で、日本語では「モノのインターネット」と呼ばれています。 世の中のさまざまなモノとインターネットを接続しようという概念で、モノに自動制御や自動認識といった機能を持たせて生活の利便性の向上や低コスト化を目指します。 パソコンやスマートフォンだけでなく、テレビ、

2021-09-092016-09-26 自動車のビッグデータを自社サービスに活用できるプラットフォームを提供　－スマートドライブ CEO 北川氏インタビュー 2015年10月、クルマの情報を取得する「あとづけIoTデバイス」で自動車保険料が安くなる というインタビューを実施した。 それから約1年後、サービスがアップデートし、保険だけではなくIoT時代のコネクテッドカーサービスが実現可能になるサービスの展開が始まった。今回も、株式会社スマートドライブCEOの北川烈氏にお話を伺った。 －お久しぶりです。今回アップデートした点を教えていただけますか。 はい、まず1点目ですが、前回お話した時にはOBD‐Ⅱだけでしたが、今はそれに3G回線が乘ったものや、シガーソケットとスマホでデータ補完するようなものも製品ラインナップに加わりました。 コンセプトとしては、あまりOBD‐Ⅱや保険などに限らず、ひとつ

フェイスブックによる広告動画の過大測定や、電通のネット広告の過大請求といった事件が取り沙汰される中、グーグルはより効果的なインターネット広告の運営システムを打ち出そうとしている。 ネットやスマホの普及が進んだ現在、消費者が利用するデバイスは多様化を極め、従来の方法ではネット広告の効果測定はますます困難になりつつある。特に現状の課題と言えるのが、ネットとテレビ広告の相関関係や、デジタル広告がリアル店舗に与える影響の測定が難しいことが挙げられる。 グーグルは9月26日、ニューヨークで開催のAdvertising Weekにおいて、複数の新ツールを公開する。「今回の新機能により、ネットのディスプレイ広告がもたらす効果をさらに詳細にトラッキング可能になります」とグーグルで広告マネジメントを担当するブラッド・ベンダー（Brad Bender）は述べた。 その新機能の一つ「Brand Lift」は、Y

シスコシステムズCEO（当時）のジョン・チェンバース氏（2011年1月撮影）。2015年のCESでは、IoTなどのテクノロジーによる破壊的イノベーションを唱えて注目を集めた。 Photo by Oracle PR, under CC BY 2.0. IoTは1980年代後半以降に次々起きたデジタル革命の中でも、桁外れにインパクトが大きい「破壊的イノベーション」（Disruption）である。そして、それは多くの企業が「持続的イノベーション」の連続でコツコツと積み上げて創り上げてきたビジネスモデルを破壊し、焼け野原に変えてしまうだろう。 IoT導入を境に、企業の「なりわい」（生業）は大きく変わる。企業とお客様はデータを媒介にして「時間」という軸でつながり続ける。既存のサービス業はもちろんのこと、現在はモノの製造や販売に特化している多くの企業も含めて、すべての産業は「お客さまの成果ベースで稼ぐ

こんにちは、Gunosyデータ分析部に所属している森本です。 主な担当業務は記事配信アルゴリズムの改善、ログ基盤運用です。 最近良く聞く音楽はOne Direction - Live While We're Youngです。 本記事では、Sparkで利用できるDeep Learningフレームワークをまとめました。 GunosyではChainerで畳み込みニューラルネットワークを応用し、ユーザーのデモグラフィック推定を行っています。 WebDB Forum 2016 gunosy from Hiroaki Kudo Chainer以外にも多数のDeep LearningフレームワークがPythonを中心に数多く存在します。 TensorFlow, Keras, Caffe, Theanoなどなど。どのフレームワークが優れているかという回答は状況に応じて変わりますが、Pythonを使用する大

きっかけ この記事を書いた人のレベル 今回の読書プラン Python 環境の構築 インストール先の環境 Anaconda (Python 3) のインストール 科学計算に関するライブラリのインストール サンプルの実行に必要なライブラリのインストール サンプルの実行 サンプルコードを実行していて引っかかったところ 3章 12〜13章 Python の勉強 速習コースを読んでみた感想 きっかけ 機械学習の重要性は、それこそ「ビッグデータ」という言葉が出てきた頃からいろいろな人が訴えていますが、最近は特にツールが充実して、敷居が下がってきたように感じています。 そろそろ自分でも機械学習関係のツールを使えるようになりたいと思っていたのですが、そんなときに「具体的なコード例が多くて読みやすい」という本書の評判を聞いて、読み始めました。 Python機械学習プログラミング 達人データサイエンティストに

1. qiraとは qiraとは世界的なハッカー、George Hotz氏 (ジョージ・ホッツ - Wikipedia) によって開発された高機能バイナリトレーサーであり、qiraという名は（QEMU Interactive Runtime Analyser）の略である。 GitHub - BinaryAnalysisPlatform/qira: QEMU Interactive Runtime Analyser 略語を見れば分かるがuser mode QEMUを使用したバイナリ解析ツールであり、ELFなどの実行形式バイナリを実際に動作させて各命令のレジスタ、メモリへの操作を逐次記録する。 これらの記録はweb UIを通して好きな命令位置にカーソルを移動させるだけで見ることができ、その時のレジスタ、メモリの記録が再現される仕組みになっている。ソフトウェアのデバッグやCTFにおけるバイナリ解

2016/9/27 スタートアップRails勉強会発表資料 About @takashi Increments アプリケーションエンジニア 主にQiita:Team担当 最近入社した 最近 Incrementsの開発チームが大事にしていること HRTを大切にしたコミュニケーション 作業は意識的に自動化する 属人性を極限まで排除する 重要な価値に集中する Qiitaにおけるリモートワーク開発プロセス HRTを大切にしたコミュニケーション Humility(謙遜), Respect(尊敬), Trust(信頼) リモートワークにおいてHRTとは？ オンラインコミュニケーションは誤解を招きやすい (本当に)意図せず冷たく接しているように伝わる そこで なにげないレビューに を添えるだけで雰囲気が良くなる (けど普段喋れないこともあるので)月１回はオフラインで集まるようにしている 作業は意識的に自