クックパッドのデータ活用基盤 - クックパッド開発者ブログ
インフラ部 & 技術部の青木峰郎です。 クックパッドでは全社的にAmazon Redshiftを中心としたデータ活用基盤を構築しています。 今日はその全体像についてお話ししたいと思います。 データ活用基盤の全体像 まず、以下にクックパッドのデータ活用基盤の全体像を示します。 大きく分けると入力が2系統、内部処理が1系統、出力が3系統あります。 入力はMySQLからのインポートとログのロードがあり、どちらも独自に構築したシステムで行われています。 DB内部のデータ処理はSQLバッチのみです。 そして出力は管理画面やBIツールからのアクセスとバッチ処理によるエクスポートに大別できます。 以下1つずつ説明していきましょう。 入力その1: MySQLインポートシステム MySQLからRedshiftへのマスターテーブル取り込みにも独自のインポートシステムを使っています。 このインポート処理には、つ
Five Common Problems in GraphQL Apps (And How to Fix Them)
by Sacha Greif Five Common Problems in GraphQL Apps (And How to Fix Them)Learn to unlock the power of GraphQL without suffering its drawbacksGraphQL is all the rage these days, and for good reason: it’s an elegant approach that solves many of the problems associated with traditional REST APIs. Yet I’d be lying if I told you that GraphQL doesn’t come with its own set of issues. And if you’re not ca
NO_COLOR: disabling ANSI color output by default
NO_COLOR Last updated: 2023-11-03 An increasing number of command-line software programs output text with ANSI color escape codes by default. While some developers and users obviously prefer seeing these colors, some users don’t. Unfortunately, every new piece of software seems to have a different way of disabling colored text output and some software has no way at all. Accepting the futility of t
An Overview of JavaScript Testing in 2020
(Updated on: 21.11.2021) This guide is intended to catch you up with the most important reasoning, terms, tools, and approaches to JavaScript testing for the year 2022. It combines information from the best articles recently released (they are referenced at the bottom) and adds from my own experience. It’s a little long but whoever reads and understands this guide, can safely assume they know the
Safari による User-Agent 固定化と Web における Feature Detection | blog.jxck.io
Update 2018/3/1 : Safari 11.0.3 の UA を追記 2018/4/16: Safari 11.1 の UA を追記 2018/5/1 : OS のバージョンは固定されなくなった件を追記 2 月に方針が変更され、 OS のバージョンは固定されなくなった。 このため、 iOS のバージョンアップにより発生するバグなどを回避する道は残されたことになる。 一方 Webkit のバージョンは(予定では 605.1.15 に)固定されることになりそうだ。詳細は、以下を参照。 Safari の UA 文字列が固定されて固定されなくなったおはなし - fragmentary Intro 少し前に Safari Technology Preview 46 がリリースされた。 Service Worker のアナウンスに目がそちらに盗まれている一方、しれっと以下の一文がある。 F
webpackaging_study (2018/02/23 19:00〜)
WebPackaging Study 開場: 18:45 開始: 19:00 Intro 現在策定中の WebPackaging について、議論や実装の進捗、ユースケースや展望その他について議論します。 https://github.com/WICG/webpackage/blob/master/README.md speaker @flano_yuki: プロトコル/フォーマット etc @kinu: スペック/ユースケース/ブラウザ実装 etc 会場 サイボウズ 東京オフィス 東京都中央区日本橋2-7-1 東京日本橋タワー27階 カンファレンスルーム2 アクセス 地図 入館方法 東京日本橋タワーの B1F (地下鉄日本橋駅 B6 出口直結)または 1F からシャトルエレベーターで 7Fへ 7F の入館端末で ID を入力して入館証を発行(ID は connpass メッセージにて後日連
Cybozu Meetup #11 アジャイルQA (2018/02/21 18:30〜)
お知らせ connpassプライバシーポリシーの内容を一部更新しました。詳細につきましてはこちらをご覧ください。 お知らせ ソーシャル認証に頼らず安全にログインしていただくため、すべてのユーザーに対してパスワードの設定を必須といたしました。まだパスワードを設定されていない方は、パスワード設定画面よりご設定をお願い申し上げます。 Cybozu Meetup #11 開催します！ サイボウズの Meetup イベント第11回を開催します！ サイボウズは「チームワークあふれる社会を創る」を企業理念として掲げ、グループウェアや kintone などのクラウドサービスを開発・運用しています。 そんなサイボウズが、現場で働くエンジニア同士がカジュアルに情報交換できる交流イベントを開催します。サイボウズで使われている技術、製品、文化など毎回異なるテーマでお話しさせていただいたあと、サイボウズ社員と皆さま
Osaka Venture Today Meetup #3 - テスト自動化 (2018/03/05 19:00〜)
お知らせ connpassプライバシーポリシーの内容を一部更新しました。詳細につきましてはこちらをご覧ください。 お知らせ ソーシャル認証に頼らず安全にログインしていただくため、すべてのユーザーに対してパスワードの設定を必須といたしました。まだパスワードを設定されていない方は、パスワード設定画面よりご設定をお願い申し上げます。
高学歴者ほど「若者」から「大人」に変わるタイミングが難しい - シロクマの屑籠
・高学歴の人は就学期間が長く、仕事のキャリアアップも結婚も、後々まで定まりにくい。ゆえに、「若者」的なメンタリティから「大人」的なメンタリティにもっていくための猶予期間が短く、難易度が高い。 高卒～高専卒のクラスメートは、すぐに「大人」になった 私は北陸地方の田舎出身なので、都市部よりもずっと進学率が低い中学校を卒業した。クラスメートのうち、大学進学した者は３割もいなかったのではないだろうか。高卒の割合がとても高く、中卒で働く者もいたと記憶している。 中学校を卒業した後も、実業高校や高専に入ったクラスメートとの付き合いは続いていた。ゲームやPC、漫画やアニメについての情報交換もたくさんやった。受験勉強に追われるか否かという違いはあったものの、それ以外はだいたい同じようなものだと感じていた。 ところが、高校や高専を卒業するや、彼らは急激に変わっていった。 いまだ大学に通う私をよそに、彼らは急
つよいUI - transitkix design log
…というものを最近考えていました。「画面デザインのOKももらったし、私の仕事は終わり！あとはエンジニアに指示書を渡すだけ」と一息ついた時にこそ、改めてデザインを見つめなおすべきです。 つよいUIであるための7つの視点 1.本来、そこにあるはずの情報がない場合はどうなりますか？ リストUIで載せる情報が0件、文章が空っぽ、画像がない時など 2.表示する要素が想定よりすごく多い/すごく少ない場合はどうなりますか？ 数字の桁数、文章の行数、文章が入りきれない場合は文中・文末のどこを省略すべきか…など 3.ユーザーさんの立場によって、表示要素に変化はありませんか？ ゲストとログインユーザー、無料会員と有料会員…など 4.ロード中、もしくはロードされるまで何が出ていますか？ 通信中の表示、読み込み中の画像エリア…など 5.予期せぬエラーが起こった時、画面はどうなりますか？ 通信エラー、リンク先のコン
Java 10以降のJava: リリースサイクルの変更とOpenJDKへの統合- JfokusでのMark Reinhold氏のセッションから - Fight the Future
Java 10以降のJavaについて、少し混乱があるようです。 ちょうど僕は数日前までJfokusというJavaカンファレンスでストックホルムに来ており、オラクルのJavaプラットフォームグループのチーフアーキテクト、Mark Reinhold氏による"Moving Java Forward Faster"というセッションに出ていました。 そこで聞いた内容を共有します。なお、そのセッションの動画も公開されています。 www.youtube.com 所感 何も心配いらない。むしろよいことである。 要約 今までのOracle JDKの無償版はなくなり、OpenJDKが提供されます。Oracle JDKとOpenJDKの違いとしては、Oracle JDKにはオラクルのバイナリコードライセンスがあること、一部のコードが異なる（TCKにより機能的な差はないと保証される）、グラフィック・ラスタライザ、
ホワイトペーパー「日本におけるプライバシーに関する考慮事項に照らした AWSの利用」の公開 | Amazon Web Services
Amazon Web Services ブログ ホワイトペーパー「日本におけるプライバシーに関する考慮事項に照らした AWSの利用」の公開 2017年5月30日、昨今の IT 技術の飛躍的に進歩に伴い、様々な個人情報の利活用の現状を踏まえ、改正個人情報保護法が全面施行されました。個人情報の取り扱いに関する義務が明確になりましたが、一方でクラウドをご利用する上で配慮すべき点が増え、考慮されているお客様もいらっしゃるかと思います。そのようなお客様の声にお答えするために、お客様が自身のクラウド利用を検討していく際の参考資料として「日本におけるプライバシーに関する考慮事項に照らした AWS の利用」（ホワイトペーパー）を準備し、コンプライアンスのリソースページにて公開しました。本ホワイトペーパーは、今回の改正個人情報保護法に沿った内容となっており、お客様がご自身の IT インフラストラクチャを A
高橋名人×ブンブン丸×ウメハラ：eスポーツ座談会──名人ブームの影響からプロライセンス発行の本音まで
2月10日・11日に幕張メッセで開催されるゲームの祭典「闘会議2018」に合わせて、電ファミニコゲーマーでは3本の記事を企画している。 テーマはいずれもeスポーツ。国内で初めてeスポーツのプロライセンスが発行されるからだ。 世界の「eスポーツ」ゲームいくつ言えるかな? いま熱い競技シーンから、eスポーツの条件を考えてみる 複数のeスポーツ団体が統合して新設された一般社団法人日本eスポーツ連合（JeSU）によるプロゲーマーの定義やプロライセンスの発行については賛否両論があり、いまなおあらゆる立場からの議論がなされているが、それらについては「闘会議2018」終了後に掲載する予定の記事で深く堀り下げていく予定だ。 （画像は株式会社ドワンゴのプレスリリースより） さて「闘会議2018」連動記事の2本目となる本稿では、まだeスポーツやプロゲーマーという言葉が存在しなかった、20世紀に活動を開始したレ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Amazon.co.jp: 職場の問題かるた ~“言える化"してモヤモヤ解決! ([かるた]): 沢渡あまね (著), 戸松遥 (その他), 白井匠 (イラスト): 本
report-md-template.md