EKS(or Kubernetes on AWS)本番運用で導入を検討すべきな追加コンポーネントについて - inductor's blog
はじめに Amazon EKSを初期導入すると、最小限の構成でクラスターがセットアップされそのままの構成で本番運用をするのはとてもじゃないが厳しいみたいな状態になっています。 これには運用者が柔軟にミドルウェアを選定できるというメリットもありますが、そもそもどんな選択肢があるんだっけみたいなところまではちゃんと整理できていないと思うので、ここでは僕が考える入れておくべきアドオンについて今後のために整理しておきます。 github.com/aws/eks-charts を眺める とりあえず脳死でこのサイトに行き、自分に必要そうなものを眺めることにします。Helmを使ってインストールするかどうかはさておき、それぞれのツールの必要性について検討しようという話です。 github.com App Mesh関連 App Meshを使ったサービスメッシュをやっていきたいのであればこの辺のコンポーネント
DataformでBigQueryのデータ変換を試してみた
Dataform とは 先日Google Cloud のブログでDataformが Google Cloud に買収されたとの記事が公開されました。 Dataform をかんたんに説明すると、ELT（Extract/Load/Transform）のうちの Transform を SQLX で記述し、テーブル定義やデータ変換のドキュメント化・依存関係の管理による DAG の自動生成・テストなどができるツールです。 現在以下の DWH をサポートしています。 BigQuery Snowflake Redshift Postgres Azure SQL data warehouse Presto (under development) GUI・CLI・REST API(beta)での機能が提供されており、基本的には無料（ただし DWH のプロジェクト側の利用料で課金）で利用できます。 Googl
「開始日付」と「終了日付」で管理しているデータをSQLで期間集約するには? - Qiita
MIN・MAXがダメな点 ・ と の期間が重複した結果を作ってしまってウソの集約になる。 ・もし日付が不連続だった場合もウソの集約になる。 検討3 Window関数は使えるか？ PostgreSQL や Oracle には Window関数というのがあります。 Window関数 | Let's Postgres より引用 Window関数はテーブルを区間ごとに集計する機能です。集約関数 (GROUP BY) に似ていますが、Window関数では複数の行がまとめられることはなく、行それぞれが返却されます。また、処理中の行以外の行の値を読み取ることも可能です。 Window関数は以下の構文を使います。 関数(...) OVER (PARTITION BY ...) : 区間に分割 関数(...) OVER (ORDER BY ...) : 区間ごとに並び替え つまり、Window関数を使うと以
Google Cloud、“データクラウド”を構成する新サービス3つを紹介
グーグル・クラウド・ジャパン（Google Cloud）は2021年6月2日、Google Cloudの“データクラウド”戦略および最新のデータ関連サービスに関する記者説明会を開催した。先月発表された3つの新サービス、多様なデータソースを統合分析可能にするデータファブリック「Dataplex」、スケーラブルなリアルタイムデータ複製を可能にする「Datastream」、データのみならずデータ分析の“手法”までを組織間で共有できる「Analytics Hub」が紹介された。 Google Cloudがデータクラウドとして重視している4つのポイント 説明会に出席したGoogle Cloud 技術部長（アナリティクス／機械学習、データベース）の寶野雄太氏はまず、企業におけるDX（デジタルトランスフォーメーション）の取り組みにおいて必須となるデータ活用について、「その実現のためには3つの要素が不可欠
プロダクトマネジメントクライテリアを早速使ってみた！！ - Adwaysエンジニアブログ
はじめに プロダクトマネジメントクライテリアの紹介 採点してみた 採点結果 チーム内への展開 終わりに はじめに こんにちは、データエンジニア内田です。 最近健康の為にUber Eatsを始めました🚵🏼♀️ ロングピックでも僕は嬉しいっすよ💪❗️ プロダクトマネジメントクライテリアの紹介 さて、先日PM界隈で著名な及川卓也さん、曽根原春樹さん、小城久美子さんによって作成された プロダクトマネジメントクライテリアが公開されました。 書籍『プロダクトマネジメントのすべて』を元にしたチェックリストをつくりました📝 プロダクトマネージャー個人ではなく、チームとしてプロダクトマネジメントできているかを確認できます。 めちゃくちゃ頑張ったので、ぜひご確認＆フィードバックをお願いします💪https://t.co/ZbvDxNvVvH— 小城 久美子 / koshiro kumiko (@oz
VS Code ネタ詰め合わせ - Qiita
👻 ぷぇ 🍾🍾🍾 メリークリスマス！！！ 🎉🎉🎉 今年も残り僅かですが、皆様の今年の進捗はどうだったでしょうか？ 進捗ダメでしたか？ 私はと言うと今年も幸い GitHub で evergreen を達成できそうです。( 業務でこの GitHub アカウントは使用していないので、個人での Contributions のみです。 ) Visual Studio Code Advent Calendar 2019 の最後の記事ともなりますし、普段、特に Qiita ではあんまり記事を書かないのもあるので、 VS Code に関するいろいろなネタの詰め合わせをお送りします。 自分的に VS Code の二大拡張 ※ステマ注意 VS Code Tips 来年(2020年)の VS Code 余談: アイコン騒動、再び！！ 自分的に VS Code の二大拡張 ※ステマ注意 「もしも V
リーンなスタートアップの『流れ化思考』：流れの見える化から流れ化まで
DevOps、バリューストリームマッピング、カスタマージャーニーマップ、エクスペリエンスマップ、ユーザーストーリーマッピング、カンバン、フロー効率性、顧客ファクトリー…。これらの新製品開発のプラクティスを見ていると、これらに共通するのは「流れ」に着目することなのかなと感じています。 たとえば、リーンキャンバスの提唱で有名な Ash Mauyra は『リーンスタートアップ成長戦略』で顧客ファクトリーの概念を提示し、トラクションの流れの作り方を TOC の考え方をベースにしながら語っています。 作業やビジネスの流れに注目することで、「どこに淀みがあるのだろう」という発想に自然となったり、Maurya がやっているように TOC やリーン生産方式の考え方を応用できるというメリットがあります。 この記事は、冒頭に挙げたプラクティスを一段抽象化して、スタートアップでも『流れ化』の考え方を様々な領域で
ロシア、インターネットからの自国切り離し実験に成功
ロシア政府は現地時間12月23日、同国を世界のインターネットから切り離すための一連の試験に成功し、試験を完了したと発表した。 この試験は先週始まり、数日間かけて実施された。ロシアの政府機関、同国のインターネットサービスプロバイダー、そして同国のインターネット企業が、これに参加した。 その目的は、同国の国内インターネットインフラ（ロシア国内では「RuNet」として知られている）が、グローバルなDNSシステムや外部インターネットにアクセスすることなく機能できるかを確認することだった。 インターネットトラフィックは国内で再ルーティングされた。これにより、ロシアのRuNetは、実質的に世界最大のイントラネットとなる。 ロシア政府は、この試験の技術的詳細や具体的な構成については何も明らかにしなかった。ただ、他国からの悪意あるサイバー攻撃をシミュレーションするシナリオなど、複数の切断シナリオを試験した
DXCriteriaは改善に取り組みたい人にとって最高のユビキタス言語 - Adwaysエンジニアブログ
Adways Advent Calendar 2019 15日目の記事です。 http://blog.engineer.adways.net/entry/advent_calendar_2019 こんにちは、データエンジニアの内田です。 先日、日本CTO協会がDXCriteriaを公開されましたね。 この資料が改善を推進するに当たって最高のドキュメントだったのでその活用事例をお話したいと思います。 あらまし 内田「ミッションていうのはね、抽象度を高く設定するものなんですよ。オブジェクト指向だってそうでしょう？」 上司「？？？？？？！？？！？？！？？！？」 今思えば何を言っているのか自分でも判りませんね。 意図としては、日々遂行する業務はROIの高い、利益との関連性が 見えやすい業務を優先しがちです。いわゆる重要かつ緊急のタスクですね。 出典:https://diamond.jp/artic
投資のデータ集：過去97年の市場暴落と回復年数 - myINDEX
市場は周期的に暴落します。 （長期データを使用するため、米国株式を例としてあげています） 暴落から回復までの期間は暴落時の状況で異なりますが、伝説的な暴落を記録した1929年の世界大恐慌（ピーク時から最大83％資産減少した）時でさえ、約15年で元のピークを超えました。 1972年のオイルショック時は最大43％資産減少し、4年で回復。 1987年ブラックマンデー時は30％減少し、2年で回復。 2000年のITバブル崩壊と同時多発テロの時は45％減少し、6年で回復。 2007年の世界金融危機・リーマンショック時は50％減少し、5年で回復しました。 ■過去の市場暴落 過去97年において、ピーク時より20％以上下落した場合、回復までに要する平均期間が（米国株式の場合）約5年です。 ■市場暴落からの回復年数 ピークの年 下落率 回復の年 回復までの年数 米国株式
株式会社バンダイナムコエンターテインメントとの共同開発タイトル 『アイドルマスター SideM LIVE ON ST@GE！』配信開始 | 株式会社アカツキ（Akatsuki Inc.)
2017年08月30日 株式会社バンダイナムコエンターテインメントとの共同開発タイトル 『アイドルマスター SideM LIVE ON ST@GE！』配信開始 株式会社アカツキ（本社：東京都品川区、代表取締役CEO：塩田元規、以下「アカツキ」）は、株式会社アカツキが開発し、株式会社バンダイナムコエンターテインメント（本社：東京都港区、代表取締役社長：大下聡）が提供する『アイドルマスター SideM LIVE ON ST@GE！』（配信元：株式会社バンダイナムコエンターテインメント）の配信を本日より開始したことをお知らせいたします。 ■ゲーム内容について 本作は「アイドルマスター SideM」の新作スマートフォン向けゲームアプリになります。プレイヤーはプロデューサーとなって、個性豊かな経歴を持つ、アイドルの卵たちを次々スカウトし、トップアイドルへと成長させていきます。
Railsで大規模アプリケーションを正しく設計するために避けるべき3つの機能 - Qiita
この記事はCrowdWorks Advent Calendar 2016 の24日目の記事です。CrowdWorksのエンジニアが毎日なにかを書きます。 昨日の記事は @suzan2go による「ラーメン屋で考えるRailsのデータモデリング」でした。 はじめに CrowdWorksは、2011年の創業以来、約5年間の開発を続けてきました。サービスの立ち上げ期においては、サービスの継続性・変更容易性を高めることよりも、サービスを成長させ、存続に繋がるフェースまで素早く立ち上げることが最重要な観点です。 一方で、サービス提供も5年が経過し、多くの方にご利用頂く「社会インフラ」に一歩ずつ近づいてきています。そういった環境の変化もあり、「日々改善し続ける」「日々変更し続ける」ことに重要視する観点が移り変わってきました。そのような価値観の変遷に取り組む過程で考えている「大規模で複雑な業務要件を担う
ちょうど1年前にチームが崩壊した話 - Adwaysエンジニアブログ
Adways Advent Calendar 5日目の記事です。 http://blog.engineer.adways.net/entry/advent_calendar/archive どうも、大曲です。 とあるサービスのエンジニアをしています。 ちょうど１年の締めくくりとして、マネジメントの話を書こうかなと思います。 1年前にチームが崩壊した 1年前のこの時期に、立ち上げ時期からサービスを引っ張っていたエンジニアが退職することになりました。 退職したから、チームが崩壊したというよりすでに崩壊していた状態でした。 なぜ、崩壊していた状態なのか？ ４歩進んで３歩下がる開発だった 4週間で大きな機能をリリースする。 3週間でその機能のバグ修正をする。 こんな状況が多発してました。 4週間でリリースするのは良いと思いますが 3週間ずっとリリースした機能のバグ修正をするという 品質担保の下手さ
「はてブ Windows 8 アプリ」開発から考えた、これからのユーザー体験 マイクロソフト×はてな対談 - はてなニュース
10月26日（金）、マイクロソフトから「Windows 8」が発売されました。これまでのWindowsから大きく変化したWindows 8は、タッチに最適化された新しいユーザーインターフェース（UI）が話題を呼んでいます。はてなはWindowsストアアプリ「はてなブックマーク」を同日にリリース。新OSとアプリについて、はてなのエンジニア＆デザイナーと、日本マイクロソフト UXエバンジェリストの春日井良隆さんが対談しました。記事の終わりには、Windows 8 搭載PCのプレゼントのお知らせも！ （※この記事は日本マイクロソフト株式会社によるPR記事です） ▽ Experience the Power of Windows 11 OS, Computers, & Apps | Microsoft ▽ Microsoft Apps ――本日は、はてなエンジニアのid:nobuokaさん、はてな
新サービスのヒントに！韓国で話題のwebサービス60選！
※記事内のURLを新しいタブで開きたい場合は、Ctrlキーを押しながらURLをクリック（Macの場合はCommandキー）してください Tweet 初期たった4人で開発していたカカオトークは、今や韓国人口の半分が使う大物SNSになりました。 大学で生まれたFacebookは、今や全世界9億人に愛されるSNSになっています。 特に莫大な資金がなくてもアイディアとスキルだけで世界で通用するサービスができあがることが多くのサービスによって証明されています。 一発逆転を狙って新しいサービスの開発に挑戦する開発者はたくさんいらっしゃると思います。 何もない状態でひらめくアイデアもあれば、既存のサービスを使ったり調べる中でヒントを得ることもありますよね。 隣国、韓国は日本と社会構造も人々の感覚も似ているところが多々ありますので、韓国の事例をぜひ参考にしてみてください。 ※格サービスの名前の横に書いてあ
iOSアプリ開発を捗らせるツールのまとめ
iOSアプリ開発で自分がよく使うツールとサービスについてまとめてみました。 BaaS: Parse.com ソーシャルな機能は持たせたいけどサーバ作るのだるい、そんなアプリ開発者の味方がBaaS(Backend as a Service)です。最近熱いですね。Kinvey, StackMobなども試してみましたが、機能的にも料金的にも一番おすすめなのがParse.comです。100万APIまで無料、100万〜1500万APIまで$199という価格設定です。サーバは書くのが嫌というよりデプロイがめんどいくさいんですよね。BaaSなら一瞬でアクティブになりますので捗ります。 リファレンス: Dash 高速にリファレンスを検索したい時、Dashが使えます。 iOS以外にもjQuery,Android,Rails等ひと通り揃っています。 リポジトリ: github リポジトリは何でも言いっちゃ何で
RESTful Web アプリの設計レビューの話
1. RESTful Web アプリの 設計レビューの話 和田 卓人 (a.k.a id:t-wada or @t_wada) July 23, 2012 @ sendagaya.rb 3. 自己紹介 名前: 和田 卓人 (わだ たくと) ブログ: http://d.hatena.ne.jp/t-wada メール: takuto.wada@gmail.com Twitter: http://twitter.com/t_wada タワーズ･クエスト株式会社 取締役社長 4. 私と REST (input) • WEB+DB PRESS vol.32「REST アーキテクチャスタイル入門」 • はてぶ設計議論 • DHH の RubyKaigi 2006 Keynote • WEB+DB PRESS vol.38∼「REST レシピ」 • 『RESTful Web Service』
“加藤公一レオ”の「広告業界的ぶっちゃけ話」 - 第１回：最強の売れる広告マンになるための『50の小言』（ファインドスター広告ニュース）
“加藤公一レオ”の「広告業界的ぶっちゃけ話」 通販王国と言われる九州で、一貫してダイレクトマーケティング型ネット広告に従事し、ネット広告の第一人者と言われる株式会社売れるネット広告社の加藤公一レオ氏の広告業界的“辛口コラム” 「一般の広告マン」から脱して「売れる広告マン」になるには？ 私は大学卒業後、三菱商事株式会社に入社して、商社マンとして社会人をスタートして、「もっと華やかな仕事がしたい」というミーハーで不純な動機で25歳の時に広告業界（広告代理店）に入った。最初の配属は営業局だった。 そこから、20代は死ぬほど働いた。毎晩朝の3～4時ぐらいまで働いて、タクシーで家に帰り、また朝出社する生活の連続だった。 まだ未熟者の若手だったので、 “王道の広告マン（営業）”をやっていた。 上司からは「売上を上げろ！」と言われいつも怒鳴られ、 スタッフからは「仕切りが悪いよ営業さん！」といつもいじめ
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
システム・エンジニアの基礎知識
The SQL Injection Knowledge Base