バッチ処理における冪等性の検討 ─ クラウドネイティブもしくは、はてなダイアリーの自動移行を題材に - Hatena Developer Blog
アプリケーションエンジニアのid:tkzwtksです。今回はバッチ処理の冪等性（べきとうせい、idempotence）について、どう考えるか／考えてきたかをご紹介します。 このエントリを書くきっかけとなったのは、はてなエンジニア有志で定期的に開催しているCloudNative推進会です。ここでは、社内のシステムをクラウドネイティブにしていくため「クラウドネイティブなシステムとはどういうものか？」を考えており、この会での「クラウドネイティブなバッチ処理」の議論も踏まえつつ説明していきます。 バッチ処理における冪等性とは メッセージ送信の信頼性を考慮する クラウドネイティブで可用性を高めるために どのような場合に冪等性を考慮すべきか 冪等な実装における3つのケーススタディ ケース1: n分前までに更新されたレコードを集計する ケース2: DB上の対象レコードを更新する ケース3: 対象ユーザー
AWS関連資料の検索方法まとめ － ドキュメント、ブログ、サービス別資料、ナレッジセンター、よくある質問、ワークショップ、ソリューション、ホワイトペーパー、アーキテクチャ、ハンズオンなどの自己流検索 - NRIネットコムBlog
小西秀和です。「APN AWS Top Engineers/APN Ambassadors Week」の2日目は私が記事を書かせていただきました。 このWeek企画のきっかけでもあるAWS ALL Certifications Engineer(旧称：APN ALL AWS Certifications Engineer)、AWS Top Engineer(旧称：APN AWS Top Engineer)の表彰ですが、選出されるためには評価の加点となるAWS認定の取得とブログ・書籍・登壇などのアウトプットが求められます。 こうしたアウトプットには元となるインプットが必要で、そのインプットの効率化には大量にあるAWS関連資料の検索方法を工夫することも重要な要素です。 今回、このような表彰までの活動を振り返るいい機会を頂いたので、これまでの自己流のAWS関連資料の検索方法について整理し、その内
CLI で覚える Google BigQuery
こんにちは。データサイエンスチームの t2sy です。 Google BigQuery は、Google が提供する高スケーラビリティでコスト効率に優れたサーバーレス型のクラウド データウェアハウス (DWH) です。BigQuery 以外のクラウド DWH は AWS が提供する Amazon Redshift や Microsoft が提供する Azure Synapse Analytics などが挙げられます。 BigQuery を操作する方法は Cloud Console の Web UI、bq コマンドラインツール、REST API、クライアントライブラリの4つがあります。この記事では、bq コマンドラインツールで BigQuery を操作し、使い方を確認してみます。内容としては初学者向けです。 今回、使用する Google Cloud Platform（GCP）のサービスは G
技術ブログをバズらせたくて必死で身につけた情報収集術 - omuriceman's blog
僕は2019年4月から技術ブログを始めているが、2ヶ月目くらいから「はてなブックマークでホッテントリを取るための情報収集」を心がけるようになった。その影響もあって何記事かはてなブックマークでホッテントリ入りすることもできたので、これから技術ブログなどでアウトプットを始める人の役に立てばいいなぁと思ってブログでまとめることにした。技術ブログを書く人でなくても情報収集先として参考になる部分はあると思う。 はじめに GitHub Trending プログラミング言語はPythonとJavaScriptとTypeScriptを重点的に見る プログラミング言語以外にもUnknown languagesをチェックする Advanced searchで直近の日付に絞り込む GitHub Trendingを参考にしたブログ記事 Product Hunt Product Huntを参考にしたブログ記事 Re
導入3分！RSSフィード29種一括登録でAWS最新情報を漏れなくチェック | DevelopersIO
「AWSの公式情報、なんかいまいち全部チェックできてない気がする…」 AWS事業部たるもの、AWSの最新情報チェックは欠かせません。社内のチャットやtwitterのTLや公式Webでくまなくチェックしているつもりだったんですが、なんかいまいち、漏れが多かったんですよね。 というわけで、AWSの公式最新情報を整理しながら、RSSフィードを一括登録できるOPMLファイルを作りました。導入はすぐできるので、とりあえず登録していただいたのち、公式情報にどんなものがあるのか、知っていただければいいなというのがこちらの記事でございます。 全135サービスのドキュメント更新履歴を一括登録できるRSSフィードも公開しています。こちらも合わせてどうぞ。 5分間の設定でAWS135サービスのドキュメント更新情報を一括RSSフィード登録する ｜ DevelopersIO __ （祭） ∧ ∧ Y ( ﾟДﾟ)
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
