Amazon SWF WorkflowWorkerのクセを読み解く | DevelopersIO
こんにちは、せーのです。今日はSWFにてFlowFrameworkを使用する際に私がハマったポイントをお話します。 要件 今回何をやりたいのか、というのをまずご説明します。バッチ処理が複数のサーバーにわかれていまして、その処理をbat1, bat2, bat3と順番に流したい。bat1が終わってからbat2がスタートする、といった感じで管理をしたいわけです。AWSサービスをこの要件に当てはめると幾つかサービスが考えられますが、今回は柔軟性を考慮してSWFを使ってみたいと思います。 このようにSWFでバッチの流れを管理することで、例えばbat2の処理がすごく時間がかかる場合にはbat2をスケールアウトしてbat2-1〜bat2-100、のように100台くらい並列で並べることで一気に時間短縮になります。またbat2の100台のバッチ処理が全て終了した時点でbat3をスタートする、3回リトライし
AWS News Blog
Amazon SageMaker Geospatial Capabilities Now Generally Available with Security Updates and More Use Case Samples At AWS re:Invent 2022, we previewed Amazon SageMaker geospatial capabilities, allowing data scientists and machine learning (ML) engineers to build, train, and deploy ML models using geospatial data. Geospatial ML with Amazon SageMaker supports access to readily available geospatial dat
What is Amazon Simple Workflow Service? - Amazon Simple Workflow Service
The Amazon Simple Workflow Service (Amazon SWF) provides a way to build, run, and scale background jobs that have parallel or sequential steps. With Amazon SWF, you can coordinate work across distributed components, tracking the state of tasks. In Amazon SWF, a task represents a logical unit of work that is performed by a component of your application. Coordinating tasks across the application inv
Amazon Simple Workflow Service (SWF) 入門 | DevelopersIO
よく訓練されたアップル信者、都元です。今回は、Amazon Simple Workflow Serviceについてご紹介します。これが一体どんなサービスなのか、本エントリを読めば、きっとあなたの道具箱にも新しいコンポーネントが増えることと思います。 ワークフロー 「ワークフロー」が何なのかが分からなければ、SWFを理解するのは難しいので、まずここから。 一般に、ワークフローシステムと言うと、会社の管理業務における各種申請稟議の決裁に関する仕組みを思い浮かべます。申請の種類によって、上長や関連部門長の判断を仰ぎ、その結果、申請が通ったり却下されたりします。この申請はいつ誰の権限で承認されたのか、この申請は誰によってなぜ却下されたのか、そういった証跡を軸に内部統制を強化したり、業務の効率化を図るためのシステムです。各段階において、人と人とのフローを制御するため、これをヒューマンワークフローと呼
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
What is Amazon Simple Workflow Service? - Amazon Simple Workflow Service
aws-flow-ruby-samples/s3_activity.rb at master · awslabs/aws-flow-ruby-samples · GitHub
