ECSへデプロイ完了タイミングについて考える
背景 ECS上のコンテナが Running になってから通知やECS Execを行いたかった ただ「ECSサービスを更新リクエストしたタイミング」と「ECSサービスの更新が完了（新規追加されたコンテナがRunningになる）タイミング」は異なる ECSサービスの更新が完了してから後続の処理（job）を実行するために必要だったことを残す 前提 事前にECSサービスが構築されている CircleCIからはECSに対して更新だけを行うため 使うもの CircleCI CircleCI Orb パイプラインの中身 パイプラインは以下のような中身になる イメージをビルド イメージをプッシュ タスク定義を更新 サービスを更新 コンテナへ処理（ECS Exec）をしたければここ デプロイ完了通知 CircleCIでは1,2についてはECR Orbを使用すれば構築できる 3,4はECS Orbを使用すれば
Circle Internet Services, Inc. (CircleCI) CEO 来社報告 | BLOG - DeNA Engineering
2023.09.15 インタビュー Circle Internet Services, Inc. (CircleCI) CEO 来社報告 by Hisashi Iguchi #CircleCI #CI/CD こんにちは！品質本部品質管理部SWET第二グループの井口 ( @hisa9chi ) です。 弊社では世界各国で利用されている CircleCI を約8年前から利用しており、Circle Internet Services, Inc.(以降、CircleCI 社)と良い関係性を築けてきています。今回、 CircleCI 社の CEO Jim Rose 氏が来日した際、弊社を訪問していただきました。 当日は挨拶にとどまらず、CircleCI 社の Jim 氏と弊社の常務執行役員である小林と開発現場のエンジニアである厳、成田の2名も加わってディスカッションを実施しました。 今回の Circ
お財布に優しいCI改善小ネタ集 - メドピア開発者ブログ
こんにちは。サーバーサイドエンジニアの三村（@t_mimura）です。 主に保険薬局と患者さまを繋ぐ「かかりつけ薬局」化支援アプリ kakariのサーバーサイド開発（Ruby on Rails）を担当しています。 今回はRailsシステムのCI時間をコスト追加なしで半減した話をします。 目次 前提 対象プロジェクト CIの状況 改善結果 改善内容 前提知識: CIのキャッシュ機能 webpack buildのキャッシュを活用 RuboCopのキャッシュを活用 ESLintのキャッシュを活用 Jestのキャッシュを活用 RSpec Jobをテスト特性ごとに分割 CircleCIのリソースクラスと並列数の最適化 採用しなかった・見送った改善候補 HAML-Lint, Fasterer, Brakemanのキャッシュを活用 Stylelintのキャッシュを活用 bootsnapを活用 Jestの
ソシャゲサーバー開発するとき始めに考慮しておかないと死ぬポイント備忘録
事前知識編 システム開発するプログラマも読んでおいたほうがいい資料とか。 今時のシステムならまず仕様や運用に反映される。されてなかったらむしろこっちから確認取りに行った方がいい。 JOGAガイドライン 昔ガチャとかが問題になったときに出てきた協会のガイドライン。 オンラインゲーム安心安全宣言 オンラインゲームにおけるビジネスモデルの企画設計および運用ガイドライン ランダム型アイテム提供方式を利用したアイテム販売における表示および運営ガイドライン オンラインゲームガイドライン 開発環境編 GitHubみたいなPullRequestを出せる環境 GitだけじゃなくてGitHub。必然的に規模が大きくなるのでプルリク出して進めることになります。 CIまで設定をする 最初のうちにCircleCIのようなテストの自動実行する仕組みまで揃えてしまっておいたほうが良いです。後からだとそもそも対応できなく
CircleCIのAPIを利用して、過去24時間の大まかなクレジット利用量を把握する | DevelopersIO
CircleCIを利用していると、クレジット消費量を分析して、削減を検討することもあると思います。 Insightsダッシュボードでも閲覧できますが、「わざわざ見に行く」という動機が薄かったり、うっかり忘れることもありえます。 そこで、CircleCIで利用したおおよそのクレジットを把握するためのスクリプトを作成してみました。 本記事ではスクリプト作成のみですが、Lambdaで動かしてSlackに通知するなどをすることで、気づきを得る機会になればと思います。 昨日はたくさん動かしたから、まあ、増えるよね あれ？ 昨日はそんなに動かしてないけど、そこそこ増えてるね。なんでだろう？ おすすめの方 CircleCIのAPIを利用したい方 CircleCIで利用したおおよそのクレジットを把握したい方 重要 公式ドキュメントに下記の記載があります。 取得できるデータは、リアルタイムのデータではない
GitHubのこの世で一番シンプルなシェルスクリプト(add,commit,pushするだけ) - BNBのプログラミング勉強記録
なんすかこれ 仕事だともっと複雑なシェルスクリプトが必要なんだろうけど、一人でいごいごやってるだけの俺のような人間からすると、もっとシンプルなやつが欲しい。という訳でほとんど検索にも引っかからないようなサイトながら、俺もそんなサイトに助けられまくってるので書くぜ〜 前提(俺の環境) MacBookPro2015(Monterey) VSCode ターミナルはzsh(標準) GitHub ブランチ名はmain 手順 アプリのルートフォルダ上にg.shというファイルを作る そこに下記のコード1をコピペ cdでアプリのルートフォルダに移動しておく そこで「./g.sh "コミットメッセージ"」と入力。コミットメッセージは任意のものを入れてください。ちなみに俺は日本語でgと入力すると「./g.sh ""」と変換されるようにしています。 まとめてadd,commit,pushしてくれる コード1 #
9/11 CircleCIプチ伝授 - 生存報告所
9/11(月) 睡眠時間5時間 いつも通り会社のエレベーターに乗ると、突然ドアに光が照射され目がくらむ。気づくとビジネスツールについての映像が始まり、同時に目的の階に着いたことを知らせる音がした。とうとうエレベーターの乗車時間にまで資本主義の影が延びることになったらしい。 低い階の人にまで見てもらおうと思ったら、15秒よりもTiktokの6秒広告ぐらいの方が良いと思うんだが。 やったこと 仕事 買い出し まんだらけ通販 雑務消化 感想 仕事。さてやることは沢山ある。 午前中はNginxに再びトライ。しかし、何も分かりませんでした…。 Dockerの起動自体は出来るが、同じくローカルで立てたAPIサーバーに繋がらない…。ポートの問題かなぁ…と思いつつちょっと途方に暮れた。寝かせることにする。 午後は主にCircleCIの質問対応。こういう意図で書いたんですよーという話をしたり、例を見せたり。
CircleCIのプロジェクト用環境変数管理ツールccienvの紹介 - Retty Tech Blog
概要 Retty Advent Calendar 2022 17日目は、エンジニアの堤が担当します。 昨日は、ヤマモトマユミさんの じわじわハマるカップ酒のデザイン｜ヤマモトマユミ/Retty｜note でした。 CircleCIのプロジェクト用環境変数を管理(リスト・作成・削除)するためだけのツールを作成したので、その紹介をします。 github.com セットアップ方法はGitHubをご覧ください。 ちなみに、現在はGitHubのCircleCIプロジェクトにのみ対応しています。 概要 想定読者 Summary 使い勝手 rmコマンド lsコマンド addコマンド 作成背景 構成・利用module等紹介 alecthomas/kong go-survey/survey grezar/go-circleci 最後に 想定読者 CircleCIプロジェクト管理者 golangでのCLI作成
Visual Studio CodeでCircleCIの拡張機能が公開されてたので触ってみた - とことんDevOps | 日本仮想化技術のDevOps技術情報メディア
社内のSlackで流れてきて知ったのですが、Visual Studio Codeの拡張機能にCircleCIが追加されていたので、早速触ってみました。 リリース日を見てみると2022/11に公開されていたみたいです。 CircleCIとは CircleCIは、クラウドベースの継続的インテグレーション（CI）および継続的デリバリー（CD）プラットフォームの1つで、 ビルド、テスト、およびデプロイのパイプラインを簡単に構築できるようにするサービスです。 最先端の CI/CD ツール - CircleCI Visual Studio Codeとは Visual Studio Code (VS Code)は、Microsoftによって開発された無料のオープンソースの統合開発環境(IDE)です。 ↓🔰インストールから始める方はこちら🔰↓ Visual Studio Codeをインストールしよう(
GitHub ActionsやCircleCIで連続Pushした時の振る舞いをどうするべきか考えてみた - とことんDevOps | 日本仮想化技術のDevOps技術情報メディア
CI/CDを当たり前にした状態で開発をしていると短い時間で連続的にPushすることも時としてあるのではないでしょうか。 短い時間で複数Pushしたときは最新の状態で1回だけ実行されれば期待している効果を得ることができますが、Push単位でワークフローが実行されるため、ただの消化試合的なものが生まれてしまいます。 もちろん、リソース無制限で完全無料な何かであればそこまで気にすることはないと思いますが、大体のサービスは一定の利用を超えると従量課金として費用が発生します。 あまりお金のことに関わることが少ないと、コスト意識を持つことは難しいかもしれませんが、少しでも効果の薄い処理は減らした方がよいと思います。 また、並列実行するような処理では一般的に知られていることかと思いますが、順序性が保証されていないので、後から実行されたものが最初に終了することもあります。 もし、コンテナレジストリなどにイ
CircleCI 上で aws-ecr Orb を使った docker build がコケて悩んだ話 - SO Technologies 開発者ブログ
こんにちは、 フォーカセル開発チーム所属の id:hano_tea です。 弊チームではアプリケーションを AWS ECR, ECS を利用して稼働させており、デプロイには CircleCI を利用しているのですが、 先日 CircleCI 周りの設定を見直した際に謎のエラーが発生、ビルドがコケて少しハマってしまいました :sob: エラーメッセージから原因の特定がやや難しいタイプの問題で、同様の現象に遭遇したという記事、情報も特に見当たらなかったため、 記事として原因と対応方法を書き留めておこうと思います。 TL;DR aws-ecr Orb v8 から Multi-arch build がサポートされ、 docker buildx が使われるようになりました 環境によって docker buildx が使えないことがあり、その場合分かりづらいエラーを吐いてビルドがコケます circle
CircleCIのセットアップワークフローを使った差分ビルドで効率的にCIを回す - WHITEPLUS TechBlog
こんにちは。ホワイトプラスでエンジニアをやっている古賀です。 lenet ではCIの一つとしてCircleCI を使っており、静的解析・フォーマットチェック・ユニットテスト（フロントエンド・バックエンド）などを実行しています。 CIにpush するたびに全てのテストを実行すると、変更差分に関係のないテストが実行されてしまい、コードベースが大きくなると非効率な面が際立ちます。 昨年従量課金プランへ移行するのに合わせて、主にモノレポで採用されている差分ビルド（変更差分に関係あるテストのみ回す）を取り入れ、CIの効率化を図っています。 ここでは、CircleCIのセットアップワークフローを使って差分ビルドを行う方法を紹介します。 セットアップワークフローとは 簡単に言うと、ユーザーが動的に設定ファイルを生成し、それに基づいて実行内容を決定できるというものです。 この機能以前も、設定ファイルに書か
CircleCIログをNewRelicに転送する | New Relic Documentation
この機械翻訳は参考用に提供されます。英語版と翻訳版に矛盾がある場合は、英語版が優先されます。詳細については、 を参照してください。 CI/CDログをNewRelicに送信するようにCircleCIWebhookサービスを構成します。 CircleCIでWebhookトリガーを設定する 次の手順を実行して、ログをNewRelicに転送するCircleCIWebhookを設定します。 CircleCIにログインします。 CircleCIプロジェクトの1つに移動します。 [プロジェクト設定]をクリックします。 プロジェクト設定のサイドバーで、[ Webhook ]をクリックします。 [ Webhookの追加]をクリックします。 Webhookに名前を付けます。 New Relicのログエンドポイントを入力してください： 私たち：
GitHubとCircleCIでCI/CDをはじめよう | DevOps Hub | SB C&S
日本仮想化技術株式会社の水野です。 現在のITシステムの開発現場では、激しく変化する要求に対し、柔軟かつ高速に対応することが求められています。DevOpsはそのためのアプローチのひとつですが、DevOpsライフサイクルを高速に回すためには、なによりテスト、ビルド、デプロイを自動化するCI/CDが欠かせません。 そこで本エントリーでは、GitHubとCircleCIを用いて、実際にCI/CDワークフローを動かす手順を紹介します。 なぜCircleCIなのか CI/CDを実現するツールは数多く存在します。まず大きくオンプレミスで運用するか、クラウドサービスを使うかで分けることができますが、運用コスト面から見ても、特別な理由がない限りクラウドサービスの利用を第一に検討するべきでしょう。もちろんこれは、CI/CDツールだけに限った話ではありません。 現在ソースコードホスティングサービスとして、第一
CapistranoとCircleCIを使用した自動デプロイの構築 - Qiita
CapistranoとCircleCIを使用した自動デプロイの構築 目次 はじめに 自動デプロイの重要性 CapistranoとCircleCIの概要 Capistranoの基本 Capistranoとは？ Capistranoのインストールと初期設定 デプロイのフローとタスクの概要 Capistranoでのデプロイ設定 deploy.rbの基本設定 環境固有の設定（例：deploy/production.rb） Passengerの再起動タスクの設定 CircleCIの基本 CircleCIとは？ CircleCIの設定ファイル .circleci/config.yml の概要 CircleCIでの自動デプロイ設定 ワークフローの設定 テスト、Lint、その他の前提タスク デプロイジョブの設定 CapistranoとCircleCIの統合 SSHキーの設定 CircleCIからCapis
CircleCiの処理を追う - Qiita
CircleCiの処理を追う 目次 1. はじめに 2. CircleCIの基本概念 ワークフロー、ジョブ、ステップの定義 config.yml の役割とサンプル 3. 環境のセットアップ：Spin up environment スピンアップとは？ DockerとCircleCIの関係 イメージの選択とカスタマイズ 4. 環境変数の設定：Build Environment Variables 環境変数のソースとその優先度 CircleCIのUIでの設定 config.yml での定義とサンプル 5. 実際のデプロイ処理 Capistranoの基本 CircleCIとCapistranoの連携 6. 環境変数のセキュリティ 環境変数のマスキング ベストプラクティス 7. まとめ 1. はじめに CircleCIは、自動化されたCI/CDツールとして人気を博しています。本記事では、Circle
【2023年版】CircleCI で GitHub プロジェクトをビルド＆テストする - Qiita
本記事で説明すること CircleCI アカウント(Free プラン でももちろんOK)を作成した後、ご自身の GitHub プロジェクトを CircleCI でビルド＆テストする方法をご紹介します。 はじめに 【2023年版】CircleCIにサインアップ(Sign up)に説明した方法で CircleCI アカウントを作成したら、次は、GitHub プロジェクトをビルド＆テストしてみましょう(サンプルでご紹介するのは Python プロジェクトなので、正確にはビルドはしていないのですが)。 CircleCI で GitHub プロジェクトをテストする 1. 前準備 スムーズに作業を進めるため、次の準備をしておきましょう。 CircleCI アカウントの作成 (やり方: 【2023年版】CircleCIにサインアップ(Sign up)) GitHub アカウントの作成 (やり方: Git
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
Setting up CircleCI
CircleCIでStable Diffusionをテストする＋SSHポートフォワーディングでwebuiを実行する
CircleCI で Chrome や chromedriver、Firefox や Gecko を入れる際には circleci/browser-tools という Orb が便利 - 約束の地
