AIによる開発者体験の改善でわかったAI自動化の課題｜noteエンジニアチームの技術記事

note株式会社推薦チームの漆山です。 推薦チームでは、開発プロセスの効率化と品質向上を目的に、AIを利用した自動レビューシステムの改善を続けています。 前回の改善まででは、プルリクエストの説明文とレビューの自動生成をPython + Amazon Bedrockで実装しました。コミュニケーションの質を上げ、レビューなどの工数を削減することができました。 この記事では、直近の改善点とともに、自動化に取り組んできたからこそ見えてきた課題について紹介したいと思います。 直近の改善点プロンプトの改善と実行環境の整備基本的なプロンプトの見直しを行い、レビューの質を高めました。ユーザーストーリーを評価する際に、チェック項目に基づき定性的な評価を行い、必要な修正点を可視化するようにしています。 <checklist> 1. タイトルは要求者の観点で記述されているか？ - "As a [role], I