LLMアプリケーションを改善したければLangfuseを使ってみてほしい～トレース確認からプロンプトの評価までの流れ - TechDoctor開発者Blog

1. はじめに LLMアプリケーションを開発・運用していると、ぶつかりがちな壁があります。「なぜこの出力になったのか分からず改善が進まない」「プロンプトやモデルを変更したいけれど影響範囲が読めない」などです。 私たちテックドクターでは、こうした課題に対して、LLMアプリケーションのオブザーバビリティ・評価プラットフォームであるLangfuseを使うことで対処しています。 この記事では、弊社のヘルスケアアプリケーション開発の実例を交えながら、トレースによる挙動の可視化、プロンプトの一元管理、データセットの構築、そして簡易的なプロンプト評価（Prompt Experiments）の実行まで、Langfuse活用の一連の流れを解説していきます。 こんな人に読んでほしい LLMアプリケーションの開発・運用に携わるエンジニア Langfuseの導入を検討している方 2. 導入背景 弊社ではLLMを活

[misshiki]

LangfuseはLLMの入出力・コスト・処理をトレース可視化し、プロンプト管理とデータセット評価を統合。可視化→改善→比較のサイクルを回しやすくする開発基盤。

[nguyen-oi]

LLMの評価とオブザーバビリティは結局ここに行き着くよな。Langfuseの実践的な使い方は開発者には助かるだろ。この手の泥臭い改善が一番効く

[ishikawadaiju]

編集しました！