LLMのRAGアプリケーションにおけるオブザーバビリティを向上するツール「Phoenix」の紹介 - Assured Tech Blog
LLMのRAGアプリケーションにおけるオブザーバビリティを向上するツール「Phoenix」の紹介 始めに こんにちは、エンジニアの大橋です。 LLMを用いたRAG（Retrieval-Augmented Generation）アプリケーションの開発において、精度向上のための評価方法に悩まれている方も多いのではないでしょうか。 今回、AssuredではRAGアプリケーションの評価にPhoenixというツールを導入してみました。Phoenixを利用することで、LLMに何を入力しどんな出力を得られたのかを可視化し、品質を改善させるサイクルを素早く行えるようになり、RAGアプリケーションの精度向上に非常に有用だったので、その活用方法をご紹介したいと思います。 実はPhoenixを使い始める前に、DeepEvalというLLM評価ライブラリのみを利用して、LLMの生成結果の評価を行おうとした時期があり
Dataform を使った GAS によるデータ運用からの脱却
論文紹介：Direct Preference Optimization: Your Language Model is Secretly a Reward Model
いつでも最高のプロダクトを生み出す「最高の開発チーム」を作りたい！ いまどきエクストリームプログラミングなのはなぜか？ 角谷信太郎 林尚之 対談 - Agile Journey
アジャイル開発の方法論やフレームワークはいくつかありますが、ユーザベースのスピーダ事業では執行役員CTOである林尚之さんの主導によりエクストリームプログラミング（XP: eXtreme Programming）を全面的に採用しています。2023年3月にはアジャイル関連書籍の共訳・監訳などで幅広く活動される角谷信太郎さんがエクストリームプログラミング顧問として就任し、エンジニア組織の向上に取り組んでいます。 当初は「いまどきXPで大丈夫か？」と半信半疑だった角谷さんですが、かなりの規模でXPを実践できていることに驚いたそうです。そんな角谷さんと林さんが、アジャイル開発を推進する上で大切なことは何か？ 拡大する開発組織全体をアジャイルに保ち続けるにはどうすればよいのか？ について正面から語り合いました。 ユーザベースがアジャイル開発を始めるきっかけ 最高のプロダクトというより「最高の開発チーム
すぐに役に立つものはすぐに陳腐化してしまうから方法ではなく設計の本を読む - API Design Patterns の読書感想文 - じゃあ、おうちで学べる
あなたがさっきまで読んでいた技術的に役立つ記事は、10年後も使えるでしょうか？ほとんどの場合でいいえ はじめに 短期的に効果的な手法や知識は、ソフトウェア開発の分野において、急速に価値を失う傾向があります。この現象は、私たちが何を重点的に学ぶべきかを示唆しています。最も重要なのは、第一に基本的な原理・原則、そして第二に方法論です。特定の状況にのみ適用可能な知識や即座に結果を出すテクニックは、長期的には有用性を失う可能性が高いです。これは、技術や手法が時間とともに進化し、変化していくためです。 learning.oreilly.com 「API Design Patterns」は、このような考え方を体現した書籍です。しかも480 ページもあります。本書は単なる手法の列挙ではなく、Web APIデザインの根幹をなす原則と哲学を探求しています。著者のJJ Geewax氏は、APIを「コンピュータ
RAGを専門用語に強くする手法「Golden-Retriever」
株式会社ナレッジセンスは、生成AIやRAGを使ったプロダクトを、エンタープライズ向けに開発提供しているスタートアップです。本記事では、RAGの性能を高めるための「Golden-Retriever」という手法について、ざっくり理解します。 この記事は何 この記事は、RAGシステムを専門用語に強くするための手法「Golden-Retriever」の論文[1]について、日本語で簡単にまとめたものです。 今回も「そもそもRAGとは？」については、知っている前提で進みます。確認する場合は以下の記事もご参考下さい。 本題 ざっくりサマリー Golden-Retrieverは、RAG（Retrieval Augmented Generation）を、業界特有の用語・社内用語を含むような質問に強くするための手法です。カリフォルニア大学の研究者らによって2024年8月に提案されました。 従来のRAGシステム
難しい仕事を振られた時にわかる、できる人・できない人の違い 人事や経営者からの評価が低い人の口癖
株式会社らしさラボ 代表取締役 伊庭正康氏の『研修トレーナー伊庭正康のスキルアップチャンネル』では、業績の悩み、効率の悩み、マネジメントの悩み、コミュニケーションの悩み、モチベーションの悩みなど、仕事の悩みを解決できるビジネスメソッドを紹介しているチャンネルです。今回は人事や経営者からの評価が低い人が言いがちなワードを解説します。 ■動画コンテンツはこちら 仕事ができない人の5つの話し方 伊庭正康氏：どうもこんにちは、伊庭正康です。今日は一瞬でバレる「仕事ができない人の話し方5つ」を紹介します。今日一番言いたいことは、言葉のチョイスによって知らないところで嫌われてしまっているということ。これはもったいないですよね。ぜひ今日お伝えすることと、逆のことをやってみてください。 では行きましょう。まず1つ目。できない人は「否定の切り返しをしがち」。例えば「いや違うんです」って言う人いませんか？ こ
優秀な人材が離れていく上司の特徴 少ない労力で結果を出す組織のリーダーが使っているフレーズ
株式会社らしさラボ 代表取締役 伊庭正康氏の『研修トレーナー伊庭正康のスキルアップチャンネル』では、業績の悩み、効率の悩み、マネジメントの悩み、コミュニケーションの悩み、モチベーションの悩みなど、仕事の悩みを解決できるビジネスメソッドを紹介しているチャンネルです。今回は少ない労力で結果を出す組織のリーダーが使っているフレーズを紹介します。 ■動画コンテンツはこちら 優秀な人材が離れていく上司の特徴 伊庭正康氏：ロジカルじゃない上司はこの時代厳しくなってきています。「これが言えなきゃ上司失格」ということで、今の時代、ロジカルさがないともう上司は務まりません。だとすれば、優秀な部下もついてこなくなります。 でもこの5つのフレーズを使っていただくだけで、あなたは誰よりもロジカルな上司になれる、そんな話をしていきます。ロジカルがあればやることが少なく、結果を出しやすくなるという話です。 今日は『で
退職願いを出したら「明日から来なくていい」と言われました。なんかアドバイスありますか？→適切な対応方法についてのノウハウが続々と寄せられる
TAMAKI YUKIHIRO @abios_2004 @1hWWbJ3kohmFzUL 「明日から来なくていい」は業務命令なので、業務命令を守って、退職日までの給料はきっちりもらうと良いと思います
【ちょくだい】競プロer採用のミスマッチが起こる理由と、開発者体験が高いチームのつくり方【Developer eXperience Day 2024 レポート】 | レバテックラボ（レバテックLAB）
TOPコラムテック最前線レポート【ちょくだい】競プロer採用のミスマッチが起こる理由と、開発者体験が高いチームのつくり方【Developer eXperience Day 2024 レポート】 【ちょくだい】競プロer採用のミスマッチが起こる理由と、開発者体験が高いチームのつくり方【Developer eXperience Day 2024 レポート】 2024年8月20日 AtCoder株式会社 代表取締役社長 高橋直大（ちょくだい） 2012年、慶應義塾大学環境情報学部卒業。2014年、慶應義塾大学院政策メディア研究科卒業。2008年に、Microsoftが主催するプログラミングコンテスト「Imagine Cup」で世界3位を獲得。その後、ICFP Contestの4度の優勝、TopCoder Openの2度の準優勝など、プログラミングコンテストにおいて多くの成績を残す。2012年に、
「掛け算の順序問題」について思うこと
正直なところ言及したくない話題なのですが、最近あまりにもひどい動きが散見されるので今の私の考えを書き留めておくことにします。 予めこの記事で「しないこと」について記しておきます： 丁寧な背景説明 現行の教育方針に対する是・非の判断 何が問題なのか？ 客観的な事実 数 a と数 b があったとき、a\times b と b\times a は同じ結果をもたらします。両者は等号で結ばれるものであり、両者に数学的な違いは存在しません。これ自体は疑いようのない事実であり、誰の目にも明らか[1]です。 注意すべきなのは、このことを理解するために高度な数学の知識は全く必要がないということです。つまりここで「実数体の乗算の性質が」とか「可換環が」とか言い出すのは追加の情報を与えないので無意味な行為です。 そしてそれは同時に、高度な数学の知識を有していることがこの問題に向き合うにあたってアドバンテージにな
【相続税対策22選+7つの控除】注意点・節税ポイントを税理士が解説！｜相続大辞典｜【相続税】専門の税理士60名以上｜税理士法人チェスター
例えば、被相続人の遺族が「配偶者、子、父」である場合、法定相続人は「配偶者、子」の2人となります（父は第2順位であり、第1順位の子がいるため相続人にはなれません）。その場合、基礎控除額は、（3,000万円＋（600万円×2人））＝4,200万円となります。 仮に、このご家庭の相続財産が4,000万円だった場合、基礎控除額以下なので、相続税は発生しません。 一方、相続財産が5,000万円だった場合には、5,000万円－基礎控除額4,200万円＝800万円が相続税の課税対象となります。 1-3.相続税対策の仕組みには、大きく分けて2種類がある相続税の課税額を減らすための「相続税対策」には、大別すると2種類があります。 1つ目は、相続の開始までに、相続税の課税対象となる相続財産を減らしておく方法です。基礎控除額を超える相続財産が少なくなれば、相続税の課税は圧縮されます。相続財産が基礎控除額以下に
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
1万円切りのメモリ2GB版のRaspberry Pi 5が発売
Apple Vision Proを20人に被ってもらって気づいたこと
「これマジで美味いよ」適当に切ったトマトをオリーブ油で炒めて、弱火で放置。スパゲッティは粗塩多めで茹でるだけのシンプルなレシピ「トマトだけのスパゲッティの作り方」
ニンテンドーミュージアム | 任天堂
付き合う前に確認しておくことってありますか？友達に言われたのは、借金と宗教←先人の「これは確認しておいた方がいい」が多数集まる