LangChainから使用するLangSmithとLangfuseの詳細比較
はじめに この記事で想定している読者の方 LangChain経由でLLMを用いたchainを使用している方 LangChainと共に使用するLLM実験管理ツールを迷っている方 「LangChain」はLLMをシステムに組み込む際に非常に便利なライブラリであり, 実際に開発に用いられている方も多いと思います。ですが, LLMの性質上プロンプトやchainの構造を変化させての実験が多くなってしまい, 記録・管理が大変になりがちです。そんな場合に使用したいLLMの実験管理ツールについて前編の記事にてLangChainから使用するために選定したLangSmithとLangfuseについて今回は実装を行った上で比較して行こうと思います! TL;DR 今回は以下の画像のデモアプリを作成し3種類のchainについて実際に記録しLangSmithとLangfuseの比較を行いました! デモアプリの入力画面
bliki: Cannot Measure Productivity
We see so much emotional discussion about software process, design practices and the like. Many of these arguments are impossible to resolve because the software industry lacks the ability to measure some of the basic elements of the effectiveness of software development. In particular we have no way of reasonably measuring productivity. Productivity, of course, is something you determine by looki
何が事業貢献なのか分からなくなっていた伊藤直也さんが再認識したユーザーエクスペリエンスへのコミット - Findy Engineer Lab
ソフトウェアエンジニアは、どのように事業に貢献すべきか？ 宿泊施設やレストランの予約サービスを提供する株式会社一休で執行役員CTOを務める伊藤直也さんは、2016年に入社しておよそ2年間、心の奥に抱えた悩みを解消できないまま仕事をしてきました。 伊藤さんは、2000年代から複数のWeb系テックカンパニーで技術部門のリーダーとして活躍し、現在でも利用される個人向けWebサービスのローンチをいくつか手掛けています。一休には入社以前からフリーランスで技術顧問を務めており、会社がヤフーグループ（当時）に入って経営陣が一新されるタイミングで、代表取締役CEOとなった榊淳さんの要請を受けて入社しました。 当時は全て.NETだったというサービス基盤の刷新や技術的負債の解消、開発組織の整備といったエンジニアリングにおいて重要な改善を進めてきましたが、あるとき自身が「事業に貢献していない」ことを明確に意識す
「開発生産性を上げる改善」って儲かるの？に答えられるようにする / Is development productivity profitable?
2024/6/28 開発生産性カンファレンス2024 登壇資料
ホフスタッターの法則 - Wikipedia
ホフスタッターの法則（ホフスタッターのほうそく、英語: Hofstadter's law）とは、ダグラス・ホフスタッターが1979年の著書『ゲーデル、エッシャー、バッハ』の中で提唱した自己言及的な格言であり、かなり複雑な作業を完了するためにかかる時間を正確に見積もることができないという、広く経験されている困難さを表現したものである[1][2]。 Hofstadter's Law: It always takes longer than you expect, even when you take into account Hofstadter's Law.[2] この法則は、『人月の神話』や「エクストリーム・プログラミング」など、生産性を向上させるための技術の議論において、プログラマがしばしば引用する[3]。 歴史[編集] 1979年、ホフスタッターは、チェスをプレイするコンピュータについ
LeanとDevOpsのためにE2Eテストができること
2024.6.29に行われた「開発生産性Conference2024」の登壇資料です。 https://dev-productivity-con.findy-code.io/2024
Google Workspace レポートと監査ログを解説！プランによって何が違う？ - G-gen Tech Blog
こんにちは G-gen の渡邉@norry です。 Goole Workspace を運用する際に管理者が特に気になる事の一つとして、セキュリティー関連のレポートや監査ログがあるかと思います。 常日頃のガバナンス管理、有事の際での証跡として...今回は Google Workspace でどういったログが取れるのかのご案内と、プランによっては取得出来ないログもありますのでその点にも触れます。 Google Workspace の機能比較やプラン一覧はこちらをご覧ください。 blog.g-gen.co.jp レポート レポートの表示方法 レポートの種類 監査ログ 監査ログの表示 Google Workspace で利用可能な監査ログ プラン別の違い Google Workspace プラン別項目一覧 ログ出力のタイムラグ 保持期限 ログのエクスポート エクスポートについて スプレッドシート、
「ギャルのお悩み相談」も パーソルが社内GPTの“プロンプト掲示板”を作ったら、何が起きたのか
受け身の姿勢にとどまらない積極的な活用のために、大会形式のイベントも実施。「AI Prompt Cup 2023」では、プロンプトの書き方と、その成果物を研修の受講者がシェアし、特に活用したいものを表彰する仕組みを取った。 「（プロンプトカップを）企画したのは、ITのバックグラウンドもなければ社会人歴も浅い若手が中心。『自分たちと一緒に学び、マスターしよう』と、テクノロジー活用にこれまで積極的ではなかった人たちも入りやすい雰囲気を作っていきました」（朝比奈氏） 現場で独自の活用を 「小さなAI」を準備 このようにして、グループ内での活用を促進しているパーソルグループ。生成AIの活用に当たっては大きく3つの領域を設け、それぞれで施策を展開している。 まずは、グループの事業変革に向けた領域だ。経営レベルで取り組むものとしており、ディスカッションを重ね「これからトライしていく」（朝比奈氏）。 2
FORCAS（フォーカス ）/FORCAS Form(フォーカスフォーム）
■FORCAS■ 150万社以上の企業データをもとに、マーケティングや営業の成果を高めます。有価証券報告書に記載された経営課題や、導入しているサービス、行動データなど豊富な切り口の企業データをもとに受注しやすい顧客を可視化し、効率的に売上を最大化します。 ■FORCAS Form■ Salesforceでのリード・取引先登録を大幅に簡略化し、簡単な操作で正確な企業情報を入力できる機能。名称の一部を入力すると、候補企業が提案され、その中から選択するだけで簡単に取引先を作成することができます。
AIエージェントは何から取り組む？社内取り組み紹介 - AITC - ISID | AI トランスフォーメンションセンター コラム
こんにちは！AIソリューショングループの太田です。 このコラムでは生成AIエージェントは知っているが、何から始めるべきか分からない方向けに、生成AIエージェントを使った問い合わせ対応の取り組みを紹介します。 さらに、私たちの生成AIエージェント開発の失敗談や工夫点も紹介しています。 みなさんの今後の開発や検証の参考になれば幸いです。 生成AIエージェントとは？ 生成AIエージェントは何ができますか？ 最初におすすめの検証 電通総研の取り組み紹介 問題設定：ヘルプデスクの一次回答 挑戦的なポイント 開発に利用したもの 活動１）エージェントのワークフローを準備 活動２）評価データセットでの精度検証と課題の洗い出し 活動３）ナレッジのドキュメント化 活動４）各LLMの観測範囲のチューニング 活動５）計画のプロンプトエンジニアリング 活動６）ツール呼び出しのチューニング 活動７）振り返りのプロンプ
生成AI悪用で脆弱性を突く「自律サイバー攻撃」、GPT-4利用なら成功率87％
便利な生成AI（人工知能）だが、悪用もされている。代表例が、マルウエア（悪意のあるソフトウエア）やフィッシングメールの作成だ。そして今回、米イリノイ大学アーバナ・シャンペーン校（UIUC）の研究者らによって、新たな悪用の可能性が示された。ソフトウエアの脆弱性（セキュリティー上の欠陥）を突く攻撃への悪用だ。 脆弱性に関する公開情報を教えるだけで、脆弱性のあるコンピューターに対して自律的に攻撃を仕掛けるという。大規模言語モデル（LLM）のGPT-4を利用した場合の成功率は87％。本当にそのようなことが可能なのだろうか。 狙われる「ワンデイ脆弱性」 ソフトウエアの脆弱性を突くサイバー攻撃が後を絶たない。攻撃者は脆弱性を悪用してインターネット上のサーバーや企業ネットワークなどに不正侵入する。近年では、インターネットと企業ネットワークの境界に設置されたVPN（仮想閉域網）装置の脆弱性を悪用することが
次の主役「生成AIエージェント」、GoogleやOpenAIがまだ出さない怖い理由
今週、2024年5月第3週は、米OpenAI（オープンAI）と米Google（グーグル）が相次ぎ、生成AI（人工知能）の新機能を発表した。しかし期待されながらもリリースされなかった機能があった。生成AIが様々なアプリケーションをユーザーに代わって操作する「生成AIエージェント」だ。 今の生成AIの主役は「チャットボット」であり、ユーザーの指示（プロンプト）に対して返事をしてくれるだけだ。しかし生成AIエージェント（AIエージェントとも呼ばれる）は外部のプログラムをAPI（アプリケーション・プログラミング・インターフェース）やUI（ユーザーインターフェース）経由で操作できるので、ユーザーの指示に従って様々な作業をしてくれる。 ユーザーに代わって「商品の返品」を処理 実際にグーグルのSundar Pichai（スンダー・ピチャイ）CEO（最高経営責任者）は2024年5月14日（米国時間）に開催
上司と親方の違い、徒弟制度の再発明でプログラマ育成 | Social Change!
多くの仕事が複雑化していくほどに、マネージャの難易度は上がり続けていきます。とりわけ部下がついたら成果を出すことと同時に、人の育成までも求められたりすると、どうしていいかわからなくなります。 しかも、心理的安全性やワークライフバランス、強みを活かす多様性に満ちた自律的な組織と言った言葉が注目される世の中です。当然ですがハラスメントなどもってのほかです。マネージャの悩みは尽きません。 そこでマネージャの仕事を、人を活かす「上司」と、人を育てる「親方」で分けて考えてみました。以下の図でまとめています。ここが互いに認識と期待がずれていると不幸が起こります。 デジタル化やAIが進むことで、現場から容易な仕事は減って、難易度の高い仕事ばかりになりつつあります。一方で、誰もが最初から高度な仕事はできません。どこかで経験を積んで育つ機会がないと、いつまでも初心者のまま何年も過ごすことになってしまいます。
開発組織のOKRの作り方 / OKR in a development division
Mutation Testingを活用して テスト品質を考える /introduction to mutation testing
React Compiler – React
This page will give you an introduction to the new experimental React Compiler and how to try it out successfully. These docs are still a work in progress. More documentation is available in the React Compiler Working Group repo, and will be upstreamed into these docs when they are more stable. React Compiler is a new experimental compiler that we’ve open sourced to get early feedback from the com
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
The Case for Paper: Books vs. E-Readers
わかりやすい！ Google Workspace のセキュリティ機能をプランごとに徹底比較 | 株式会社トップゲート
プロンプト、コード、統合の例 | Gemini API | Google for Developers
Salesforce連携 - Sansan - 営業DXサービス
election2024/.github/workflows/issue-review.yml at main · takahiroanno2024/election2024
