タグ

ブックマーク / book.st-hakky.com (4)

  • Faissの概要 | Hakky Handbook

    Hakkyでは「データでプロダクトを価値あるものにする」というミッションの元、大規模言語モデルを積極的に活用して記事執筆しております。ビジネスにおけるAI活用のため、Handbookをお役立ていただきましたら幸いです。 概要​ 記事では近似最近傍探索ライブラリの Faiss について解説します。 Faiss とは​ Faiss とは、Meta(Facebook)製の近似最近傍探索ライブラリであり、類似の画像やテキストを検索するためのインデックスを作成するツールです。Faiss は C ++で記述されていますが、Python ラッパーを使用して Python で高速な学習が可能です。 他の近似最近傍探索ライブラリ​ Faiss の他に、有名な近似最近傍探索ライブラリとして、FLANN、Annoy、NMSLIB、NGT などがあります。ライブラリの比較は以下の記事が参考になります。 近似最近

  • AIを導入検討する際に抑えるべきチェックリストまとめ | Hakky Handbook

    この記事では、「AI の導入をしたい」と考えられている方を対象に、AI を導入検討する際にこれだけは抑えておきたいチェックリストをまとめました。自社で行う場合に限らず、開発を外注する際にも、この記事に書いてある項目が整理してあれば、打ち合わせがスムーズに進みますので、他の企業様に開発を依頼する際にも使えます。 あくまで一般的な観点を整理しましたので、個別の具体的なプロジェクトによってはより詳細な内容が必要になることが多いのですが、参考になればと思います。 AI 導入のプロセス​ AI の導入には、大きく下記の3つのプロセスがあります。 AI の要件定義 機械学習モデルの開発 プロダクション(実運用) 各フェーズにおいて、事前に考慮しておくべきポイントを細かく見ていきましょう。 AI プロダクトの要件定義フェーズで気をつけること​ 手順1 プロジェクトの背景の整理​ まずは、AI を導入した

    miguchi
    miguchi 2023/08/27
  • ビジネスに活かすLLM:自社データ検索とベクトルデータベースの詳細ガイド | Hakky Handbook

    Hakkyでは「データでプロダクトを価値あるものにする」というミッションの元、大規模言語モデルを積極的に活用して記事執筆しております。ビジネスにおけるAI活用のため、Handbookをお役立ていただきましたら幸いです。 LLM におけるドキュメント検索の方法​ LLM(LargeL Language Model/大規模言語モデル)は、大量のテキストデータから学習し、自然言語を理解する能力を持つ AI モデルです。LLM については下記の記事でも解説しています。 AI 時代の働き方革命!大規模言語モデルのビジネスへのインパクト 大規模言語モデル(LLM)の概要について LLM を用いて、ユーザーが求める情報を含むドキュメントを検索する方法は主に 2 つあります。 検索エンジンの利用​ 検索エンジン(例:Azure Cognitive Search)は、Storage、Share Point、

    miguchi
    miguchi 2023/08/03
  • LangChainとは?各モジュールの機能と活用事例まとめ | Hakky Handbook

    はじめに​ LangChainと呼ばれPythonライブラリをご存じでしょうか。 OpenAIAPIなど、LLMを用いたアプリケーションは学習時点のデータを用いて回答するため、最新情報が求められるケースでは使い勝手が悪いです。 そこで登場したのがLangChain。 LangChainを用いれば、最新情報を考慮したチャットアプリが作成可能です。その他にも開発をサポートする様々な機能がLangChainには備わっています。 今回はLLMアプリケーション開発によく用いられる LangChainを導入するメリットや各種機能(モジュール) について紹介します。 LangChainとは何か​ LangChainとは、GPT-3 のような大規模言語モデル(Large Language Model: LLM)を用いたサービス開発時に役立つライブラリです。 LangChainを用いると、他のシステムと統

  • 1