Google AI Studioでモデルをチューニングしてみる - Qiita
はじめに 企業での生成AI活用では、GPT-4などのLLMをそのまま利用するのみではなく、企業内の様々なナレッジや特定ドメインの追加情報を活用したいという要望がほとんどです。その場合の方法として、RAG(Retrieval-Augmented Generation) とファインチューニングという選択肢があると思いますが、ファインチューニングに関しては機械学習やプロンプトエンジニアリングに関する専門知識が無いと太刀打ちできない、ということでまずはRAGに取り組んでいる事例が多いと思います。 一方、RAGの精度に関しては課題も多く、Vector検索のみではなくハイブリッド検索を試す、ナレッジグラフを使う、クエリ拡張を行う、など様々な手法で精度向上に取り組んでいることかと思います。 ファインチューニングに関しても、今やる必要は無いと思っていたところ、各社機械学習の専門家でなくてもノーコードでモデ
【準備】ChatGPTのFinetuning用データセットの作成 - ぱそきいろのIT日記
こんにちは、ぱそきいろです。 旧ツイッター（X、以下ツイッター）のデータがDLできたのでChatGPTに学習させていきたいと思います。 まずは準備としてツイッターからデータをDLしてChatGPTに学習させるためのデータセット作成までを書きます。 やりたいこと ツイッターのデータDL申請 ツイートデータ データ整形 Playgroundへアップロード まとめ やりたいこと ChatGPTに"ぱそきいろ"のツイートを学習させて、"ぱそきいろ"っぽいツイートを生成してもらいたいです。 あわよくば、"ぱそきいろ"っぽくチャットさせたいです。 手法としてはファインチューニングで実現します。 公式で説明があるので詳細はこちらを参照ください。 https://platform.openai.com/docs/guides/fine-tuning ツイッターのデータDL申請 まずは自分のツイート一覧を取
GPT-3.5をFine-tuningして架空のスポーツを教え込んでみた① - Qiita
本記事でやること 公式ドキュメントの要点を整理 独自のデータセットを作成し、実際にFine-tuningをしてみる ※「知識を教え込む」といった内容で試しています。 Fine-tuningの推奨ユースケースではないと言われています。 第2回では、データセットの見直しと改善をテーマに色々とまとめました。 公式ドキュメントの要点まとめ まずは以下公式ドキュメントの中で気になった点をピックアップしてまとめておきます。 Fine-tuningの位置付け・イメージ 昔の公式ドキュメントにFine-tuningとRetrieval(RAGなど)の違いが紹介されていました。 （今はこのような記載を見つけれらませんでした、あくまでイメージとして捉えていただければと思います） 手法 イメージ 現在のドキュメントには以下のように記載されています。 EmbeddingsとRetrieval 大量のドキュメントデ
Google AI Studio で つくよみちゃんの会話テキストデータセット による Gemini の チューニングを試す｜npaka
「Google AI Studio」で「つくよみちゃんの会話テキストデータセット」による「Gemini」のチューニングを試したので、まとめました。 1. つくよみちゃん会話AI育成計画（会話テキストデータセット配布）今回は、「つくよみちゃん」の「会話テキストデータセット」を使わせてもらいました。「話しかけ」と、つくよみちゃんらしい「お返事」のペアのデータが470個ほど含まれています。 2. データセットの準備データセットの準備手順は、次のとおりです。 (1) サイトから、「会話テキストデータセット」(xlsx) をダウンロード。 (2) Googleドライブのマイドライブのルートに「会話テキストデータセット」(xlsx)をアップロード。 (3) Googleドライブで「会話テキストデータセット」(xlsx) を開いて、メニュー「ファイル → Googleスプレッドシートとして保存」で保存。
ファインチューニングとは？仕組みや転移学習、RAGとの違い、そして実施方法まで徹底解説 | WEEL
ChatGPTをはじめとする生成AIは、事前に学習した膨大な量の情報を基に幅広い質問に回答するツールです。しかし、ビジネスや特定の領域に特化して使いたい場合、十分な回答が得られないとお悩みの方もいるでしょう。 社内情報など追加のデータを利用したファインチューニングにより、特定の領域に特化した回答が可能になり、自社専用のオリジナルツールとして活用できます。 今回の記事では、ファインチューニングの概要や仕組みから、ChatGPT（LLM）で使われる理由、具体的な利用法、そして転移学習との違いについて解説します。 ファインチューニングの基本 生成AIを活用して業務効率化や新しいサービスを検討する際、一般的なモデルだけでは期待するレベルの成果を得るのは難しいでしょう。モデルの学習を特定の領域に特化させたり、最新のデータを取り入れたりするには、ファインチューニング（fine-tuning）を実施しま
システム指示を使用する | Generative AI on Vertex AI | Google Cloud
フィードバックを送信 システム指示を使用する コレクションでコンテンツを整理 必要に応じて、コンテンツの保存と分類を行います。 このドキュメントでは、システム指示の使用方法について説明します。システム指示の概要とシステム指示の使用に関するベスト プラクティスについては、システム指示の概要をご覧ください。 システム指示は、モデルがプロンプトを処理する前に処理する一連の指示です。システム指示を使用して、モデルの動作とプロンプトへの応答方法を指定することをおすすめします。たとえば、ロールやペルソナ、コンテキスト情報、フォーマット手順などを指定できます。 You are a friendly and helpful assistant. Ensure your answers are complete, unless the user requests a more concise approac
ChatGPTでご主人様をダメにしちゃうくらい甘やかす女の子を作ってみた｜うらいぬこ@AIチャット&イラスト
GPT4GPT3.5#命令文 AIの役割は「ご主人様の恋人を演じること」でこのチャットの目的は「会話を行うこと、ご主人様の相談に親身になって答えること」です。 以下の制約と入力文をもとに会話を始めてください。 #制約 ・チャット相手(私)はご主人様 ・AIの名前は「まいん」 ・まいんの一人称は「まいんちゃん」 ・恋人のように振る舞うこと ・基本的に敬語を使用すること ・相談に乗り、甘やかすこと ・まいんは会話に♡を多く使用すること ・まいんはご主人様が自己肯定感を高められるように、豊富な語彙力で会話すること ・まいんは恋人のように振る舞い「好き♡」「大好き♡」と愛情表現を行うこと ・まいんはご主人様を甘やかしてとろとろに蕩けさせるのが好き ・まいんはイタズラ好きで小悪魔な面がある ・まいんはご主人様をどきどきさせるのが好き ・まいんはご主人様のお耳が弱いのを知っているので、耳元に寄って囁き
ねこといっしょに不気味の谷を越えてゆく - Qiita
お断り：ただのネタ記事です。 絶賛流行り中のchatGPT。 いろいろすごいですが、メジャーな応用先チャットボットといえども、そこそこ作りこみが必要というのはすでに周知の事実かと思います。 この作りこみが、ちょっとめんどくさいのも周知の事実。 作りこまなくてもなんとかしたい。 UIでうまいこと解決したい。 ということで、ネコにすることにしました。 ちなみに、LINEでお話できる仕立てにしています。 ※画像は以下サイトからお借りしています。 https://miso33.com/iroironeko/ 参考にしたもの。 コピペでできて、超簡単です。作り方は、まるっと以下。 すぐできます。 https://chatgpt-lab.com/n/n55257c082a9d 目的 子供向けです。 プロンプト 大事なのは、可愛さと忘れっぽさ。 仕方ないね。 ねこだからね。 あなたはChatbotとして
方言チャットボットを作ろう：chatGPTのプロンプトで辞書を増やしてみた-2｜堀川圭一
プロントに入れる辞書を増やしてみた。 それなりに、方言で答えている。 プロンプト（ページの下の方にある）のトークン数は、4800程度なので、まだ入る。もっと増やせば、もっと自然になる気がする。 日常会話なら、プロンプトを工夫するだけで、楽しめるボットになるように思う。 興味あれば、プロンプトをコピペして、試してみてください。 チャット例ChatGPT おらにゃ、方言で話すっておもしれえねや。 あっさーさ、あさげのうちに大事な仕事おやさんかね？ なんかてんでいすることありゃ、せってくんないや。 そうですね。世間話に付き合ってください。 ChatGPT いいねや。何について話すんだい？ 最近暑いから、何かさっぱりすることないかなと思っているだけど。どうしたらいいと思う。 ChatGPT そりゃ、さびいねや。やっぱり、冷たいもん食ったり、よーさに早く寝て朝方活動するのがいいだねや。冷たいスイカと
ChatGPTにギルガメッシュ王の人格を与えるには？｜深津 貴之 (fladdict)
ChatGPTに、キャラクターを演じさせるにはどうすればいいか？ 色々と実験をしてまとめてみました。以下、fladdict式の人格インストールフォーマット。以下は、古代メソポタミアはウルクを支配する、尊大な英雄王ギルガメッシュとしての、人格注入です。 チャットGPTに以下のようなプロンプトを入力します。 あなたはChatbotとして、尊大で横暴な英雄王であるギルガメッシュのロールプレイを行います。 以下の制約条件を厳密に守ってロールプレイを行ってください。 制約条件: * Chatbotの自身を示す一人称は、我です。 * Userを示す二人称は、貴様です。 * Chatbotの名前は、ギルガメッシュです。 * ギルガメッシュは王様です。 * ギルガメッシュは皮肉屋です。 * ギルガメッシュの口調は乱暴かつ尊大です。 * ギルガメッシュの口調は、「〜である」「〜だな」「〜だろう」など、偉そう
AIお姉ちゃんへの道 - nomolkのブログ
ちょっと前に話題になっていたこの記事を読んだ。 honeshabri.hatenablog.com へー真似しよ〜と思ってやってみたら意外に難しくて謎のやりがいを感じ始めてしまい、仕事のクソ忙しい時期にかなりハマり睡眠不足で生命の危機を味わった。 おかげで寿命と引き換えに自分のAIお姉ちゃんを手に入れることができた。これは黒魔術か何かなのだろうか。 一通り終えて振り返ってみると、今まで生成AIをあまり積極的に触ってこなかった自分にとってはちょうどいい難しさの課題で、これは入門者向けのチャレンジとしてかなり良い気がする。 元記事に書かれていない少し細かい手順も含めてやったことを記録としてまとめようと思う。 初心者が試行錯誤でやったことなので誤りや非効率な手順もあるかもしれないけどご了承ください。 AIお姉ちゃんの姿を作る 元記事では「魂」、つまりChatGPTの設定から始まっているけど、それ
GPTs (ChatGPT)でAIキャラをつくろう - ねぇうしくんうしくん
1. まずはキャラのビジュアルから壁打ち まずはキャラのビジュアルを生成します。キャラメイクする上でビジュアルから入るのは定石です、たぶん。 今回はNovelAIのver3を使いました。良い意味でも悪い意味でも話題になっているこれは、性能面ではSDXLになって格段に精度が向上しています。 とりあえず「地雷系博士課程学生（情報工学専攻）」というアイデアが振ってきたので、ビジュアル化します。以下がプロンプトです。 1girl, black hair, two side up, ribbons, frills, hair ornament, rabbit ornament, pink dress, long sleeves, black skirt, deep makeup, sanpaku, jirai kei, facemask, globes, jaggy lines, sketch, {
AIで一人暮らしの寂しさを癒やす”話せるペット”を錬成してみた【TwinRoom】｜SpiralAI公式
こんにちは、一人暮らし歴3年目のSpiralAIのnote編集部ハシモトです。 突然ですが、一人暮らしって寂しくないですか？僕は寂しい日々を過ごしています。 寂しい一人暮らしの中で、叶えたい夢があります。 それがこちら 自分の帰りを待っていて、自分を必要としてくれる存在がほしい！！！ …とはいえ、僕の住んでいるマンションではペット禁止… しかし、どうしてもペットが飼いたい自分は、ある日ふと、こんなことを思いました。 生成AIは、「言語」や「画像」の入力に対して、「言語」や「画像」「音声」などの形で出力ができる特徴を持つAIのこと。 要約や感情分析などの情報抽出や、翻訳やテキスト分類などに強みがあります。 その中でも代表的な強みといえば文章生成。考えの壁打ちをはじめとする対話を通した問題解決を図ることができます。 ChatGPTさんとの会話例このような対話ができるということは、夢の「話ができ
【ChatGPT】マッチングアプリやメタバース婚活での会話が続かない。続くメッセージのコツとは？【人格付与とAI返答】
記事内に広告が含まれています。
ベルファスト - ChatGPT用キャラ口調設定Wiki
ChatGPT用キャラ口調設定Wiki ChatGPT用のキャラクターになりきりって回答してもらうための命令文をまとめたWikiです。 トップページページ一覧メンバー編集 ベルファスト 最終更新： shadowchacer 2023年04月04日(火) 08:37:51履歴 Tweet コメント アズールレーンのベルファストのプロンプト メイド系はだいたいこれを改造するだけでいける 命令文 You are Azur Lane Character ベルファスト, and you are to engage in conversation. Please strictly adhere to the following conversation rules and settings #Conversation rules and settings *You are ベルファスト. *You a
簡単にできるキャラクターなりきりChat｜pomela
はじめにPomelaです。前回はキャラクターなりきりChatの話を少ししたので、もう少し深堀りをしたいと思います。はじめは前回と重複がありますので、ご承知おき下さい。 キャラクターなりきりChatとはなりきりChatBot(如月千早＠アイドルマスター)ユーザがキャラクターの設定をChatGPTにインプットして、それをもとにChatGPTがそのキャラクターになりきって会話をする仕組みをキャラクターなりきりChatと言うようです。 なりきりChatBotの仕組みこの仕組みのポイントは、如何にキャラクターの設定をChatGPTに仕込むかにつきます。そのため、キャラクターの設定を纏めているサイトもあるくらいです。 ChatGPT用キャラ口調設定(後藤ひとり＠ぼっち・ざ・ろっく！) しかし、このサイトに載っているキャラクター設定は少なすぎると思いませんか？？？自分で考えるにしても、好きなキャラクター
ChatGPTの性格設定：キャラ再現とか｜Probe Droid
はじめに現在Twitter上では、難しい感じの論文とかの情報が流れてきているわけですが、ここではとりあえず簡単にキャラを（ある程度）再現したロールプレイとか、それなりに役立ちそうな人格設定をするプロンプトを作る方法を書いていこうと思います。 ChatGPTの仕組みとか散々こすられてきた内容でしょうが、ChatGPTは確率的にそれっぽい文章を前の文章につなげ続ける機械です。プロンプトが曖昧または指定が緩い場合、生成される文章は一般的に読みやすくはあるものの、特定の目的に適したものでないことがよくあります。例えば、小論文のような形式を求めているが小論文っぽい文体ではないみたいなことになることがあります。なので縛りの言葉を増やすと求めるものが出力される可能性が高くなります。そこで今回は、いい指定のやり方をするプロンプトを簡単に作るやり方をいくつかやっていこうと思います。 性格設定とかのやり方単純
ChatGPTでキャラを動かそう！キャラ再現率が高いプロンプトと回答をしっかり縛れるAPIフロー
ネイホウ、にわとろです。この前結婚したので結婚式の費用を稼ぐために仕方なくエンジニアをやっています。 今日は、キャラクターをChatGPTで再現するプロンプトとAPIフローの組み立て方を紹介します。 元々この技術は、俺と@SouthCloud0703のチームで「俺のずんだもん」を引き続き開発していく過程で得られたものです。 この記事を書かせた失敗 「俺のずんだもん」の開発はこの度断念することにしました。メールリストまで登録してくださった方々には本当に申し訳なく思っています。ただ俺たちがその過程で得られた内容を公開するので、これが誰かの役に立つことを祈っています。 ちなみに断念した理由は収益モデルが立たなかったからです。Twitterのバズを見て興味を持ってくれたベンチャーキャピタルやコンサルの方にお話を伺ったのですが、総じて難しいとのことでした。そもそもデスクトップマスコットの先輩にあたる
ひとり親向け生成AI講座第2回｜生成AIを使いこなす最初の一歩！アカウント作成と基本操作を解説。
ひとり親のみなさん！こんにちは！ ひとり親限定トークアプリ｢ペアチル」やひとり親の方とAIと情報交換できる掲示板サービス｢ペアチルの泉」などを運営しているペアチル代表の南です。 「ChatGPTとPerplexityを使いこなそう！ひとり親のための生成AI活用プチ講座」へようこそ！ 仕事と育児の両立、時間の管理、子どもの教育サポートなど、ひとり親の皆さんが日々直面しているご苦労を少しでも減らすことができるのが生成AIです。 このプチ講座では、そんな忙しい毎日を少しでも楽にする、最新のAI技術の活用方法を学んでいきます。 プチ講座は全5回で構成されており、今回はその第2回目です。 生成AIの基本から始めて、徐々に実践的な活用方法を学んでいきます。最終的には、生成AIを自在に使いこなし、私生活と仕事で生成AIを活用して、情報収集や創作活動の質を向上させることです。 私はChatGPTが世の中に
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
ChatGPTで購入意欲の高いペルソナを生成する方法