RAG for Agentプロセスという考え方｜深津 貴之 (fladdict)
マルチステップエージェントの安定化についてAIでマルチステップエージェントを作る際、安定した挙動にすることが難しいという話をよく耳にします。多くの人はRAG（Retrieval-Augmented Generation）に知識を入れていますが、プロセス情報を先に入れたRAGを作る方が良いのではないかというコンセプトについて考えてみました。 プロセス情報を先にRAGに入れる例えば、XXしたいときの手順を以下のように構成します： 調査: どこを調べるべきか 考慮: どう考えるべきか ツールの使用: どのツールを使うべきか 保存: 結果をどう保存するか このように、エージェントのプロセス情報をRAGとして用意しておくことで、エージェントの処理が安定し、結果的にエージェントの回答も安定します。 このプロセス処理の安定性がRAGで保証されると、AIエージェントが「印刷する」みたいな、自分でできないタ
AIにコードまるごと解説してもらうと、界王拳100倍すぎる件｜深津 貴之 (fladdict)
最近、見つけた技。知らない言語でコードかくときChatGPTが神すぎる。 そのテクはなんと「プログラミングまるごとを、ChatGPTに突っ込む」というもの。 え、そんなの動くの！？ と思うんですが、動くんですそんなの。直球すぎて盲点だった。 試してみよう たとえば、下記はGoogleサービス使って、リアルタイムにマイク音声を文字起こしするサンプル。 こいつをチャットAIで音声会話をやろうと、軽く読んでみたのですが…うん、よくわからん。 Pythonだし、Streamingだし、音声の操作だし、普段つかわない技術が満載すぎてわからん。 雑にコードを突っ込むと人生が解決こういう時は 以下のコードを、わかりやすく説明して。 ＜以下、上記コードをそのままコピペ＞とすると…… こうなる。 このコードは、Google Cloud Speech-to-Text APIを使用して、マイクからの音声をリア
エヴァのMAGIシステムをGPT3で作ってみた｜深津 貴之 (fladdict)
新世紀エヴァンゲリオンにでてくる超AI、MAGIシステムを作ってみたメモ。 OpenAI社のGPT3を使って、三頭制合議型のAIシステムを組んでみた。 MAGIシステムとは？MAGIは、アニメ「新世紀エヴァンゲリオン」にでてくる超AI。 このAIの面白い特徴は、性格の異なる3体のAIが、それぞれ独立に見解をだし、それを集約して1つの結論をだすという合議制のシステムです。 キリストの祝福を告げた三賢者にちなみ「メルキオール」、「バルタザール」、「カスパー」という3つのAIが、それぞれ開発者である赤城博士の「科学者」、「母」、「女」として側面をから答えを出します。 MAGI GPT3の実装最近話題のChat GPTの凄さをみるに、「MAGIシステム」現実に作れるのでは？と思って、Google Colabで実装してみました。 1つの質問に対し、GPT3を4回ぶんまわすシステム図のように、1つの質
アクションゲームを爽快にする、ちょっとだけズルい調整メモ｜深津 貴之 (fladdict)
アクションゲームで爽快感を出すための、ちょっとしたズルのメモ。いろいろとプレイして見つけたやつ、思ったやつ。 ギリギリのジャンプをしたときの体験ジャンプで飛び移るとき。「ギリギリ届かない」かつ「キーを進行方向に倒している」場合、ユーザーの意図は「飛び移りたい」と類推される。キャラの座標を多少修正して、うまく飛び移れたことにする。次善策は、「壁にしがみつける」だが、爽快感は多少落ちる。 ギリギリで減速する体験走行時に「逆方向にキーをいれている」場合、ユーザーの意図は「急減速したい」と類推できる。キー入力の長さに応じて、摩擦係数をどんどん増やす。 ギリギリで踏みとどまる体験走行時にブロックから飛び出して落ちてしまうとき。「走行と逆方向にキーをいれている」場合、ユーザーの意図は「踏みとどまりたい」と類推される。よろめき演出で猶予時間を与えるか、急減速を可能とする。 ギリギリでジャンプが間に合う体
VRライブでの演出とユーザー体験のポイントについてメモ｜深津 貴之 (fladdict)
VRのライブ動画やMVを数十本見て、再現性のあると思った手法のメモ。 VRの特性をフルに引き出したライブ、イベント体験を設計するために、意識したほうがよいことを言語化した。（VRというか、VRを用いた没入型のライブ映像といったほうがよいと指摘をうけた）。 空間を広く使おう、個室にしないライブ空間を個室にすると、VRの良さが一気に失われてしまう。VRの没入感を最大化するには、遠近感をフル活用するほうがよい。ビルの最上階、海中、空中、衛星軌道…とにかく、360度に視界が開けた空間でやろう。 視線をとにかく、合わせるVRライブとリアルライブの最大の違いは、「あなたのための」ライブが開けること。なので、出来る限り、視聴者と視線をあわせるほうがよい。超近距離で、視線があわないまま踊られても、非人間的に感じたり、ロボット感がでてしまう。こまめに視線をあわせる。視線をあわせたらニッコリする。大事。 カメ
ミニチュア風写真を10年ほど研究して学んだポイント｜深津 貴之 (fladdict)
その後2006年ぐらいから、動画共有サイトVimeoで、ミニチュア風のストップモーションが大流行りする。あわせてフォトショップのテクニックとして、「写真の上下にグラデーションのブラーをかける」というノウハウが出回り、プチミニチュア写真ブームがおきる。これはSmallganticsと呼ばれる映像技法のメジャー化だ。Smallgantics自体、オリボ・バービエリ御大の作風の再現から始まっている。ほとんどのミニチュア写真は、こっちのエフェクト派だ。 で、このSmallgannticsの映像ノウハウが、今度はスマホアプリという形で、写真に逆輸入される。 2009年あたりで海外でTILT SHIFTというiOSアプリと、ちょい遅れででた拙作のTiltShift Generatorというアプリが世界中で人気となり、スマホでとりあえずミニチュアっぽくボカすのが大流行の時代がきた。 すごい量のアプリがダ
ZOOM会議に効果音をいれて超楽しくするには｜深津 貴之 (fladdict)
拡張現実（AR）は、音声からはじまる…というのが以前からの持論。そんなわけでZOOMの会議に、効果音をブチ込める環境を作ってみました。 会議中に、Hahahaha!とかOhhhhh…みたいな、アメリカンなアクションやりたい！ファンファーレやドラムロールとか、拍手やブーイング、ズキューンとか鳴らしたいじゃない？ ユーザー体験が超変わる！！と思ったのですが、ググってもでてこなかったので環境構築してみました。 環境概要物理機材はなしソフトで解決。バーチャルミキサーを使って、マイクと各種音声アプリのサウンドを合算します。初回設定20分。会議前設定30秒ぐらい。ZOOMには、バーチャルミキサーを擬似マイクとして設定。こうすることで、様々な効果音や音楽、楽器をZOOMに流しこめます。 バーチャルミキサー音の合成には、Loopbackというアプリを使います。このアプリは、複数のオーディオインプット（マイ
史上最凶のプログラマがヤバすぎた｜深津 貴之 (fladdict)
シャーロック・ホームズのモリアーティや、羊たちの沈黙のハンニバル・レクター教授の現実版がいるとすれば、それはポール・ル・ルーだろう。 それが本書「魔王」を読んで感じた印象は、まさにダークウェブのジェフ・ベゾスだった。素直にスケールのデカさが凄い。 ポール・ル・ルーは、ジンバブエ出身のプログラマから、闇社会の王となった男だ。 ポールは元々、金融のプログラムを書くかたわら、趣味で暗号ソフトを開発する天才肌の男だった。スノーデンも愛用したことで有名な暗号ソフト「トゥルークリプト」のベースとなった、E4Mの作者でもある。 彼は自作した医薬品の通販プラットフォームで、米国中に大量のオピオイドを売りさばき、数千万ドルの富を手に入れる。そして、その資金をもってフィリピンで暗黒の帝国を作ろうとする。 元SWAT教官や民間会社のあぶれ者を集め傭兵部隊を組織し、政治家を抱き込む。暗殺者を囲い込み、金を密輸し、
進撃の巨人はワシが育てた！と言っても良いのだろうか｜深津 貴之 (fladdict)
人づてに聞いたところ…進撃の巨人のムック本に、「作者の諌山氏が、ポーズマニアックスというサイトで絵の勉強をした」という記述があるらしい（進撃の巨人OUTSIDEより）。 ふーん、ポーズマニアックスねぇ… ポーズ… え、あれ、ポーズ… ポ…ポポポポーン！？ え、それって、僕が昔に作った個人サイトじゃね？ ポーズマニアックス！ 実は12〜3年ほど前、僕がノリで絵の勉強サイト、ポーズマニアックスというのを作って運営していた。3Dのポーズモデル数百体掲載され、WEB上でグリグリ回転できる、当時としては画期的なお絵かき練習サイトだ。社会人1年目につくった趣味の裏サイト。「30秒ドローイング」というお絵かき練習Flashもあった。時はまさにウェッブ2.0ブーム、一人でサービスをまるごと作ってみたいお年頃だったのである。 当時は日本で、pixivの次にトラフィックがあったお絵かきサイトだと思う（たぶん）
これからはじめる、ガチスマートホーム計画｜深津 貴之 (fladdict)
久しぶりに自宅のスマートハウス環境をアップデートしたので、色々とポイントをメモ。あわせて、Takramさんと対談した「スマートじゃない家電」のポッドキャスト貼っときます。 スマートホームを作るポイントイカしたスマートハウスを作るルールはたった１つ。 「スマート冷蔵庫とかスマート洗濯機とか、そういうのは買うな」ああいう大物スマート家電は言うほどスマートではない。価格が高い割に賞味期限が短く、なけなしのボーナスを突っ込んで買っても、来年にはサービスが停止しているかもしれない。高額リスク案件だ。 あと裏情報として、大手のIoT家電は「弊社もIoTを！』みたいな雑なノリか、「消費者の利用データが取りたい」という企業目線ではじまった企画が多い。つまり、ユーザー視点では生活が便利にならない。 さらにお国の指針で、日本では「遠隔でオンにするタイプのスマート家電」が大手からは事実上出せない。遠隔からオンに
59分割ヤバイ｜深津 貴之 (fladdict)
こばかなさんと、グリッド分割の話をしてるときに出たネタなのだけど。 グリッドの59分割ヤバイよねぇというお話。 画面を59分割すると、様々な比率で端数がでない。汎用的なグリッド分割できて素敵。個人的にはnoteで図表を描く時は、 ・幅620px ・天地左右マージン15px ・グリッド59分割 10pxを意識すると、色々と便利だと思う。 これ全部、ピクセルパーフェクトに分割できる。 1分割 = 590px grid 2分割 = 290px grid 3分割 = 190px grid 4分割 = 140px grid 5分割 = 110px grid 6分割 = 90px grid 8分割 = 65px grid （厳密には10の倍数でないので△） 10分割 = 50px grid 12分割 = 40px grid 15分割 = 30px grid 20分割 = 20px grid 24分割
ユーザーを泥棒あつかいした産業は、歴史的に沈んでいった｜深津 貴之 (fladdict)
2月13日の文化庁の文化審議会著作権分科会での、ダウンロード違法化に反対する声明です。海賊版対策に、ダウンロードを違法化の対象を超拡大するというのは、害のほうが大きすぎるという意思表明です。 本来なら、こういう政治的なゴタゴタには、スタートアップは近づきたくありません。ですが、noteは「だれもが創作をはじめ、続けられるようにすること」を標榜しています。クリエイターに不利益をもたらしかねない政治的アクションには、しっかりと意見を表明すべきだと考えました。 これはnote設立から続く、CEOである加藤の強い思いでもあります。 著作権法は、基本的には「表現の自由」の限定例外事項にとどめるべきかと思います。なぜなら簡単に拡大解釈できる上に、強すぎる法律だからです。特定の表現を、個人あるいは企業が申請なしに100〜120年も占有できる権利というのは、控えめに言っても強すぎる権利です。 クリエイター
お金持ちを、ほめよう！｜深津 貴之 (fladdict)｜note
「持つもの」と「持たざるもの」の闘争は、インターネットの風物詩。でも、対立構造を煽っても問題はほとんど解決しません。むしろ、お金持ちがよろこんで富を再分配したくなる、そんな仕組みが必要です。 お金持ちを殴っても、なにも進展しない想像してみてください。 いきなり「搾取野郎！」とか暴言を浴びせられ、「あいつは人民の敵だ打倒しろ！」とか「会社を焼け、富を取り戻せ！」とか言われたら、人はどう感じるでしょうか？ 「あぁ、僕はなんて罪深いんだ… よし、彼らにお金を配ろう！」とは絶対になりません。 普通に考えて、「げ、なんかヤベェやつ来たよ。関わりたくない、逃げよう！」と思っちゃいます。 つまり防衛行動として、距離をとっちゃうわけですね。 対立構造をもって富の再分配をしようとしても、かえって相手を硬化させてしまうわけです。（基本的に対立を煽るアプローチは手っ取り早いが、中長期ではデメリットのほうが大きい
深く考える訓練、その2｜深津 貴之 (fladdict)
大学の授業用のサブ教材として、生徒に「深く考える」トレーニングの資料を作ってる。今回はその第2回目。 ひきつづき入門用の実践フレームワークを紹介。今回は、Pro-Con Lists（長所・短所リスト） だ。まだまだ簡単モード。 「長所・短所リスト」日本語にすると身も蓋もないが、"Pro-Con"とは長所・短所のことだ。この方法は、複数のプランから最も優れた候補を選ぶために用いる。 以下のようにして、各プランの長所と短所を分析してみよう。 「長所・短所リスト」の例例えば、次のボーナスで「新しいテーブルを買う」か「家族旅行に行く」かを比較してみよう。それぞれ一長一短があり迷ってしまう。そんなときは、まず要素を書き出して、長所短所を比較していく。 1. 選択肢を列挙する 2. 複数の選択肢に対して、それぞれの長所短所を全て列挙する。 3. それぞのれ長所短所に（軽微〜重要）などで、1-3点のスコ
ランキング設計はどうあるべきか？ その2｜深津 貴之 (fladdict)｜note
前エントリで論じられた、正しいランキング設計の考察の続き。第2回は、ランキングの収奪性、格差の固定性を軽減する手段を、具体的に論じてみる。 前回の記事へのTwitter上のフィードバックは、Togetterにまとめてある。こちらもご興味があれば、一読の価値がある。いくつか被ってしまったものもあるけれど、諸々の後半記事。 「ランキング」以外の名称を用いるこれはほぼ確定。ランキングという名前は、「noteとして競争原理を推奨する」という強いメッセージを発する。noteの全てのユーザーが、競争原理で動いているわけではないので、これは望ましくない。 おそらく最終的には「注目」「人気」などの名称を使うことになるかと思われる（「オススメ」はパーソナライズ用にとっておく）。また、「ランキング」という名称やスタンスをやめることで、後述するようないくつかの公平性のための施策を行う余地が生まれる。 時間による
1
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
