GPTの仕組みと限界についての考察（１） - conceptualization
GPT4が登場してChatGPTが盛り上がってますね。 本記事は、GPT（を支えるTransformerという仕組み）をChatGPTユーザにとって分かりやすく説明し、その能力と限界についての見通しをよくしよう、という趣旨になります。 少し長くなりそうなので、全部で記事を3回に分けようと思います。 （１）大まかな背景と概要：本記事 （２）GPTの能力と可能性：実際の使用例とTransformerの仕組みを踏まえて説明 （３）GPTの限界と未来展望：Transformerの仕組みが持つ限界と研究の進展を予想 GPT3と4の違い： トークン長とは何か？ まずここから話を始めます。GPT-3は、パラメータ数が750億個（850GBの容量を食う）でトークン長が4097(GPT-3.5)でした。GPT-4は、パラメータ数は非公開でトークン長は32768ですので、ちょうど8倍になります。 さて、トーク
Ado（20）、グレタ・トゥーンベリ（20） - 斗比主閲子の姑日記
最近、ずっとAdoさんの曲を聞いてます。子どもから「また、Ado、聴いてるの……？」と心配されるぐらい。 きっかけは、メジャーデビュー4曲目となる『踊』（Odo）のLIVE映像がたまたまYoutubeでお勧めに上がってきたのを見てからです。 www.youtube.com 未見の人はぜひ見てみてください。凄い、格好良くないですか！？ 私は音楽を普段は聞かないので、この曲のジャンルとか具体的なことは特に何も言えないのだけれど、どう考えてもトリッキーな曲をLIVEでこんなに歌えているのを見て、凄い歌手だと思ったのでした。 あと、演出もいい。本人が顔出しをしていないこともあり、顔（というか身体全体）は逆光で影絵みたいになっていて情報が限定されているために、余計に声が強調される感じ。衣装もキャラクターに合ってる。 その後に、この映像を本人が見る配信がお勧めに上がってきて、これも見て、ご本人の反応の
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
処理を実行中です
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
