ChatGPTなどのチャットAIがどんな風に文章をトークンとして認識しているのかが一目で分かる「Tokenizer」
OpenAIが開発したChatGPTをはじめ、さまざまなAIが人間レベルの会話を行ってくれるようになりました。AIは文章を読み書きするとき「トークン」という単位で認識を行うのですが、普通の文章がトークン的にはどのように分解されるのかを一目で教えてくれるツール「Tokenizer」がOpenAIのページ上で公開されています。 OpenAI API https://platform.openai.com/tokenizer Tokenizerの画面はこんな感じ。テキストを入力する必要がありますが、いったん「Show example」をクリックして例を見てみます。 英語の場合、252文字の文章で64トークンとなる模様。下部にて文字がトークンのまとまりごとに色分けして表示されています。 「TOKEN IDS」をクリックするとそれぞれの数値も確認できます。人間が見てもなにがなんだか分かりませんが、G
旧統一協会系メディアへ何度も寄稿していた白川司氏が、自民党公認で千代田区議に立候補予定とのこと - 法華狼の日記
自民党特設サイトの千代田区ページの最下部で公認が確認できる。 千代田区議会議員選挙2023 - TOKYO自民党 白川氏については、2022年に安倍晋三氏が殺害された直後、旧統一協会への批判をそらそうとする態度が興味深く、その背景らしき情報ともどもエントリにまとめた。 国際政治評論家の白川司氏が、「統一教会叩き」をすれば「反安倍」になるかのようなツイートをしていた - 法華狼の日記 白川氏は雑誌『WiLL』で連載をもっているが、旧統一協会関係のメディア「Viewpoint」にも今年に何度も寄稿している。ツイッターで宣伝しているくらい深い関係だ。 上記で宣伝している記事は現在すべて削除されているが、どのような意図によるものだろうか。もちろん特別な意図などない可能性もあるが。 ここでひとつの傍証として、「Viewpoint」には執筆者を一覧にしたページがあり、白川氏も掲載されていたが、やはり削
「青い救急車」開発 色覚障害でも見やすく
救急車や消防車の開発を手がけるベルリング（東京）は、色覚障害がある人でも見やすいように青を基調とした救急車を開発し、７日、東京都内で報道陣に公開した。 白地に赤いラインが入った従来の救急車は、赤が見えにくい人には通常のワゴン車と見分けが難しい。見慣れない配色で目立たせ、道を譲ってもらいやすくする狙いもある。ただ、救急車の車体は法令で白と決まっており、まずは啓発イベントでの活用や、緊急性の低い患者移送を担う民間救急での導入を目指す。 車体は現代アーティストの山口歴さんが、空や海をイメージしてデザイン。青をベースに白や水色の模様を描いている。 総務省消防庁によると、救急車が通報を受けてから現場到着までの平均時間は９・４分で、２０年前より３分以上延びた。一般の車の防音性能が向上してサイレンが聞こえにくくなったのが一因とされ、同社は目立ちやすい車両の開発を進めていた。
リリース、障害情報などのサービスのお知らせ
最新の人気エントリーの配信
j次のブックマーク
k前のブックマーク
lあとで読む
eコメント一覧を開く
oページを開く
加藤AZUKI on Twitter: "これを是とすると、次からは「要人暗殺すれば願いが叶う｣ってなるぞ。 https://t.co/2EY56u3aNl" / Twitter