ニューラルかな漢字変換システム「Zenzai」の開発 | さくらのナレッジ

こんにちは、東京大学の三輪敬太です。 私は2024年度に未踏IT人材発掘・育成事業として「ニューラル言語モデルによる個人最適な日本語入力システムの開発」というテーマで採択され、早稲田大学の高橋直希さんとともにmacOS上の日本語入力システムを作りました。今回はこの中でも中心的な開発テーマの1つであった「ニューラルかな漢字変換システム」の開発と、その成果について紹介します。 かな漢字変換とは？ 日本語は通常、漢字やひらがな、カタカナ、数字、アルファベットなど、何千種類もの文字を使い分けて表記されます。これをわずか高々100個強のキーしかないキーボードで入力するために重要になるのが、日本語入力システムによる支援です。 多くの皆さんが使っている日本語入力システムでは、ローマ字を介してひらがなを入力し、それを変換して漢字かな交じり文とします。このひらがなによる入力から漢字かな交じり文を作る部分で行

[lectro3000]

日本人が真っ先にAIにやってほしいのは写真の加工でも旅行先のおすすめでもなく文脈を汲んだ漢字変換だとずっと思ってたのでついに実現の兆しが見えて嬉しい。

[ks1234_1234]

「macOS上の日本語入力システムを」　せっかく興味深いのに、使えない　ごめんね

[vesikukka]

おお期待！Linux版もよろしくお願いします。

[nekoline]

azooKeyって、iOSアプリでライブ変換できるやつか

[yarumato]

“Google日本語入力（Mozc）では、高速な動作のため、変換において考慮する情報を極力減らす。具体的には、直前1単語分の文脈のみを考慮して次の単語の変換を最適化。このため、同音異義語などの処理に限界がある”

[dirtjapan]

英語と違って日本語入力はIMEー介して行われるので変換の癖が文章に与える影響が大きく例えば作家がIMEを変えたら作品が違うものになるレベル。なので一社独占になるのはマズく、こういうのはありがたい。

[crybb]

ローカリゼーションとかってその国の人じゃないと本腰入れてやらないから（特に日本語特有の問題対応とか）かなり助かる

[hogetax]

（本題から外れるけど）生成AIが思ってたより間違って認識していることをこの記事で知った。

[L4Ph]

Windows版はもうある。 https://github.com/fkunn1326/azooKey-Windows マシンスペックがって言ってるけど、推論してる中身はllama.cpp。 で、今後のノートPCには当たり前のようにNPU乗っかってるくるので正直大した問題じゃないと思う。

[PikaCycling]

MacOSの日本語変換、お金払ってかわせみにしたけど全然使い物にならないので試してみよう。

[at_yasu]

すげー

[tmatsuu]

試してみるか

[jdash]

これ、なんでATOKと比較してないの？ なにかマズい結果でも出ちゃうのかと勘ぐってしまう。AIがATOKよりすごいならそれはそれで素晴らしいし、キーエンス（ジャストシステム）のパワーでAIをATOKに取り込んでほしい

[zkangaroo]

id:yfa02050 マシンパワーは、さくらインターネットの協力で改善しました、という記事だけど、何を意図しているのか知りたい。

[tafutech]

最高

[misshiki]

“macOS上の日本語入力システムを作りました。今回はこの中でも中心的な開発テーマの1つであった「ニューラルかな漢字変換システム」の開発と、その成果について紹介”

[Nyoho]

azooKeyのMiwaさんだ。azooKeyはmacOS版もiOS版も使ってみています。面白いです。

[sugyan]

Zenzというモデルを使ったAIでZenzai、かな？ azooKeyというアプリ名は発音してみてようやく意味が分かったｗ

[defiant]

この記事をおすすめしました

[uart8250]

やっていることは間違いなくAIによるかな漢字変換なのに、これを「AIかな漢字変換」と呼ぶと物凄く古いものに感じる。不思議!

[Lhankor_Mhy]

面白いしすごいけど、オフにしたくなる時もありそう。Copilot にも「だまれ小僧」と言いたくなる時があるので。

[eroyama]

変換性能以外の部分で指摘が入る事が多いsimejiだと十分な変換性能があると思うのだけれど…

[irh_nishi]

めっちゃ良い。この調子でCopilotみたいに次に打ち込む日本語の補完もしてほしい。

[urtz]

これ待ってた。AI時代なのに日本語入力があまり賢くなくて、ホントもどかしいとずっと思ってた

[oinume]

すごい

[juneboku]

https://fukabori.fm/episode/120 で話されていたやつだ

[beeeyond]

変換精度凄そうですがWindowsじゃ対応できない？マシンスペックを要求されるであろうってのもまた。つよつよGPU積んだりNPUが普及したらワンチャンあるのでしょうか。

[stabucky]

これはすごい。ただ、精度が上がるから、こんなに早くなくてもいい気がする。

[okishima_k]

Linuxにも降臨望む

[roirrawedoc]

ついにはてブにも来た

[uchiuchiyama]

突き詰めていくと、英数/かな入力モード切り替えが要らない世界になるのかな。そうなってほしいな

[Helfard]

すげー。

[KoshianX]

こういうのを待ってた。GPT-2 ベースの LLM を動作させるのどれくらいの環境があればいいんだろうなあ

[uzusayuu]

試してみよう。すごいなあ

[BOUSOUNINJIN]

すごいな！使ってみよう

[dollarss]

かな漢字変換の世界はずいぶん停滞しているよな。もっと進化していいはずだが…

[NOTG]

MacとiPhoneに入れてみた！しばらく使ってみる

[Chisei]

https://github.com/azooKey/azooKey-Desktop