Google、AIでファイルの種類を高速正確に判別するオープンソース「Magika 1.0」公開。Rustで再構築し、より高速かつ対象を200種類に拡大へ

Google、AIでファイルの種類を高速正確に判別するオープンソース「Magika 1.0」公開。Rustで再構築し、より高速かつ対象を200種類に拡大へ Magikaは、あるファイルの中味が何なのか、記述されたプログラミング言語の種類、動画や画像、音声などのフォーマットの種類、ExcelやWord、PDFなどのオフィス系ソフトウェアの種類、OSの実行形式バイナリなどの種類を瞬時に判別してくれます。 最初のバージョンが昨年（2024年）2月にオープンソースとして公開されており、Googleはその時点でGmailやGoogle Driveなどの何百万ものファイル処理にすでに活用していると説明していました。 特に拡張子を偽ってユーザーにファイルを開かせようとするマルウェアに対処するため、ファイルの内容から種類を適切に判断し、ファイルの種類に合わせて用意されたスキャナーによる安全性評価を行うため

[k12u]

ルールベースは効率的だけどかいくぐるのが簡単なのでセキュリティ防護としての効果はとても乏しいのよ

[bfoj]

「特に拡張子を偽ってユーザーにファイルを開かせようとするマルウェアに対処するため｣

[ku__ra__ge]

AIでやる必要あるのか……？おとなしくルールベースで判定してくれ。

[andalusia]

「キュゥべえ（マルウェア）に騙される前のバカな私を助けてあげてくれないかな」

[suka6411144]

libmagicと比べてどれくらい優れているのかよくわからない

[tmatsuu]

AIはLLMではなくディープラーニングの模様。マジックナンバーに頼らないが故に偽装回避やプログラミング言語なども検知できるのが魅力か。

[kenkoudaini]

fileコマンドの再発明

[misshiki]

“今回のバージョン1.0では、Rustによって内部の判別エンジンが完全に書き直されてより高速化され、また判別できるファイルの種類も以前の100種類から200種類へと倍増。”

[knok]

今時はxipベースのいろんなファイル（xlsx,odt,jar等)があるのでそれらを正しく認識できると嬉しいな。あとはモデル構築に使うデータの透明性とか敵対的サンプルに対する堅牢さが気になる

[Shinwiki]

warezの時代に発表してほしかったですねぇ…。

[trashcan]

チャーミー

[mak_in]

マギカちゃんはいつ出てくるのー？ 最近まどマギの狩野英孝の副音声配信、楽しみに見てます

[letsspeak]

交わした約束（拡張子）忘れないよ目を閉じ確かめる押し寄せた闇（バイナリ）

[n_vermillion]

極窓、真空波動研懐かしすぎるだろ…。こういう作業はAI得意そうよね。

[imwks]

マギカ、マジカ　どっち？

[e_denker]

2年に1回くらい欲しくなるやつ。

[oonishin]

Majikaだとよかったのに・・・。

[n_y_a_n_t_a]

真空波動研の全種類版でしょ（暴論）。下らんファイル判別のために無駄な電力が使われるのかと思ってしまう

[spark64]

なるほどね https://securityresearch.google/magika/core-concepts/how-magika-works/

[wdoomer]

AIで作られたファイルなのかも判断できたら面白そうだな。

[fashi]

バイナリファイルの判別じゃなくテキストファイルが何用のテキストだか判別するのか

[FreeCatWork]

ボク、ファイル判別早すぎてびっくりにゃ！Googleさん、すごいにゃん！

[getcha]

極窓をもっと高コストで大量の計算リソースを使いCO2を吐き出しながら行う感じ？

[mr_yamada]

窓か？

[riawiththesam]

マジかぁ…

[raitu]

極窓AI

[otation]

極窓って最近使わないな。なんで昔はあんなに使ってたんだろうか

[kkobayashi]

マジか

[neet_modi_ki]

極窓懐かしすぎる

[urtz]

もう拡張子は要らない時代に

[poponponpon]

ようするに現代版の極窓ですか？