OpenAI Privacy Filter を pre-commit フックに入れて個人情報のコミットを防ぐ

4 月に OpenAI から OpenAI Privacy Filter というモデルが公開されました。 テキストデータから個人情報を検出・マスキングすることができる、ローカルで動作するモデルらしいです。 というわけで、pre-commit フックに入れたら面白そうなので試してみました。 OpenAI Privacy Filter の使い方 (CLI) OpenAI Privacy Filter を使用するための公式 CLI が公開されているので、今回はこちらを使ってみます。 インストール pip で GitHub から直接インストールできます。PyPI には現時点では公開されていません。 usage: opf [-h] OpenAI Privacy Filter (OPF): redact text to remove PII. Redact locally via CLI and in

[mkusaka]

OpenAI Privacy Filter(OPF)のopf redactをpre-commitに組み込み、PII検出時はコミット失敗させる手順を解説。