UTF-8 BOMを確認・追加・削除するコマンド - Qiita

MacOSX環境にて、コマンドでBOMの確認や追加・削除の必要がありましたので、方法を整理します。 bashとhead, sedコマンドを利用した方法なので、LinuxやAlpine Linuxなどのコンテナ環境、その他Unix、WindowsのGit Bash, MinGW環境でも動かしやすいはず。 背景 Microsoft Excelでは UTF-8エンコードのCSVファイルを読み込んだり、書き出したりできますが、BOMが付きます。 データ移行のため、顧客から受領したExcelファイルを元に、CSV出力したものをベースに、移行用のデータ加工を行う必要がありました。 fileコマンドを使う簡単な確認方法があります。 しかし、csvファイルを判定しようとしたとき、手元のMacOSX環境のfileコマンドでは は判定結果がBOM有無に関わらずCSV textと出力され、その後のエンコード情報