ECMAScriptを正規表現で解く

最近、こつこつと Chiffon というECMAScriptのパーサを書き進めています。 この Chiffon の主な解析方法は正規表現です。 というのも、前に書いたJavaScriptコードをトークンに分解する正規表現が発端で、これを改良し、es6 にも対応させようとしています。 ECMA-262 の仕様を調べながらパーサを書いて、今まであまり知らなかったことがでてきたり、 いろんな構文パターンをテストしていくうちに、正規表現のミスや修正が必要なものがでてきました。 数値リテラル 数値リテラルにマッチする正規表現は /0(?:[xX][0-9a-fA-F]+|[0-7]+)|\d+(?:\.\d+)?(?:[eE][+-]?\d+)?|[1-9]\d*/g でいいかと思っていましたが、 ECMA-262 11.8.3 Numeric Literals をあらためて見ると表現が足りないこと

[manaten]

自分でパーサー書くと言語への理解が深まって良さそうですね

[amagitakayosi]

楽しそう

[efcl]

正規表現でJavaScriptのtokenize