栗の表面に虫食い穴がないのになぜ虫がいる？？？

そろそろ秋本番とゆうことで休日を利用して山に栗拾いに行って来ました。 けっこう収穫できて、さぁ～今日は栗ご飯だ！ と意気込み栗の皮剥きを何時間もかけて向くことになったのですが・・・ 当たり前ですが、虫食いの穴が開いている栗の中には虫がいるだろぅと思い穴の開いてない栗だけを一個一個見ながら収穫したんです。 だから皮を剥く時も安心してたんです（虫がこの世で一番大嫌い！） でも・・・いたんです幼虫みたいな白い虫が。 収穫した中のいくつかにいたんですが、何故なんでしょうか？ 鬼皮部分に虫食いの穴は見当たらないのに何故、栗の中に虫がいるんでしょうか？ どうやって入り込んだのか？ 何時から栗の中にいるのか？ それが不思議でしょうがないんですが誰か教えてください。