武州児玉郡保木野村(現在の埼玉県本庄市児玉町保木野)に生まれる。塙は師の雨富須賀一の本姓を用いたもので、荻野(おぎの)氏の出自。近世に帰農した、百姓の家系であるという。父は宇兵衛、母は加美郡木戸村(現在の上里町藤木戸)の名主斎藤理左衛門家の娘きよ。弟卯右衛門(うえもん)。 幼少の頃から身体は華奢で乳の飲み方も弱く、丈夫ではなかった。草花を好み、非常に物知りであったという。5歳のときに疳の病気(胃腸病)にかかったのが原因で、目痛や目やにの症状が出て徐々に視力が弱っていき、7歳の春に失明した。あるとき、虎之助のことを聞いた修験者が「生まれ年と名前の両方を変えなければ目が治らない」と進言し、名を辰之助と変え、年を二つ引いた。しかし、目痛や目やには治ったものの、視力が戻ることはなかった。その後、保己野村のすぐ近くの池田村に住む修験者の正覚房(しょうかくぼう)に「自分の弟子になれば治らぬ病気はない」