趣味は鉄道模型で、小学3年生でOゲージを買ってもらい、中学2年生でHOゲージに転向、高校時代に完成させたレイアウト「SPライン(Sはsilk=絹、Pはparasol=傘、絹傘→きぬかさ→衣笠、当時の住所から使ったとのこと)」を専門誌『鉄道模型趣味』に投稿し、1958年1月号に掲載されている。その後進学した同志社大学でも鉄道同好会に在籍している。 1965年、同志社大学工学部電気工学科卒業後、大手家電メーカーへの就職を希望していたが、成績不良によりいずれも就職試験に落ち、近所にあってなおかつ採用してくれたという理由で任天堂に入社する。当時の任天堂は京都の花札・トランプメーカーにすぎず、横井は工学部卒の入社第一号だったと言われている。 入社当初は電気主任技術者として電気設備機器の保守点検の仕事を任されていたが、暇つぶしで格子状の伸び縮みするおもちゃを作り遊んでいたところを社長の山内溥に見つかり