Im Herbst 1872 begann er am eidgenössischen Polytechnikum (heute ETH) in Zürich das Studium als Ingenieur-Topograf.
Xaver Imfeld wurde in Sarnen geboren und besuchte dort die Primar- und Realschule. Nach dem Umzug der Familie 1867 nach Luzern wechselte er an die dortige Industrieschule. Seine topografische Begabung stellte er schon mit siebzehn Jahren unter Beweis, als er ein Pilatus "Pilatus (Bergmassiv)") relief "Relief (Kartografie)") 1:50'000 modellierte. Im Herbst 1872 begann er am eidgenössischen Polytechnikum (heute ETH) in Zürich das Studium als Ingenieur-Topograf.