Van egy gyereke Angliában és egy Kanadában, nem is vallja magát kifejezetten jó apának, de azt azért nagyon bánja Varnus Xavér, hogy Magyarországon nincs egy gyereke. Pedig lehetett volna, csak akkori szerelme úgy vetette el a babát, hogy az orgonaművész nem tudott róla.
Édesanyja iránti rajongásáról és lerontott házasságairól beszél az eheti Bestben Varnus Xavér, aki ennek kapcsán a hetilapnak azt is elárulta, két fiával apaként sosem állt a helyzet magaslatán, így a ma már kamasz fiúk inkább barátjukként tekintenek rá, mintsem apjukként. Mégis Xavér azt mondta, nagyon bánja, hogy Magyarországon nem született még egy gyereke. Erre egyébként lett volna lehetősége a 90-es évek elején, amikor hazajött.
- Miután hazajöttem, volt egy roppant komoly kapcsolatom. Nagy és hosszú szerelem volt egy fiatal magyar orvoslánnyal. Egyik nap felhívott, hogy most nem tudunk a szokásos helyen találkozni, de menjek be a II-s számú nőgyógyászati klinikára. Ott ült az ágyon és sírt. Ekkor tudtam meg, hogy terhes volt, és a megkérdezésem nélkül elvetette a gyermekünket. Az a nap egyike volt életem kis halálainak - mesélte Xavér.
