Nome partner

Salve, sono una donna di 45 anni, separata da dieci con due figli, che ha in attivo, nel suo passato, due anni convivenza (fino al 2007) con un altro uomo.
Tale rapporto, per il primo anno è andato avanti normalmente salvo poi scoppiare letteralmente l'anno successivo.
Dall'anno scorso (luglio 2010) ho un nuovo partner con cui mi trovo abbastanza bene. Il mio problema è che, per ben tre volte nell'arco di qualche mese (l'ultima volta il mese scorso), ho sbagliato il suo nome, chiamandolo come il mio ex convivente.
Il mio attuale "lui" ne ha fatto un problema e da allora ha cominciato a credere che io pensi ancora all'altro.
La sua motivazione è che non è possibile una semplice distrazione (anzi tre) in quanto il tempo trascorso (2007-2010) dalla fine del mio rapporto è troppo ampio... tra l'altro, due anni fa, ho avuto una breve storia durata circa tre mesi con un altro.
Io sono realmente convinta di amarlo, anche più di tutti i precedenti uomini che ho avuto ma questa cosa sta minando il nostro rapporto.
Così mi chiedo... è normale ciò oppure, come dice lui, i miei sono "lapsus freudiani"?