Relazione con persona che ha una figlia

Buongiorno.
Ho 40 anni e ho una relazione da 1 anno e mezzo con una persona, anch'essa 40 anni, che ha una figlia di 11.Lui è di Milano, si è trasferito da me, Imperia, circa un anno fa.
Non mi ha mai presentato alla figlia fino a 2 mesi fa, anzi quando lui le telefonava io dovevo stare muta e attenta a non far si che lei sapesse che era con me.
Quando l'ho conosciuta non siamo praticamente riuscite a scambiare più di 2 parole perché eravamo molto in imbarazzo...Lui ogni 20 giorni va dalla figlia per una settimana, e io ormai vivo questa situazione ogni volta come un abbandono.
Non tollero che lui debba andare così spesso, senza contare che non si vuole trovare un lavoro fisso perché non potrebbe andare quando vorrebbe, e questo incide molto sulla nostra vita perché non ha mai un soldo.
Mi sento come se non avessimo futuro, non possiamo progettare niente, vuoi per i soldi, vuoi per la figlia.
Figlia che tra l'altro è molto viziata e dice frasi ad effetto per far sentire in colpa il padre, che quindi non manca un mese senza andare a milano.
Spesso mi sento in colpa perché è ovvio che la figlia venga prima di tutto, ma io che ruolo ricopro?
Mi sento messa in un angolo, ad aspettare il suo ritorno, a dovermi sempre accontentare perché lui ha una figlia e quindi viene prima lei e quindi io mi devo accontentare.
Non ce la faccio più in questa situazione ma non riesco nemmeno a lasciarlo.
Non so cosa fare.
Grazie per l'attenzione.