Problemi di incomprensione con il mio partener,mi manca la libertà di scelta

Ho 31 anni, sto insieme e convivo da tre anni con un ragazzo (32 anni).
Viviamo in un paesino in provincia di Pavia ma non siamo del posto...veniamo da città diverse. La casa è di sua proprietà. Lui lavora a Milano e io lavoro in casa poichè libera professionista.
Mi sento infelice...ho sempre di più il desiderio di vedere la mia famiglia (non essendoci mai), da poco è nata anche un'altra sorella...ho voglia di passare il tempo con loro...chiacchierare ed essere serena. Qui non conosco nessuno, sono sempre sola.
Si è creata ultimamente l'opportunità di trasferirci nella mia città (dov'è la famiglia), lui ovviamente ha dubbi perchè abituato alla grande città.
Il problema è che lui dice che io dò troppa importanza alla mia famiglia e che li metto al primo posto...dice: "si sente quando ci parli a telefono e come ne parli a me". Però poi la sua famiglia si ferma da noi anche per 10gg ed io non fiato. Lui mi rinfaccia che sono sempre io ad andare dalla mia famiglia. Non vuole che mi facciano regali in denaro per potermeli spendere come voglio.
In questo momento mi sento mancare il fiato e non mi sento libera di fare quello che voglio...è come se dovessi chiedere sempre il permesso per ogni mio movimento. Ho iniziato a discuterne con lui...ma nega tutto rinfacciandomi come lui pensi solo a me e che fa tutto per me.
Non c'è comprensione...ne ascolto da parte sua. Non sò come uscire da questa situazione o cosa posso fare. Oppure non sò se è un problema solo mio.