Mon compagnon est nostalgique

Bonjour,

Je suis en couple depuis 5 mois avec un homme, avec qui tout allait très bien il y a encore quelques semaines.

Pour le contexte, son ex-compagne (et mère de son enfant) l'a quitté il y a plus d'un an, car elle voulait penser à elle et s'amuser.
Il a très mal vécu la situation mais il a suivi une thérapie. Il a eu deux relations courtes (quelques semaines), auxquelles il a mis fin car ces personnes ne lui correspondaient pas du tout. Puis nous nous sommes rencontrés.

Avec son ex, ils sont quotidiennement en contact pour la garde de leur enfant et des animaux.

Elle, elle vit sa vie, et dit ne pas vouloir revenir avec lui. Elle a eu depuis plusieurs relations.
Pour autant, elle maintient toujours une trace d'elle dans sa vie. Elle n'a plus de sentiments mais a toujours apprécié le confort de vie qu'il lui offrait. Elle le manipule et il ne dit rien.

Depuis quelques semaines, alors que tout allait bien entre nous, il est devenu plus distant (moins de messages, moins le désir de me voir).
J'ai pu lui faire part de ma souffrance et de mes interrogations. Il m'a dit être perdu, car il est envahi par des souvenirs de son ex-compagne, avec leur enfant... et la période des fêtes n'arrange rien...

Il dit qu'il n'attend pas que son ex-revienne.
Qu'il ne se reconnaît pas à être si distant dans notre relation. Pour autant, il dit être bien avec moi et ne pas vouloir mettre un terme à notre relation. Il ressent le besoin d'être seul chez lui, bien plus souvent qu'avant.

A mon tour, je suis complètement perdue, et remplie de doutes et d'inquiétude.

Comment gérer cette situation svp ?