Manipulation envers mes enfants par un pervers narcissique

Bonjour,
Je suis maman de 4 enfants, dont 2 garçons que j'ai eus avec mon ex-conjoint, l'un a 13 ans et l'autre aura 12 ans en avril. J'avais déjà 2 filles avant de le rencontrer et vivais seule dans mon propre appartement. C'est lors de notre relation que nous avons eu nos 2 garçons. À l'arrivée du deuxième enfant, faute de place, il a décidé que nous partions vivre dans sa maison plus grande pour nous accueillir tous.
Dès le début de notre relation, il y avait déjà des signes inquiétants, mais j'étais seule et je voulais une vie de famille, alors j'ai fermé les yeux. Durant ces 10 ans, j'ai enduré des remarques déplacées, il cherchait à me couper de ma famille que je voyais pourtant fréquemment avant de le rencontrer. Progressivement, pour éviter les disputes et les scandales, j'ai fini par m'éloigner des miens. Il élevait également mes filles à sa manière, de façon très dure, et avec le temps ses remarques envers elles sont devenues de plus en plus déplacées et blessantes. C'est à ce moment-là que j'ai commencé à me défendre et à ne plus rien laisser passer.
La rupture définitive est survenue lorsque j'ai invité ma sœur à séjourner chez nous pendant la visite de ma mère. Je suis ivoirienne et le sens de la famille est une valeur fondamentale pour moi. Il n'a pas accepté cette présence, ce qui a déclenché une violente altercation au cours de laquelle il s'en est physiquement pris à ma sœur, devant ma mère. J'ai considéré cela comme un manque de respect insupportable et me suis séparée de lui en 2022.
Depuis maintenant 4 ans, cet homme me harcèle moralement, psychologiquement et verbalement à chaque occasion. Il me dénigre systématiquement auprès de mes enfants, ment sur moi et sur ma famille dans le but de me faire détester par mes propres fils. Malheureusement, cela fonctionne, notamment avec mon fils aîné qui cautionne désormais ses propos et me parle constamment mal, me considérant comme une "mère indigne".
Un exemple concret et récent : je suis infirmière et travaille parfois de nuit. Un soir en partant travailler, mes fils n'étaient pas seuls : leur grand-mère était présente et le repas avait été préparé. Malgré cela, mon ex-conjoint a envoyé un message écrit particulièrement violent et humiliant, m'accusant d'avoir abandonné mes enfants, de ne pas être une mère digne, voire "une mère tout court". Ce message, que je conserve, contient également des menaces voilées et des accusations mensongères. Il n'en est pas à son premier message de ce type, c'est un comportement répété depuis des années.
Concernant l'organisation actuelle, nous avons mis en place une garde alternée, une semaine chez lui et une semaine chez moi. Cependant, en pratique, leur père est présent dans leur quotidien quasi tous les jours car c'est lui qui gère les devoirs et les activités extrascolaires. Il a donc la main à environ 90% sur leur éducation au quotidien, ce que j'accepte car je reconnais son implication et je ne souhaite pas priver mes enfants de leur père. Je n'ai ni la volonté ni l'intention d'engager une procédure judiciaire, d'autant que je n'en ai pas les moyens financiers ni le temps avec mon travail d'infirmière.
Je précise également que cet homme a déjà perdu la garde de ses enfants d'une relation précédente, ce qui explique sans doute son obsession à vouloir garder le contrôle total sur nos fils. Mon fils lui rapporte tous mes faits et gestes, mes paroles, ce qui alimente le harcèlement en continu.
Je ne ressens aucune haine envers lui. Je reconnais qu'il subvient aux besoins matériels de nos fils et je comprends sa peur liée à son histoire personnelle. Mais je suis épuisée. J'ai l'impression de m'être séparée d'un homme toxique pour qu'il ne soit en réalité jamais vraiment parti, continuant à empoisonner ma vie au travers de mes propres enfants. Ma relation avec mon fils est aujourd'hui au point de rupture et je ne sais plus quoi faire, ni pour lui, ni pour moi.
Que puis-je faire concrètement, sans recours judiciaire, pour me protéger de ce harcèlement et obtenir un minimum de respect de la part de mon fils ?