Partir ou se remette en question ?

Bonjour,
Je ne sais pas si c'est l'endroit pour parler de mon soucis.
Je vis avec quelqu'un depuis 4 ans bientôt et je suis complètement perdue.
Lorsqu'il est énervé et/ou sous l'emprise de l'alcool il m'insulte et me rabaisse, me disant constamment que je suis faible et une bouffone. Je suis systématiquement la source de son énervement et comme il me l'a dit, s'il boit, c'est de la faute (alors que je sais à 100% que c'est complètement faux).

Il est violent dans ses paroles et dans ses actes (il se cogne la tête contre les murs, tape dans les murs, ça c'est vraiment dans les cas extrême). Il est menaçant "tu veux du sang pour comprendre?" "Il faut que je passe a travers la vitre pour que tu comprenne ?". J'ai souvent peur De ce qu'il est capable de faire.

De mon point de vue, il va trop loin et son comportement est inadmissible. Mais mon problème c'est que je me pose la question de savoir si finalement je ne suis pas réellement la source de son comportement. Par exemple un soir, il est rentré et comme d'habitude il me dit qu'il allait boire sa bière. Compte tenu du comportement et paroles qu'il peux avoir lorsqu'il est sous l'effet de l'alcool, je ne supporte plus le voir boire ne serait ce qu'une canette de 33 cl d'Heineken.

Je lui ai donc fait savoir de manière un peu agressive. Sur quoi il a commencé à mal parler avec le ton "je donne un ordre", comme s'il était mon père ou mon patron, à me dire que J'ai cherché la m****, que je lui "cassait les *** ", que je ne devais pas être étonnée ni me plaindre des conséquences.

Au début je répondais en me défendant et en contre disant les mauvais mots qu'il me disait. "Tu es une faible, un homme, tu ne fais plus rien !.... etc...." "Tu ne sera la femme de personne d'autre, moi J'arrive à te tolérer" (reproche su mon caractère, ce que j'en comprend c'est que je suis invivable). Une fois que cela s'est calmé, J'ai reçu un coup de fil d'un médecin et alors que je me levais pour noter le rendez vous, il a dit "tu vas ou?, tu ne bouges pas sinon, je te suis comme un chien". Il m'a expliqué avoir fait ça parce que je l'avais énervée lorsqu'il rentrait du boulot. Comme une punition, il ramène beaucoup de choses à lui: je suis malheureuse ? Lui plus. Je suis fatiguée? Lui plus etc...

Il y aurait tellement de choses à dire que je ne peux pas tout mettre ici.
Je ne sais pas si je dois le remettre en question parce qu'il a raison sur tout les reproches qu'il peux me faire. Je pense qu'il faut que je le quitte parce que je me sens sombrer et que je pense que personne ne devrait subir cela. Mais est ce vraiment la solution ? D'autant que si je pars il va "péter un câble" et je vais en baver.

J'ai très peur de passer le pas même si je sais que je serai aidée et entourée. J'ai 32 ans, des envies d'être maman mais avec lui cela me paraît impossible. Je pense avoir besoin de voir un psy mais je m'en empêche car "va voir un psy mais ne parle pas de moi" et si mon comportement change vis à vis de lui c'est que le psy m'aura monté le bourrichon. De toute façon pour lui quoi qu'il me dira, si cela ne va pas dans son sens, ce sera de la merde et un menteur et je devrait avoir honte de l'écouter plutôt que lui.

Je vide un peu mon sac mais je suis vraiment perdue et je ne me sens ni la force et le courage de continuer ni de partir.
Est ce vraiment à cause de mon comportement que tout cela arrive ?