Ma relation avec mon conjoint est elle toxique ?

Bonjour, je suis en couple depuis 6 mois avec un homme de 53 ans, je suis agée de 48 ans.
Seule depuis des années, je me suis attachée à cet homme en priorité par son charme, puis sa gentillesse, assez attentionné, affectueux, et je peux dire aimant depuis quelques mois...il en va de même pour moi..
Le premier point negatif chez lui ( pour moi personnellement )
c'est de me dicter comment je dois m'y prendre avant même que je n'agisse où que je ne m'exprime...c'est quelque chose qui m'agasse car je suis une grande célibataire endurcie, très solitaire et surtout très indépendane, par choix depuis presque 10 ans..
Le deuxième point par la suite, petit à petit.. il s'exprime de maniere un peu agressif.. il crie... il me dit qu'il a le verbe haut et qu'il n'y a rien de méchant...puis depuis quelques mois ce sont des insultes ou plutôt des gros mots sans signification pour des petites querelles sans gravitées...et il me dit qu'il ne pense pas ce qu'il dit ...il me traite de saloperie... de débile sans cesse ... et si grosse dispute parce que je lui fait un reproche soit il fui, soit il me rejette la faute, soit il me sort une vieille histoire que je lui ai raconté en m'accusant à tort sur des faits infondés....soit il me dit 'd'aller me faire en....er ' ....
C'est une personne qui parle de lui, de son passé à répétition...et ne me laisse peu de temps pour m'exprimer en retour ...il me coupe souvent la parole ....
Il me repond aussi, quand je lui de m'avoir dit ci ou ca ... que non il ne m'a jamais dit ..ci ou ca .....
Toutes ces choses se répètent de plus en plus voir presque quotidiennement....même que cela fait 3 fois maintenant que pendant une dispute il ne se gêne pas pour m'insulter en public... en bas de chez moi, dans le couloir d'un hotel où se trouvait des femmes de chambres.. puis en pleine route sortant de la voiture qu'il conduit pour rentrer à pied ...
Suivi de petits mensonges banals...
J'ai essayé quelques fois de le quitter, mais nous nous aimons...
Doit-je continuer dans cette relation ? ou le quitter avant qu'il ne soit trop tard ?
Merci pour votre réponse que j'attend avec impatience...