Мужчина грозится меня оставить ни с чем, если я уйду, не отпускает. Что делать?

Отношения с мужчиной, постоянно ругаемся, я недоговариваю некоторых моментов, которые ему не нравятся (это не измены), а он очень эмоционально и агрессивно на это ведётся, мы расставались два раза, встречаемся полтора года. Грозится меня оставить ни с чем, если я уйду и не отпускает. Что делать?