Муж постоянно напоминает о моей измене, хотя прошло 4 года. Это закончится? Мне 40 лет, трое детей

Здравствуйте! Мне 40 лет, у меня трое детей. С мужем до развода прожили почти 18 лет, Жили по разному, то жили, то расходились, Муж часто употребляет спиртное, почти каждый день после работы, это уже просто образ жизни. Но тем не менее он работал, вроде все делал для нас, но что то было не то, может быт заел, может его питье надоело, я познакомилась с молодым человеком и начала встречаться с ним. Но длилось это недолго, как то раз муж взял в руки мой телефон и пришла смс от того парня. Тут то все и пошло-поехало, не хочется вспоминать.
Вобщем, мы разошлись, он жил в саду, а я с детьми в квартире. Мы сначала не общались совсем, потом начали, ходили к нему по выходным, но всегда любой разговор возвращался к моей измене, причем так ужасно, с извращенными словами, при детях, говорит, что все детям расскажет, когда вырастут, что семьи больше никогда не будет, что я черти кто (мягко сказать), и так постоянно.
Прощло уже 4 года, но мало чего изменилось, у меня нету сил это слушать, но знаю, что виновата, но на тот момент хотелось сделать именно так. Но мужу ничего не обьяснить, он очень сложный, очень, не будет слушать ничего, он всегда прав и все тут. Я хочу быть с ним, стать снова семьей, но боюсь того, что не вынесу ежедневных обвинений если будем вместе. Как у него хватает сил и нервов все это вспоминать, перечислять, и все ведь с негативными эмоциями! Как уберечь детей от этого выслушивания? И зачем он это делает? Помогите, пожалуйста, советом, тк чувствую, что самостоятельно мне не справиться. Спасибо!