Забрала детей и ушла от мужа. Стоит ли разводиться?

В браке с мужем 14 лет, двое детей. У него ещё есть ребёнок, рождённый вне брака до нашей встречи. После рождения второго ребёнка (долгожданный сын) и переезда в собственный дом (до этого жили на съёмных квартирах) его поведение резко поменялось. Стал проводить большую часть своего свободного времени вне семьи (поездки по работе, отдых с друзьями, бары, клубы), стало в норме не сообщать о месте своём нахождении вне рабочее время (даже ночью), потом стал приходить утром, а иногда мог и по два дня не выходить на связь. Говорит, что это просто загулы с друзьями. Я выражала свое недовольство не раз, не могу с ним скандалить и кричать. Но, что такая семейная жизнь меня не устраивает, он знал. Продолжалось это 7 лет. Я стала вечно недовольной в его глазах, поскольку в нашем окружении тоже уже знали, что он себе позволяет вести себя таким образом, то началось моё принижение в глазах других (родственников и друзей). Мне проводить время со своими друзьями можно было только если я найду с кем оставить детей (это его позиция). Так я практически осталась без общения с друзьями. Только работа, дом и дети. Пару лет назад ходила с его родной сестрой на концерт в клуб, там не было связи, после выхода на улицу увидела его пропущенные звонки и сообщила, где я была и с кем. Потом сразу приехала домой на такси примерно в 00:30 и встретила агрессию дома (бил и пытался выгнать меня из дома). Что я была в это время с его родной сестрой его не волновало. После этого вообще боялась выйти куда-то поздно в развлекательные места без него. Три месяца назад я ушла ночью из дома с детьми: после очередного скандала, он орал, бил посуду, мебель и угрожал (причина: моё недовольство что поминки его отца решили делать у нас дома, при наличии квартиры, где всю жизнь прожил его отец, и кроме меня (снохи, которая даже не успела застать его в живых) есть и жена и дочь, которые так и не позвонили мне и не предложили какую-либо помощь в организации поминок). Ещё у нас с ним разная вера, и это дополнительно затрудняет для меня организацию такого мероприятия. Прошло три месяца, мы живём отдельно, я с детьми. Первый месяц я очень сильно его боялась, сейчас уже полегче. Он так и держит позицию, что я была не права, не должна была отказывать в проведении поминок и сама его довела до скандала такого. Я вообще не могу кричать или скандалить как он, сразу слезы у меня от страха и обиды (в детстве родители часто громко ссорились когда папа был пьян). Что делать, стоит ли ждать что его отношение изменится, (сейчас я к нему не чувствую уже того, что раньше, не хочу возвращаться и боюсь что дальше будет ещё хуже) или нужно уже подавать на развод?