Ушла с детьми от мужа к другому мужчине. Но с ним не получилось жить, как семья. Что мне делать теперь?

В январе месяце я ушла от мужа и стала жить с мужчиной, мы с ним прожили пять месяцев, расстались по его инициативе (у меня трое маленьких детей, он сказал, что дети непослушные - не выдерживает, боиться им что-либо сделать). Сказал, останемся друзьями. Как он ушёл, я один раз увиделась с бывшем мужем, гуляли с детьми, мужчине, который от меня ушёл, это не понравилось, он сказал, что с моей стороны это предательство. После его ухода, он сам стал звонить и помогать нам, но при этом говорил, что вместе мы не будем. Он мне говорит "у тебя своя жизнь, у меня своя", но при этом он не даёт мне строить отношений, хотя сам сидит на сайтах знакомств. Хуже всего, что дети привыкли к нему и называют папа. После того, как он ушёл, у меня нарушился аппетит и сон. Я не знаю, что делать, как жить дальше...