Бросил молодой человек. Обрубить все концы?

Здравствуйте! Меня оставил молодой человек. Мне 32 года, ему 28. Познакомились на работе полтора года назад, он был женат, есть ребенок от этого брака. У нас завязались отношения, сначала ни к чему не обязывающий флирт, позже привязанность, которая переросла в более сильные чувства. Через полгода после нашего знакомства он расстался с женой, точнее она от него ушла, узнав про его измену. Еще месяц спустя он снял квартиру и я стала оставаться у него почти каждый день. Были несколько раз разговоры о том, чтобы жить вместе, но так ничем и не заканчивались, я была на гостевом режиме. Еще полгода спустя я забеременела, сначала он сказал, что ребенок ему не нужен, он не готов стать папой еще раз, но об аборте речи не шло ни с его стороны, ни тем более с моей. Мы сильно поссорились, но через пару недель снова стали общаться, спустя какое-то время он предложил переехать к нему и я переехала. С уходом в декрет я стала часто оставаться у мамы, т. к. были условия для сна, прогулок и подготовки к родам. За месяц до родов мы сильно поссорились, были попытки обьясниться и как-то наладить отношения в основном с моей стороны, т. к. я чувствовала большую часть вины в ссоре. После ссоры я осталась жить у мамы. Мы редко созванивались. После родов он не приехал на выписку, мы с ребенком выписались к маме, он приехал через неделю и сказал, что не готов к тому, чтобы мы жили вместе и ему лучше одному. Еще через неделю привез мои вещи. У меня чувство, что я разрушила отношения и оставила ребенка без отца, т. к. к ребенку у него неоднозначное отношение: сказал, что отцом себя не считает, потому что я записала ребенка на свою фамилию (с ним этот вопрос был согласован). И теперь я незнаю как поступить: принять его нечастые визиты к ребенку и смирится, или разрубить все концы, потому что общаться с ним мне тяжело?