Любовник мечется. Как быть?

Здравствуйте! Помогите пожалуйста разобраться в ситуации! Я замужем 22 года, муж ходит в море, но по приезду никаких семейных отношений нет как таковых... Спит в соседней комнате, при попытке поговорить о том что я женщина и мне ещё нужен секс пытается придумать проблемы, которых на самом деле нет, бывает что за 4 месяца секс бывает пару раз и то от моей настойчивости. В те моменты когда начинаем из за этого ругаться, постоянно твердит одно-не нравится, найди себе другого! В остальном он очень хороший, мне помогает во всем, очень воспитанный, детей любит, деньги очень хорошие зарабатывает, что позволяет мне сидеть дома и ни в чем себе не отказывать. В общем ситуация такая, что в отсутствии мужа появился у меня мужчина и мужчина полная противоположность моему мужу-все меня в нем устраивает, хоть характер вулканоподобный, может быть нежным и ласковым, в может вспылить в секунду. Но в отличии от мужа это настоящий Мужчина и по характеру и по действиям. Пятый месяц длятся наши отношения-2 из которых мы практически жили вместе (он работает у меня по ремонту), иногда ночевать уходил к сестре (жена живет в соседнем городе и домой он уехал только после окончания ремонта). Все было замечательно и по его словам и готовлю я очень вкусно и забочусь о нем постоянно и в сексе я бесподобна и делаю много того чего не делает жена, но постепенно началось... Мол его терзает совесть... Сегодня приехал и у нас был разговор, скорее его монолог, что отношения в семье ужасные, жена карьеристка и ей плевать на него и живут они как соседи, но он хочет вернуть семью, хочет чтоб все было хорошо в отношениях с женой у которой в телефоне случайно обнаружил очень тёплое смс адресованное другому мужчине. Ну, а со мной решил прекратить отношения, так как и так начинает понимать что начинает зависеть от меня, тоесть я чувствую что у него есть ко мне чувства, но он от них пытается сбежать. Он очень не глупый и здраво рассуждает, но когда я выпала из нашего общения на 2 дня полностью, не писала ему ни в каких соц сетях-он напился в хлам и позвонил мне... Но, он Считает наши отношения бесперспективными, что приедет мой муж и что тогда? Жить до его отъезда и украдкой встречаться? Говорит что хочет меня, но не может себе это позволить так как хочет вернуть семью. В общем какие то качели... И туда и сюда... Мне очень больно и я не понимаю что со всем этим делать??? Подскажите пожалуйста, может стоит пока оставить его без общения-нигде не отвечать на его смс? Но вдруг это отдалит его, а я не хочу этого, я наоборот хочу все вернуть!