Но ведь именно отсутствие внимания с моей стороны и привело к его измене...
Он же не просто один раз изменил, чтобы показать, что ему не хватает внимание, потом вернулся и рассказал Вам. Он сказал, что у него чувства к этой женщине. То есть одного проявления внимания уже недостаточно.
На каких условиях Вы хотите его вернуть, на любых. Чтобы он был и с ней и с Вами? Тогда можно все продолжать, а он будет выбирать. Может выберет, а может нет. То же самое произойдет, если Вы отойдете в сторону и сохраните самоуважение. Он может выбрать, а может нет.
Решать Вам какой вариант Вам комфортнее. Он должен хотеть Вас вернуть. Если Вы ему нужны он вернет Вас.
Я написала вариант решения, я не могу дать гарантию, что он вернется. Нет панацеи. Единственное, что Вы можете - это помочь себе с достоинством выйти из ситуации. Подготовить себя, что может быть нежелательный исход ситуации. Иметь вариант действий, если он вернется.