У меня папа ушёл из семьи к другой женщине, и я с детства знала, что он изменял маме
Вполне вероятно, что тут кроется одна из причин. А Ваши предыдущие отношения - это уже следствие. Как впрочем и нынешние отношения. То есть у Вас подсознательно уже есть готовность к тому, что Вас бросят и предадут. И обычно то, чего мы больше всего боимся, то и происходит.
Попробуйте сформулировать убеждение, которое могло у Вас сформироваться на основе этого негативного опыта в Вашей родительской семье.