Частые ссоры в отношениях. Мне дороги эти отношения и этот человек, но я так больше не могу

Здравствуйте, встречаемся с молодым человеком уже 2,5 года. Последнее время мы стали очень много ссориться, по пустякам. В основном ссоры из-за меня. Из-за того, что я не могу сконцентрироваться на разговоре, а когда отвлекаюсь моментально забываю о чем говорила. Он говорит, что с этим нужно что-то делать, а что я могу? Я же не могу исправить свою память.
Проблема в том, что он стал меня жутко раздражать. Любое его действие или слово может стать причиной конфликта. Он пытается мне донести, что это глупо, а меня это ещё больше раздражает. И я понимаю, что Я-это причина конфликта, но ничего не могу с собой сделать. Не хочу быть "Цербером" в его глазах.
Он работает вахтовым методом и приезжает только на неделю в месяц. Мы мало видимся, что не можем надоесть друг другу. А с каждым его приездом злости все больше. Помогите, пожалуйста, мне дороги эти отношения и этот человек, но если это продолжится, то эти отношения скорее всего закончатся.