Муж вспоминает мое прошлое и злится, выводит меня из себя

Здравствуйте. У меня такая ситуация. Живём с мужем уже почти 9 лет. Есть маленький ребёнок.

Когда мы с ним познакомились мне было 18 лет как и ему. В то время он меня расспрашивал были ли у меня мужчины, а я ему все рассказала. Была очень глупая. Теперь спустя 9 лет он иногда это вспоминает, очень злой становится на меня. Говорит иногда что ребёнок вдруг не его. Вдруг я ему изменила.

Если я ему пытаюсь объяснить что ребёнок конечно его это его очень сильно начинает с себя выводить. Ему просто могут сказать друзья что ребёнок на меня похож и от этого он уже очень нервный становится и конечно очень на меня злится. Что мне делать? Помогите пожалуйста.