Как объяснить любимому человеку, что мне тоже нужно личное пространство? Не хочу его обидеть и быть виноватой

Я начала говорить молодому человеку, что не нужно у меня сидеть на работе. Что меня коллеги подкалывают уже. Он говорит,ты что не можешь ответить им так, чтобы они больше не говорили такого. Я ни чего, толком им не отвечаю, и не показываю, что мне не удобно. А по поводу личного пространства я задумываюсь часто. Мы постоянно вместе, я попросила хотябы на работе чтобы реже созванивались. Он воспринимает это в штыки. Как мне ему сказать, чтобы не обидеть и не быть виноватой?