С мужем в разводе. Ребёнок (11 лет) пугает, что уйдет жить к папе. Как вести себя в такой ситуации?

Здравствуйте, проблема такая, мы с мужем в разводе, у нас общий сын, ему 11 лет. У нас приятельские отношения с бывшем мужем. В жизни сына он принимает активное участие. Сын к нему ездит почти каждые выходные. В пятницу уезжает, в воскресенье домой. Недавно, при ссоре, стал пугать меня, что уйдет к папе жить. Я понимаю, что папа такой же родитель. Сын сейчас может так и бегать то к папе, то домой. Мама ругает, уйду к папе, папа ругает, уйду к маме. Как вести себя в таких ситуациях?