Не могу принять детей партнёра от предыдущего брака. Стоит ли продолжать отношения?

Девушка, мне 26 лет. У моего партнёра двое детей от предыдущего брака, и я никак не могу их принять. Очень неадекватная бывшая жена, которая постоянно названивает, просит денег, манипулирует детьми и он ведётся на эти манипуляции. Я не знаю, что делать, я пытаюсь принять ситуацию, даже пробовала подружиться с детьми, и они ко мне хорошо относятся, но внутри я кроме раздражения и негатива к ним ничего не испытываю. Была договорённость, что он видится с ними в будние дни, а выходные мы проводим с ним вдвоём. В итоге, он пытается надавить на меня, что хочет проводить с ними выходные, я прошу его понять меня и все-таки соблюдать договорённости, потому что проводить с ним выходные для меня очень важно, потому что на неделе из-за работы мы почти не видимся, но он не понимает и не слышит меня. Ещё случилась ситуация, что они оказались в отпуске с нами, так как все мы отдыхали у его родителей, и дети постоянно заходили к нам в комнату без стука, было даже не переодеться нормально, я попросила его поговорить с ними, но ситуация никак не изменилась, дети продолжали вести себя как хотели, хотя он сказал, что поговорил с ними. В итоге отпуск с ними был настолько невыносимым, что я купила билет и просто сбежала. Помогите, стоит ли продолжать эти отношения? Я стараюсь перебороть себя, но эти эмоциональные качели мне безумно надоели. Мне обидно, что партнёр не понимает как мне тяжело.