Инна С., здравствуйте! В подобных случаях я рекомендую открыто и честно обсудить с партнером все ваши сомнения. Все что вы здесь написали, вы ему рассказывали? И если да, то как он отвечает на ваши сомнения? В любом случае, в вашем письме очень много тревог по поводу совместного проживания и я бы не рекомендовала "идти против себя" и съезжаться только потому что он угрожает вам расставанием. Я бы порекомендовала разобрать все ваши сомнения и тревоги и прояснить всю эту ситуацию для себя. И с ним быть полностью открытой в этом вопросе, чтобы он понимал и учитывал ваши переживания. Тогда есть шанс снять свои сомнения и съезжаться уже без тревог и страхов, либо договориться с партнером (если сомнения остаются) и найти третий вариант, который подойдет вам обоим на данный момент.
Я могу оценить ситуацию только с ваших слов, его версию рассказа я не знаю. Но из вашего рассказа я делаю вывод, что партнер применят шантаж и давление для достижения своих целей, без учета ваших интересов. Если это так - есть над чем задуматься.