Квартирный вопрос.

Здравствуйте. Встречаемся с мужчиной уже 3 года. Отношения очень хорошие. У нас в обоих есть дети. Первый год присматривались друг к друг , не поднимали квартирный вопрос . На второй год отношений я начала уже задумываться о совместной жизни , но тоже не спешила поднимать тему «жить вместе» , так как есть не очень приятный опыт с первым мужем.
Начали общий бизнес, нескоро раз были в отпуске сами, и с детьми.
Как наступил карантин взяли детей и остались на 2 месяца в квартире моего МЧ( квартира большая для всех есть место). После я вернулась домой к себе. Вопрос о том, чтоб я осталась с сыном не поднимал М.
Я дала ему ещё время, потом вытянула на разговор. На что он мне ответил , что хочет , чтоб мы съехались в общем доме , который построим. Начали смотреть участки,но пришёл финансовый кризис и пока нам не светить собственный дом. Поэтому я предложила съехаться у него в квартире.
Мой мужчина признался , что ему не нравиться и ему не комфортно когда кто-то в его квартире, что он не может расслабиться, такие у него тараканы и он не мог мне сказать об этом. И по его словам мне тоже будет не удобно ( так как все там уже сделано) и буду думать , что я в гостях. Ну самая главная причина это мой сын(, который будет с нами жить. (дочь МЧ живет с мамой). По словам МЧ, малый тоже будет думать, что в гостях, и МЧ не хочется своими бытовыми заморочками неосознанно обидить ребёнка. И плюс если в нас не получится отношения , то МЧ будет неприятно мне сказать об этом и сказать чтоб я уходила, что ему будет стыдно перед моими родными и он не хочет быть плохим. До этого МЧ ни с кем не жил.
Сказав все это он предложил снять новую квартиру , чтоб понравилась всем и начать жить там.
Умом понимаю , что может это правильно. Но есть такое чувство , что он думает, что я не та женщина м кем он хочет провести свои дни и состарится , поэтому не желает чтоб его квартира ассоциировалась со мной.
Жду ответа, спасибо.