Муж тащит за собой всех родственников

Добрый день! Ситуация такая: с парнем вместе 2 года (мне 26, ему 37) , недавно он купил дом в своем родном городе и зовет после свадьбы жить у него. В моем городе у меня есть нормальная работа, я живу с родителями в частном доме, и мне хочется быть с ним вместе и начинать для себя все новое, но прикол в том, что в этом доме, куда он меня зовет, будут жить еще его мама и сестра с 3-я детьми.
У меня был плохой опыт жизни в таком же составе с бывшим парнем, где я была никем и воспринималась лишь как снабженец продуктами и уборщицей.
Почему так? Если он хочет создать семью, то должен отделиться от матери с сестрой. Они живут в отдельном нормальном доме, но парень говорит что им будет тяжело одним (а все годы было нормально и не тяжело). Я прошу жить отдельно, готова работать и платить за все блага поровну, но он уперся и слушать не хочет.
А как же мне быть? Я ведь чужой человек, и с людьми редко очень сближаюсь, не хочу чтобы было как в прошлый раз (слова не скажи, спи с открытой дверью, кастрюли с рук вырывали, вещи перебирали все до одной). Моя семья - это когда я и муж (отдельное царство), а когда он, все родственники плюс я - это семья мужа плюс я. Вот как поступить? Я считаю что имею полное право в своей будущей семье строить свои правила, а не плясать под дудку чужих людей.