Стоит ли разрешать отцу ребенка гостить у нас?

Мы разведены уже много лет, да и ребенок уже взрослый (19). Мой бывший муж живет в другом городе и иногда приезжает повидать детей (у него младше девочка еще в том же городе, что и мы, и тоже разведены). Мы с бывшим уже в нормальных отношениях, и я позволяю ему погостить у нас дома (где и сын живет). Отношения у нас назвала бы "как брат и сестра", и близкие и все уже давно перегорело. Вопрос: нормально ли позволять бывшему мужу и отцу своего ребенка приезжать и останавливаться у нас ненадолго? Иногда, правда, задерживается, и только под моим нажимом покадиет нас. Я стала встречаться с мужчиной, и он, узнав об этом, просто обалдел: сказал, что "это ненормально", что это "путает сына", т.к.не проведены четкие границы "мой дом - не дом для бывшего мужа". Я ему говорю: "Разное дело "просто бывшие" и отец-мать ребенка - это на всю жизнь связь, и что это временно, пока я не живу с мужчиной". Права ли я, или эта моя слабость только вредит и сыну и мне самой? Мне, често, жалко бывшего (один, без работы), мать его второго ребенка просто и дня терпеть его не может в своем доме, а я пускаю, жалею. Нужна ли такая жалость, человечная жалость?