уйти или переждать его развод?

Здравствуйте! Полгода встречаюсь с мужчиной (36 лет) в процессе развода. Он был женат 7 лет. У него 2 маленьких детей, которые меня любят. При них я играю роль друга, чтобы не травмировать.
За несколько месяцев до наших отношений его бывшая жена ушла от него на словах, нагуляла ребенка и хотела вернуться. Он отказался, конечно. Попытки она все ж делает \"под разными соусами\".Ради детей он общается с ней нормально. Я не принимала это, но ради него стараюсь спокойнее относиться.
Они делят детей по его просьбе: чередуют ночевку детей. Он видит их каждый день, любит и не бросит.
Мы каждый день с ним общаемся. Раньше я даже жила у него практически (когда дети у матери).
Бывшая то и дело предлагает всем вместе куда-то сходить. Зачем-то хочет познакомиться. Я против и испытываю стресс. При этом она же против, чтобы я приходила в гости к нему, когда дети у него. Он сначала соглашался с ней. Потом передумал,после рождения ее ребенка, когда отец ребенка начал походы к ней. Их дети не знают пока, что новый ребенок от чужого дяди.
У нас доверительные и честные взаимоотношения. С месяц назад он сказал, что его душит чувство вины обязательства перед о мной, что не может сейчас дать того уровня внимания мне и понимает, что мне нужен муж. Я попросила отложить этот разговор еще на полгода. Слукавила, что пока не хочу. Дала ему больше свободы от себя, перестала инициативу проявлять. Я его тоже понимаю - будучи верным хорошим мужем еле вырвался из брачных уз! Ему не захочется еще долго в брак. Но детей он еще хочет. Это обнадеживает.
Уже несколько дней у меня бессонница. Мысли о том, что я начала хотеть большего, а он наоборот. Его все устраивает. Он хороший, добрый и честный. У нас очень правильные ровные отношения. Поэтому бросать его не хочу. Но мне тяжело. Как пережить этот период? Или так будет всегда и стоит уйти, пока не привязалась совсем?