Муж почти все свободное время проводит не дома

Здравствуйте, с мужем вместе почти 10 лет. Есть ребенок 7 лет и сейчас я беременна вторым. Отношения не простые, видимо по причине травматичного детства у обоих. У мужа отец был алкоголиком и когда мужу было 7 лет, отец погиб. Мама воспитывала его одна и тянула как могла. У меня- родители развелись (папа изменял), потом мама перевезла меня и сестер в другой город, жили в бедности. Я в терапии 11 лет, сама получила психологическое образование и продолжаю учиться.
Муж работает, не пьет вообще. Но почти все свободное время (я не преувеличиваю, я наблюдала) проводит с друзьями. Даже в праздники, стремится хотя бы на пару-тройку часов уйти из дома. Причем вне зависимости от того- хороший у нас период в отношениях (с сексом и без ссор) или нет. В измене с другой женщиной не подозреваю.
Меня это не устраивает и мы много раз это обсуждали. Он пытается, какое-то время чаще бывает дома. Но потом все опять как и прежде. Говорит, что любит меня. Стремится ко мне, обнимает, инициирует секс. Но мне после такого секса не хочется. Хотя я люблю секс.
До брака мы вместе ходили к его друзьям. Но потом появился ребенок и у меня другие приоритеты (семья). Иногда предлагаю ему провести время вдвоем, но чаще он сливается (надо помочь другу или сидит в телефоне). Со мной и ребенком также не гуляет. Говорит ему это не интересно.
Хочется понять что происходит и что мне с этим делать.