Проблема в семье

Добрый день, боюсь сама со своей проблемой уже не справляюсь - нужна помощь специалистов.
История: живем с мужем 13 лет, из них 6 лет в гостевом браке. Сыну 10 лет, мужу 52 года. Пол года назад я переехала с сыном жить к мужу. Все было нормально пока я не вышла на работу (работаем с мужем вместе, я хороший финансист). Со мной в кабинете работала девочка (22 года), мужем всячески опекаемая, мне было предложено обучать ее, чтобы в последствии я смогла больше времени уделять семье/себе/мужу/ребенку. Что я и делала. Потом случилось, что муж стал все позже приходить домой, пьяный, кричал на ребенка. Я не могла понять,что происходит. Два месяца назад случайно прочитала его смс-поздравление вышеуказанной девочке с пятилетием отношений, которые для него много значят. Была в шоке. Попросила объяснений, ответ: что объяснять все очевидно, не отпирался, но сказал, что там только секс. Хотела вернуться к себе в город, но жалко сына он очень любит отца (сама росла без отца, знаю как это трудно).
Кое-как устаканили отношения. Девочку уволили. Вроде-бы дома спокойно. Но...секса нет, объяснил, что он меня не хочет, его то и раньше практически не было, но я списывала все на его возраст и стеснялась настаивать. Когда пытаюсь с ним поговорить, слушает, но ничего не меняется.
Стала нервная, подозрительная, проверяю телефон, ищу какие-то улики. Не верю. Панически боюсь, что он опять выставит меня дурой (на работе все были в курсе, они и не прятались, а коллектив 40 человек и в основном жен. и каждая считает своим долгом пожалеть меня, научить и т.д.)
Я спокойно отношусь к сексу на стороне, не считаю это изменой, но когда это не вынесено на всеобщее обозрение.
Вчера был скандал. Не выдержала - сорвалась, хотя ему обещала, что вспоминать про ту историю не буду.
Извините, про сумбурный рассказ.
Помогите, пожалуйста.