Как изменить себя?

Мой недостаток, который мешает мне в жизни. Это то, что я не могу отказать людям. Касается и работы (поэтому очень часто выполняю не свои дела)и личной жизни. тут намного сложнее.Часть моих сексуальных партнёров появились именно по причине того, что я не смогла им отказать. Я понимаю, что это идёт скорее всего из детства (мне всегда вбивали,что нельзя обижать людей и поэтому мне кажется, что если я откажу, люди обидятся) и мой папа такой же(он всегда всем все обещает, боясь обидеть). Больше всего это мне мешает в семейной жизни. Первое время, когда были проблемы с мужем, у меня были любовники ( да , есть и такой грех) ) Сейчас же, я просто не представляю себя без своего мужа, безумно его люблю, но все равно не могу оборвать 5-летнюю связь с человеком, с которым мы встречались для физического удовлетворения, как раз из-за неумения отказывать. Мне неприятно с ним встречаться, я не хочу этого, привожу различные доводы, но отказать не могу.
Я понимаю, что сейчас услышу много интересного в свой адрес. Я сама знаю, как это называется и кто я ,после моих поступков. Но дело не в этом. Помогите , пожалуйста, советом. КАК НАУЧИТЬСЯ ОТКАЗЫВАТЬ ЛЮДЯМ. Потому что это очень усложняет мне жизнь,это постоянное чувство вины перед другими, в случае моего отказа