страх перед болью

Добрый вечер, дорогие психологи. У меня проблема, страх перед болью. Когда я общаюсь с людьми и иногда дело доходит до каких либо споров, непониманий или трений, у меня появляется страх того, что меня ударят или набьют. И тогда мне часто приходиться отказываться из за этого от своей точки зрения или уступать. Зачастую молчать, когда от меня требуют сделать то, чего я делать не хочу. Я просто потом иду и делаю.Например, недавно, я устроился на работу. Туда мы приезжаем на микроавтобусе.Взади место только для троих, мы когда туда ехали сидели там вчетвером. Я сидел у окна, когда возращались я сел третьим. Тут пришел наш четвертый, и впихнулся к нам. Пока мы ждали водителя, он не мог там усесться. Вышел из машины и начал требовать от меня уступить ему место в середине. Мне это не понравилось, я попытался быть твердым, аргументируя это тем, что он ехал на работу сидел в середине теперь моя очередь быть в середине. Но он стал повышать голос и нагло требовать от меня его место.Я подумал, зачем мне с ним спорить. Лучше я уступлю, чем испорчу себе настроение. Тем более обстановка начала накаляться. Потом когда он сел в машину, он как бы извинился перед до мной пожал мне руку и сказал чтобы я на него не обижался. Я ему ответил, что даже и не собирался. А теперь когда сижу дома и прокручиваю всю ситуацию, то мне не особо приятно думать об этом. Так как эта сцена произошла на глазах коллег. И теперь они навярняка станут обо мне думать, как о человеке который не может за себя постоять. Подскажите пожайлуста, как поступать в таких ситуациях? Уступать не красиво, вроде бы повел себя как слабовольный тюфяк. Спорить тоже не хочется, и портить из за этого себе настроение.