Если вам говорят что вы х##ло, то важно понимать — что человек в это вкладывает. Вас могут провоцировать, проверять, совать палки в колеса (если видят в вас конкурента или завидуют), мотивировать (да да, бывает и такое), неудачно шутить и наконец просто оскорблять. Присмотритесь с бывшими кадровыми военными, у многих именно подобный стиль общения и работы: минимум уважения к подчиненным, мат, скобрезные шутки и т.п. Если не готовы работать с такой категорией людей — ищите другую работу. Не хотите уходить? Выхода два — конфликт или сносить все это молча.
Конфликт — заведомо проигрышный вариант, т.к. такие люди чувствуют себя в ссоре, как рыбы в воде. А вам это скорее всего будет доставлять только расстройства.
Посему: если вы руководите такими людьми — избавляйтесь от них. Если это ваш руководитель — бегите. Если же это кто-то из ваших коллег, то стоит присмотреться к коллективу в целом. Кого в нем больше?