Зачем лишний раз провоцировать конфликт? Вы так гораздо больше сил потеряете, чем если просто потерпите. Но это, конечно, если вам приходится терпеть что-то незначительное.
И вежливость ведь не всегда именно "терпеть", это ещё и просто уважительное отношение к другому человеку, это упрощает взаимодействие и коммуникацию. Все же хочется верить, что человек человеку друг.