Как именно, в момент грубости со стороны начальства, сдерживать себя? Сколько можно менять уже работу из-за них?

Если вам грубят на рабочем месте, абсолютно адекватной реакцией на это будет озвучить свое недовольство данным фактом и предложить перейти на более приемлемый стиль общения. Сдерживаться тут не нужно. В случае если руководство не принимает ваши условия и перспектива расстаться с вами как со специалистом их не пугает, то работу однозначно нужно менять. До тех пор, пока не найдете "ту самую" или пока не психанёте и не откроете ИП.

Меняйте всегда. Грубость терпеть недопустимо. Иначе потеря собственного достоинства а это страшнее любой  безработицы. Если хотите не допускать подобных ситуаций (в смысле грубости со стороны начальства) вы должны стать специалистом в своем деле. Тогда вас будут ценить, если не на этой работа так не следующей.