Смотря какая грязь. Обычно контакты обезжиривают спиртом (только чистым спиртом, а не спиртными напитками). Если же, например, вы пролили сладкий напиток, то это удаляется тёплой водой.
Можно протереть ватной палочкой, обмакнув перед этим ее в спирт (или одеколон/духи, или что нибудь ещё, содержащее прдавляющую часть спирта), затем подождать пока все высохнет и можно продолжать пользоваться :)