Предположу, что речь идет о романе Уилки Коллинза «Лунный камень», рассказчик которого, дворецкий Габриэль Беттередж, имел именно такую привычку.
Кстати, это первая ссылка по запросу в Google «гадал по Робинзону Крузо».
Вот здорово! Спасибо! Этот вопрос мучал меня время от времени на протяжении нескольких лет. Гуглить умею, но похоже плохо))