Если супруги вообще не отдыхают и не проводят досуг вместе, то думаю да, это плохо. Свидетельствует о отношениях, которые выжили всю любовь и основываются на привычке, либо долге (брак,дети).
А если просто иногда, отдыхают отдельно, то это нормально. Каждому человеку нужно личное пространство.