Почему не отдохнуть друг от друга во время отпуска? Зачем именно вместе в отпуск ехать? Даже если бы Ваш супруг не был энергетическим вампиром ( а я думаю, что он-таки им не является), людям необходимо время от времени отдыхать друг от друга, от детей, от обычной обстановки...
Кстати, если решитесь поехать в одиночестве, очень советую пройти какие-нибудь духовные практики или неск-ко сеансов психотерапевта. Уверена, что Вы придумали себе проблему, от этого и сами страдаете, и муж, думаю, чувствует, что "что-то не так". Не надо давать ему повода заподозрить Вас в страхе перед ним или в равнодушии к нему...))))