Почему те кто изменяют женам крайне редко уходят к ним насовсем?

Очень интересовал всегда данный вопрос. Изменяет муж жене, каждый вечер приходит домой. Ну почему не уйти совсем и дать жене свободу... Если уже дети выросли и разъехались, что их сдерживает. Неужели только жалость?