Секс с женой (мужем) - может ли он считаться изменой (см.)?

Поженились люди официально , но не пожилось им вместе . Разъехались . Но официально так и не развелись . "Муж" встретил другую , живёт с ней . "Жена" тоже кого-то встретила . Прошло несколько лет , и вдруг их пути вновь пересекаются ... Вопрос : Можно ли считать их новые отношения изменой ? Или измена - то , что было "на стороне" ?