Тут ведь есть еще такой архиважный фактор как дети - вот это вообще самый сложный вопрос

Уйти от детей, которых растишь с рождения, имхо, намного сложнее, чем расстаться с супругой.