Жена и любовница

Помогите разобраться.На данный момент у меня жена и двое детей. С женой я прожил 10 лет, свадьба была по беременности (ну думал стерпится слюбится, пока не встретил её) Около полугода назад я встретил девушку, в которую влюбился. Мы работаем вместе. Она вдова, есть дочь которой 7 лет, а живет она с матерью погибшего мужа. О существовании любовницы жена не знает. В течении всего времени я несколько раз пытался порвать отношения с любовницей, так же как и она со мной, но ничего не получается. Вот например - приезжаю к ней чтоб расстаться, а в итоге чувства между нами становится только крепче. Хочется уйти с семьи и быть с ней рядом. Но заглядывая в будущее, начало будет очень сложное(естественно все надо оставить своей семье и начинать все с нуля, жить на съёмной квартире т.к у неё ничего нет), да и детей очень люблю и не могу с ними так поступить (не поймут они меня, т.к. сыну 10 лет начало переходного возраста, а дочке 2 года ну она еще ничего не понимает). К тому же жена сейчас не работает, туго будет ей без меня. О моих отношениях уже многие знают и склоняются больше чтоб я остался с семьёй и тут же говорят что это моя жизнь и я сам должен решить за себя. Очень тяжело такое носить в себе.