Homer, читаю Вас и думаю, что Вы -хороший человек и порядочный , просто запутавшийся в своей жизни.Сами не ведали , что натворили.   
И Ваша история  уже совсем не для раздела "роман с семейным" , а уже для   "семья до и после кризиса". 
Связь с этой женщиной - неудавшаяся попытка замазать  образовавшуюся трещину в  отношениях с женой. Это кульминация событий. Но Вы сами видите , что  результат не достигнут. Пластилином  окна на зиму не заклеешь , все равно будет дуть и отходить. В Вашем случае  получилось тоже самое - связью на стороне проблема не решилась. 
Вы смогли пережить  трудные годы семейной жизни , при этом   не изменяли жене.Ваша жена , если справилась со своей страстью , и смогла  выбраться из этого болота , тоже достаточно сильный человек. 
За вашу семью можно  порадоваться , что Вы мужественно все пережили , остались вместе . 
Вы информацию о  проблеме выдаете очень дозированно , причем с самого конца , и не совсем понятно  от чего плясать. 
Вы не жили вместе с женой в тот период . Кто из Вас уходил : она или Вы? У Вашей жены был другой мужчина? 
Не  из-за этого ли нарисовалась трещина в отношениях, не из-за этого ли Вы  решили попытаться выстроить отношения с прежней знакомой? 
меня любовь это влечение к другому человек, желание оберегать его и заботиться о нем, при этом принимая его со всеми достоинствами и недостатками.
Вот именно , что нужно принимать со всеми недостатками и жену. Она упала и поднялась(не на словах , а на деле) , это уже поистине достойно уважения. 
Вы с  той женщиной друг друга использовали , каждый для своих целей. Ваша дружба/связь тяготит вас обоих  и отвлекает  ресурсы  , которые можно было бы потратить на более важные дела. Ей -на поиски мужчины для жизни , а Вам -на восстановление  отношений в семье. 
Что дала Вам эта дружба? Ровным счетом ничего. Это иллюзия дружбы, переросшей во что-то большее. Может пора снять розовые очки и начать делать правильные вещи  и выкарабкиваться из трясины , в которую Вы  забрались? 
 
  
Прежде всего , нужно с  девушкой "дружбу" закончить , во всех ее проявлениях (звонки, встречи , обсуждения фильмов , поездки в магазин , помощь с ухажерами), сменить симку , чтобы не было соблазна позвонить , и начать учиться любить жену со всеми еее недостатками. Думаете , у вас их нет?  

  Они есть у всех.  
 
  
Ваша связь-ошибка , не прячтесь от себя , взгляните правде в глаза. 
40 лет у мужчины    возраст переосмысления всей жизни и приритетов. 
Надеюсь , что Вы  после всех событий расставите их  правильно.  

 Ситуация была хорошим уроком для Вас. 
Очень хочется , чтобы все у Вас наладилось.  
