Значит были мыслишки о подруге как о спутнице жизни. Но социальные рамки не позволяли бросить жену (и, вероятно, детей). А теперь, когда объект недоступен и нет риска сорваться и наломать дров, гештальт разбушевался.
Всё плохое забывается (а они наверняка не только гуляли и острили, могли же и ссориться), а хорошее помнится и преувеличивается.