Если вопрос возник, то надо расставаться.
Если бы действительно "люблю - прощу", то сам вопрос не возник бы. А так - обязательно всплывет снова и возможно скоро.
А если потом еще подозрения и все такое - не жизнь, а одна мука.
Хотя для начала неплохо бы поговорить начистоту. Если при этом будет ругань и взиминые обвинения - не страшно. Главное выяснить что к чему.
И как давно Ж вернулась? Может она просто беременна?
Все сказанное исключительно имхо (хотя и без собственного опыта не обошлось)