我和他保持了二十年的情人关系，现在被他老婆发现了。我问他怎么办。他说一时难回答，我们俩都不想伤害。