1982年起卡特在亚特兰大的埃默里大学任名誉教授。卸任后回到故乡,一面撰写回忆录,一边不时接受临时使命,穿梭于国际,充当和平使者。卡特退休后陷入财政困境,当总统期间委托别人经营的花生农场破产,不得不靠写书还债,连夫人罗莎琳都要靠出版回忆录挣钱。就是在这样的情况下,卡特夫妇一起创办了卡特中心,致力于协调国际冲突。在上世纪80年代的海地危机中,尽管美国战机已经起飞,卡特仍不顾生命危险留在海地首都谈判至最后一刻,最终说服军政府交权避免流血战争。这一事件令卡特在国际上赢得了巨大的声望。