左边这位眼熟么？1991年的家庭部长默克尔

不过，两德统一和欧洲一体化所带来的胜利喜悦并没有持续太久。人们对于科尔治下的僵化体制非常不满，加上他所在的党派基民盟又爆出了献金丑闻–科尔渐渐地陷入困境。

1998年的联邦议会选举中，社民党和绿党的结盟成功取代了联盟党和自民党政府，在创下了任期记录之后，科尔必须告别自己执掌了16年的总理宝座。

晚年丧偶和淡出政治生活

2001年7月，科尔又遇到了人生的一大打击：妻子汉内洛雷服用安眠药在奥格斯海姆的家中自尽。她在生前一直患有光过敏症。

在党派献金丑闻逐渐随着时间的流逝而淡化之后，科尔在基民盟内部的声望又得到了恢复，甚至以默克尔为首的核心领导层都经常会到他那里征求意见。2005年 4月3日，一场盛大的75岁寿宴，在来自世界各地的贵宾的见证下，科尔对于德国统一和欧洲一体化所作出的贡献再次得到了世人的赞誉。78岁那年，科尔再婚，迎娶了比自己小30多岁的女友里希特（Maike Richter）。不过，一些旧识老友都指责这位新任科尔夫人对丈夫与朋友之间的联系交往”看管过严”，甚至科尔已故前妻所生的几个儿子与父亲之间的关系也因此出现隔阂。

在党内人士眼中，在私生活里，科尔也许不是一个完人，但是身为一位政治家，他将作为德国统一的总理和欧洲一体化的推动者载入史册。