艾比盖尔是亚当斯的知心伴侣，不仅对他的生活照顾得很周到，在政治上也给他提出过不少合理建议。以致后来亚当斯的政敌批评他在政治上唯妻命是从，并嘲讽地给艾比盖尔起了个外号叫“夫人总统”。他们感情融洽，共生了5个儿女，携手度过了54年的夫妻生活。
生活跌宕 高龄而逝
65岁的亚当斯在政府中干了20多年后，卸任回到他在马萨诸塞昆西的农场，在被称为“老房子”的自己住宅中度过了生命最后的25年。
回家后的亚当斯，一连几个月思索自己失败的原因，竭力想弄明白投票人为何转而反对他。最后，他认定自己的行动都是正确的，是投票人不理解他，错就错在投票人方面。痛苦的心情使他愿意对任何能倾听的人解释他的失败原因，他曾给一位朋友写信，在列举了他的政绩后这样写道：“我虽然取得了这些成就，但还是被国民赶下台，丧失了名誉和地位。不过我对此还是感到高兴的，我并不感到丢脸，因为我没有觉得于心不安。”
亚当斯在家宅中定居下来。这是一个很大的乡村宅第，它的附带屋宇似乎伸向每一个方向，以满足一个有很多人的大家庭的需要。在这个大家庭里，聚居着亚当斯的儿孙侄甥和经济困难的亲戚，人员众多。