曾國藩早年家境尚可，也談不上是富裕階層。或許他一心只讀聖賢書，直到22歲才結婚。這個年紀在當時是晚婚了。曾國藩的婚姻，用現在的話説是閃婚。
曾國藩一生只有一妻一妾。曾國藩的原配歐陽氏為其恩師歐陽凝址之女。歐陽凝址，為曾國藩父親的同窗好友，又素有賢名，滿腹經綸，少時的曾國藩便拜在其門下學習。歐陽凝址對曾國藩十分賞識，甚至為他牽線拉橋，女方是衡山腳下一王姓大户家的女兒。當時的曾國藩頗具才名，但他屢次落榜，王家不滿，便悔了婚。更糟糕的是，王家竟在大婚當天扣住了新娘子。歐陽凝址見鬧成這樣，面上心裏都過不去，就將自己的女兒許配給了自己的得意門生。歐陽小姐這樣成為了曾國藩的髮妻。
歐陽氏嫁得稀裏糊塗，曾國藩娶得卻清清楚楚。根據曾國藩的私密日記，他看人“靜若螢光，動若流水，尖巧而喜淫靜若半睡，動若鹿駭，別才而深思：一為敗器，一為隱流，均託跡於清，不可不辨。”這樣看來，曾國藩確實獨具慧眼，歐陽氏的旺夫之相後來也確實得到了驗證。
除了歐陽氏，曾國藩還有一個小妾，陳氏（1840—1863，江寧人）在他攻打太平天國之時，一直隨身伺候。兩人情意綿綿，可惜後來這小妾在懷了一個孩子的情況下去世了。
