整本书分为三部：
第一部：我们俩老了
这部分简短讲述了杨绛先生经常做的一个梦，她常常于黄昏薄暮的苍茫之中找不到一同散步的锺书，“锺书大概是记着她的埋怨，叫她做了一个长达万里的梦”。
第二部：我们仨走散了
在三里河寓所的家，锺书被一通来路不明的电话叫走，去到古驿道的船上。杨绛先生居住在古驿道的客栈上，每天去船上看锺书。钱瑗旧病复发住了院，杨绛只能作为“信使”一般一边牵挂着女儿，一边每天看望锺书，只是那艘船每天都远了一点点。一年又一年，柳树绿了又黄，黄了又绿，女儿、丈夫先后离开了她。三里河的家已经不复是家，只是她的客栈。
第三部：我一个人思念我们仨
这一部分是杨绛先生的回忆录。1935年，杨绛和钱锺书夫妻二人前往牛津大学留学，锺书在校攻读文学硕士学位，杨绛作为一个旁听生自己常在图书馆读书，两个人在平淡简单的生活中享受生活的乐趣。后来，他们的女儿在英国出生，锺书拿到学位，两个人去法国巴黎求学。1938年，世界各地都受到战事影响，两个人也是很焦虑，带上女儿回国了。正赶上抗日战争，一家人辗转过了几年艰难的日子，但始终没有忘记的便是努力工作和读书。再后来，受到“文革”影响，两个人也卷入政治的漩涡中，受了不少苦。六十三年里，一家三口始终相守相助，在艰难的日子里度过了那段快乐难忘的岁月。
