杜甫有三儿三女。
长子杜宗文,大约生于750年,小名熊儿。
次子杜宗武,生于754年,小名骥子。关于杜宗文和杜宗武,杜甫有多首诗提到他们,如《得家书》、《熟食日示宗文宗武》、《又示两儿》、《遣兴》、《送李校书二十六韵》、《宗武生日》、《元日示宗武》、《又示宗武》等。
杜甫的第三个儿子,于755年饿死。杜甫在《自京赴奉先县咏怀五百字》中有记述:“入门闻嚎啕,幼子饿已卒。”这个孩子饿死时应该还在幼年。
除三个儿子外,杜甫还有三个女儿。长女和幼女为前妻杨氏所生,幼女为续弦“山妻”所生。杜甫去世那年,幼女尚未断奶。