广德二年（764年）春，严武再镇蜀，杜甫才又回到草堂，此前漂泊在外将近两年。严武表荐杜甫为检校工部员外郎，做了严武的参谋，后人又称杜甫为杜工部。不久杜甫又辞了职。

    这五、六年间，杜甫寄人篱下，生活依然很苦，他说：“厚禄故人书断绝，恒饥稚子色凄凉”（《狂夫》）“痴儿不知父子礼，叫怒索饭啼东门。”他用一些生活细节来表现自己生活的困苦，他说他的孩子那种还没有懂事的孩子不知道对父亲很尊重，不知夫子礼，饿了的时候不管是不是爸爸，是不是要遵循父子之礼，饿了就吵着要饭吃，在东门外号哭，到了秋风暴雨之中，杜甫的茅屋破败，饥儿老妻，彻夜难眠，他写了《茅屋为秋风所破歌》。

    广德三年（765年）四月，严武去世，杜甫离开了CD。经嘉州、戎州、渝州、忠州、云安，于唐代宗大历元年（766年）到达夔州（奉节）。由于夔州都督柏茂林的照顾，杜甫得以在此暂住，为公家代管东屯公田一百顷，自己也租了一些公田，买了四十亩果园，雇了几个雇工，自己和家人也参加了一些劳动。

    这一时期，杜甫创作达到了高潮，不到两年，作诗四百三十多首。这时期，其作品有《春夜喜雨》、《茅屋为秋风所破歌》、《蜀相》、《闻官军收河南河北》、《登高》、《登岳阳楼》等大量名作。其中最为著名的诗句为：“安得广厦千万间，大庇天下寒士俱欢颜。”而《登高》中的：“无边落木萧萧下，不尽长江滚滚来”更是千古绝唱。

    大历三年（768年），杜甫思乡心切，乘舟出峡，先到江陵，又转公安，年底又漂泊到湖南岳阳，这一段时间杜甫一直住在船上。由于生活困难，不但不能北归，还被迫更往南行。大历四年正月，由岳阳到潭州（长沙），又由潭州到衡州（衡阳），复折回潭州……

    回忆起一代大文豪杜甫的生不逢时，颠沛流离的生活，张柬之一不由得感怀身世，悲从中来，禁不仰天长叹：“世上万事皆可好，唯有文章不值钱！”

    “啊，莲花，出淤泥而不染……！”张柬之呆呆地望着池塘中的莲花，神思悠悠，不能自已，陷入了绵绵的往事回忆之中……

    张柬之自小喜欢荷花。他稍为懂事时，就在他家后苑那口池塘到田里挖了一些莲藕回来，栽到池塘里，不久，池塘里长满了荷花。

    早在他读私塾那时起，就知道了莲花出淤泥而不染，是做人的精神象征。从那时起，张柬之一有机会就到池塘，看一看莲花“出淤泥而不染”的别样美景。

    少年时的他，常常一个人在荷塘边的树荫下看书，累了，就望着荷塘，想着莲花发呆，想着隋?杜公瞻的《咏同心芙蓉诗》的景象：

    灼灼荷花瑞，亭亭出水中。

    一茎孤引绿，双影共分红。

    色夺歌人脸，香乱舞衣风。