不過，三十六歲那年，李白因為有事情所以跟杜甫道別了，兩人長達四年的度假之旅就此結束。
杜甫好像是失戀一樣，也沒心情玩樂了，失落地回到老家，人到了一定的年紀，會想安定下自己的心，杜甫也是如此，他開始重新考取科舉，不過他基底沒打好，考試都沒法過。加上杜甫個性比較孤傲，不懂得攀權附勢，所以也沒法走捷徑。
當官啦
到了44歲，杜甫終於受到朝廷眷顧，被賞了個河西尉的九品芝麻官。杜甫得到消息的第一時間不是感動得痛哭流涕，而是青筋爆露，他簡直氣炸了：我是誰呀！我是前無古人後無來者，唐代最強社會寫實派詩人杜甫阿！就他自己所說，「不做河西尉，淒涼為折腰」！我有更高的理想，才不去做那河西縣尉，過那獻媚的小人生活哩！
不過事情就好笑在，杜甫很快就打臉自己說的話。因為他發現，他爸爸的遺產快花光了。
杜甫在此之前，從來沒有想過有一天會憂愁錢的事情，他以為祖上留下來的夠他用一輩子，沒想到人生沒過一半，就已經快見底啦！
杜甫驀然回首，河西尉早就被別人拿走了，他只好轉而接受更小的官：右衛率府兵曹參軍。名字聽起來很厲害，又是"曹"又是"軍"的，但總而言之就是個管倉庫的，故事說了那麼久，杜甫終於找到他第一個正經工作了。
不幸的是，杜甫的運氣太糟了，才剛當官就遇上了安史之亂，他也因而被安祿山的軍隊俘虜。
故事說到現在，讀者可能會想說：「杜甫看起來挺調兒鋃鐺的，應該會當背骨仔，投靠叛軍吧。」但杜甫還真不是這種人，小事多糊涂，大事不含糊，杜甫雖然懶，但愛國心還是有的，被俘之後，杜甫人生中最耀眼的一刻出現了，他趁亂冒險逃離長安，穿越交戰激烈的前線，投奔光明！
當時被俘虜的官員，很多都成了安祿山的助手，杜甫算是個特例。唐肅宗親自接見他，想看看這愛國英雄到底長甚麼樣，沒想到杜甫卻管不住自己的嘴，在接見時說了很多不中聽的話，於是沒過多久就被貶了。
杜甫聽到自己被貶又生氣了，好啊！就這樣嘛！我冒險回來投靠祖國，換來的竟是這種下場！杜甫一不做二不休，怒辭官位，跑到鄉下退休了。
欺負爛好人
杜甫從入仕到退休，前後工作了差不三年而已，退休金累積的不太夠，當然不夠他安享晚年。好在一位人超好的朋友嚴武為杜甫蓋了一間「成都草堂」，有時候還會送飯給他，讓他不至於過得太窮酸。
不過，嚴武沒料到的是，他的好意居然被杜甫曲解了！杜甫認為嚴武為人軟弱好欺負，可以佔便宜。作為不在當事的我們，很難想像杜甫為什麼會有這種天馬行空的想像力，反正他就是這麼想了。
兩人交往的後期，杜甫幾乎沒有給嚴武好臉色看，有一天杜甫在嚴武家喝多了，居然指著嚴武的鼻子大罵：「想不到嚴挺之竟然生了你這兒子！」試想你是嚴武，看著一個客人在你家狐假虎威，用你買的酒把自己灌醉，又頻著酒氣罵你，你會怎麼著？
