原來，他父親去世了。
這真是雙重不幸！他隻得匆匆趕回家鄉。一個絕好的機會，就這樣與他擦肩而過，白白地丟了。
李賀赴長安之前，已經完婚。其父李晉肅也致仕還鄉了，一家人的指望，從此集中在李賀身上。不料李賀走後，其父親便病了，數月下來竟去世了。李賀回來奔喪，一路上急急慌慌，走了十幾日，才從長安趕回昌穀，父親早已埋在黃土之下了。
李賀自然悲慟不已，他須守孝三年，期間不能遠遊。這對他的科舉之路，又是一個羈絆。
一連數月，李賀都在父親的墳頭盤桓。他騎著瘦馬，背著詩囊，從家裡到墳上，再從墳上到家裡，兩點一線，終日閒轉，苦悶極了。這期間，京城裡沒有消息，眼睛裡不見風景，隻有胯下的瘦馬，載著他鬱鬱而行。於是，李賀就寫了很多《馬詩》，其中一首曰：
“龍脊貼連錢，銀蹄白踏煙。
無人織錦韂，誰為鑄金鞭。”
此詩意在抒發懷才不遇——馬為好馬，但無人為它織錦韂，也無人為它鑄金鞭。空有龍駒駿馬，難有伯樂出現。另一首詩曰：
“此馬非凡馬，房星本是星。
向前敲瘦骨，猶自帶銅聲。”
他以馬自喻，說自己非碌碌之輩。其中的“房星”，是二十八星宿之一。古人認為，一切動物在天上都有與之相對應的星辰——“馬為房星之精”，所以李賀認為他的馬是從天上下凡，暗喻自己出身高貴，才質不凡。
李賀的另一首《馬詩》更知名，後世連小學生都會背誦：
“大漠沙如雪，燕山月似鉤。
何當金絡腦，快走踏清秋。”
他向往邊塞荒漠，企盼陣前殺敵，時刻準備為國家效力，建功立業。
李賀失望地離開長安，重返洛陽。他第一個要找的人，便是韓愈。
這一天中午，韓愈