得到玄宗的指示，高力士派宦官韓莊前去幽州，配合按察使肖越一起審查李適之的賬目。
韓莊在幽州停留十天，將李適之所有的賬目翻了個底朝天，沒有任何問題，肖越也向韓莊反映，李適之任幽州節度使一職期間，勤勉有加，幾乎無一日清閒，根本沒有任何貪墨之舉，並且一直沒有募兵，所撥軍費使用極為謹慎，非必要絕不浪費。
韓莊回長安複命，向玄宗稟告李適之勤勉節儉，在士兵和將領之間的威望頗高。
李林甫和楊國忠二人，想通過李適之陷害李非的計劃破產，他們都沒有想到，李適之竟然沒有讓他們抓到一絲把柄。
儘管如此，李林甫和楊國忠並沒有放棄任何一次將李非拉下馬的努力，二人輪番向玄宗進獻讒言，將李非任何一點瑕疵都無限放大，想通過這種方式，削弱李非在玄宗麵前的影響力。
聽得多了，玄宗心中也開始出現動搖，一日，他問高力士：
“高將軍，朕問你，李非是不是現在以身負通神之能，有些妄自尊大了。”
“啟奏陛下，李非絕不是這種人，滿朝文武，若全部向聖上報喜，也難保我大唐長治久安。聖上應該想一下當初的張九齡，他的話曆來難以入耳，但在他罷相之後，聖上依然對他念念不忘，說明張九齡在聖上心中，肯定有相當重要的位置。曆來，忠言總是逆耳，望陛下三思。”
玄宗儘管心裡明白，但對於李非曆來報憂不報喜的進言風格，一直心中不喜，但他知道，有些不是那麼讓人高興的話，反而才是最真實的，又經過高力士這麼一番勸說，心中對李非心存的芥蒂也算是清除了。