就在韓休幹勁十足的同時，蕭嵩已經在考慮隱退了。
與韓休共事九個月來，蕭嵩感覺到極大的壓力，他沒有想到這個看起來恬淡的人，一起共事竟是如此之難，不僅私下經常跟他唱反調，還經常在皇帝面前指責他的缺點，幾次皇帝已經不高興了，韓休還在自說自話。
唉，不共事，還真不知道彼此的脾氣。
此時的蕭嵩六十五歲，奮鬥了一輩子的他想歇歇了。
如果換成別人，可能還會跟韓休繼續斗，但蕭嵩不準備鬥了，因為沒有意義。鬥來鬥去，大家打的都是七傷拳，傷了對方，也傷了自己。
蕭嵩決定向李隆基請求退休。
李隆基說：「朕並沒有厭棄你，你為什麼要走呢？」
蕭嵩回答說：「臣蒙受厚恩，當上宰相，富貴已經達到頂點。現在陛下還沒有厭棄臣，所以臣還能從容退休。如果陛下已經厭棄臣了，性命尚且不保，又怎能得償所願？」
說完，蕭嵩淚流滿面。
李隆基也為之動容，便對蕭嵩說：「你先回去吧，容朕考慮考慮！」
話說到這個地步，李隆基其實已經准了蕭嵩的退休申請，只是他還需要時間考慮一下宰相人選。李隆基又想到了韓休，這個人是不是跟蕭嵩一起罷免呢？
考慮再三，李隆基決定罷免韓休，他不是不知道韓休的能力，但是跟韓休相處，他太累了。
試想，身為一國之君，誰願意讓一個道德先生天天在自己的面前說教？連一向有容人之量的太宗李世民都有忍受不了魏徵的時候，因為說教多了，會讓人難受。這就解釋了，為什麼多數皇帝喜歡小人，因為小人不講原則，而君子太講原則。不講原則的小人，如同潰爛的堤壩，任由洪水肆意流淌，講原則的君子，則如同完好的堤壩，要把洪水攔截在堤壩之中。
皇帝的慾望，正是那滔滔洪水。
開元二十一年十二月二十四日，李隆基下詔：
免去蕭嵩宰相職務，改任尚書左丞；
免去韓休宰相職務，改任工部尚書；
任命京兆尹裴耀卿為門下侍郎、同中書門下平章事；
任命張九齡為中書侍郎、同中書門下平章事。
詔書一下，開元天寶年間最後一個良相張九齡緩緩走來，良相時代即將結束。
卸任的蕭嵩則繼續著傳奇，雖然後來一度遭到李林甫的打壓，但總體而言生活悠哉樂哉，家財豐厚，地位崇高，閑雲野鶴十幾年後於天寶八年病逝，享年八十餘歲。
在蕭嵩身後，他的家族與宰相的緣分還在繼續。
他的孫子蕭復，德宗朝官拜宰相；
曾孫蕭俯，大和年間官拜宰相；
曾孫蕭仿，咸通年間官拜宰相。
蕭嵩所在的蕭氏一門，從貞觀年間的蕭瑀開始，前後八人出任唐朝宰相，由此蕭氏一門有一個極為榮光的稱呼，「八葉宰相」。
到此時，當年給他和陸象先相面人的預言全部實現，「陸郎十年內位極人臣，然不及蕭郎一門盡貴，官位高而有壽」。
活神仙！
值得一提的是，雖然蕭嵩和韓休都就此淡出了歷史前台，但他們對唐朝後續的歷史發展還有貢獻。
在蕭嵩的關照下，曾經的小吏牛仙客一直升遷到河西節度使，進而成為宰相。
相比蕭嵩，韓休也不含糊，卸任之前，他鄭重向李隆基推薦了心目中的宰相人選：李林甫。
一年後，李林甫拜相，與韓休的推薦不無關係！