經過張九齡的薦舉，開元二十三年三月王維出嵩山就任右拾遺。后張九齡被李林甫排擠陷害左遷荊州長史后，其感到世態炎涼，寂寞孤獨，精神上受到沉重打擊。

開元二十一年秋王維重回洛陽后，還是過著長安、洛陽兩地游的閑居生活，有時也回到嵩山住一段時間。這時期他曾與嚴挺之、徐嶠交往，寫有《晚春嚴少尹與諸公見過》《酬嚴少尹徐舍人見過不遇》《贈徐中書望終南山歌》等。從前二詩寫的：“松菊荒三徑，圖書共五車。烹葵...