李林甫落在了二人后面，看着他们走远，李林甫拂一拂衣袖，不屑地说：“圣上也忒仁厚了，废立太子是天子家事，何必与外人商议。”
李林甫还待再说几句，回头一看，张九龄急匆匆地走了回来，李林甫不知道他为何去而复返，看了他两眼，抽身由小门走了。
张九龄地回了紫宸殿，气呼呼地对明皇说：“陛下，老臣方才遇见怪事一桩。不对圣上禀明，如鲠在喉！”
问道：“爱卿刚刚出殿，就遇见了怪事？”
“老臣在宫门被人叫住，那人公然直言不讳：有废就有立，相爷如果愿意襄助，相位便可以长久。老臣怒不可遏，叱责道：内廷怎么可以参言国事，快走，休要再跟下官饶舌！”
明皇也有些震惊，问道：“此人是谁？”
“飞霞殿宫奴牛贵儿。”
这个牛贵儿正是惠妃跟前第一得用的奴才。明皇见张九龄气得面色青紫，就扶着他坐到了椅子上：“张爱卿勿恼，待朕进内廷去问过牛贵儿，若是他胡言乱语，一定严加惩处。”
张九龄气哼哼地去了，明皇知道牛贵儿大概是奉了惠妃之命去拉拢张九龄，不免也气恨惠妃做事太过，更因此而打消了改立太子的主意。
初秋之时，河西节度使崔希逸上奏明皇，言前任牛仙客在河西任上时开源节流，禁止奢华靡费，广积财帛，河西仓廪充实，兵器盈库。有了这些作为保障，河西用兵就有了充足保障。
明皇记起，从前萧嵩在位时，也曾向他数次举荐过牛仙客，看来果然是个将才，明皇想重用牛仙客，又怕下面的官员勾搭起来互相吹捧，蒙混视听。于是，招来刑部员外郎张利贞：“你去河西看看，是不是仓库充盈，藏储丰足。记住，回来要如实呈报，若是欺蒙于朕，朕定然饶不过你。”
张利贞诺诺而退。立即出京去了河西，带人查看仓库，果然是米粮盈库，草料成垛，兵器库中的各种兵器不仅摆放整齐，而且无一件生锈。返回长安后，如实地把看到的情况禀报了明皇。
明皇听了不胜幸喜：“朕的边将中还有如此出类拔萃之人，擅当家擅理财，边关无事，也是他调度防卫有功，这样的人不用，还用何人！六部尚书之职，你们看看哪个缺位，就把牛仙客补上去吧。”
“陛下，六部之职，任命不可唐突，请再斟酌度量，郑重为好。”张九龄出班奏道。
“斟酌，还有什么可斟酌的！”一看又是张九龄，明皇有些生气了：“莫非朕亲自选用一个官员都不行了么！”
张九龄却坚持己见寸步不退：“陛下，自我大唐开国以来，任用六部尚书，唯德高望重者是用。牛仙客不过边塞小吏出身，又并无显赫之文治武功，骤然间把他提拔到政务要职上，老臣恐蒙羞于朝廷。”
张九龄所奏不无道理，明皇想想也是，就打消了让牛仙客到六部任职的打算。不过，他还是觉得不能委屈了这位能臣，不能封官，就进个爵吧，也是对牛仙客勤于职守的一种褒奖。他清清喉咙，说道：“不能进六部，朕想赐他一个爵位，这个，总该可以的吧？”
“圣上，万万不可！”张九龄再次出班上奏：“朝廷封爵，乃是为了论功行赏，褒扬有大功的臣工。牛仙客身为边关守将，充实仓廪，保存武器，乃是职分内应为之事，不应该成为封赏的理由。以臣之见，陛下要奖励他，赐他金银布帛就可以了，不必封爵厚此薄彼，难免不寒了诸多边关守将之心。”
官不能封，爵不能晋，明皇心中越发生气。张九龄又言之有理，挑不出来毛病，他实在是找不到理由驳回。于是，朝会不欢而散。