其冬，玄宗在华清宫，王忠嗣被劾。敕召翰至，与语悦之，遂以为鸿胪卿，兼西平郡太守，摄御史中丞，代忠嗣为陇右节度支度营田副大使，知节度事。仍极言救忠嗣，上起入禁中，翰叩头随之而前，言词慷慨，声泪俱下，帝感而宽之，贬忠嗣为汉阳太守，朝廷义而壮之。
明年，筑神威军于青海上，吐蕃至，攻破之；又筑城于青海中龙驹岛，有白龙见，遂名为应龙城，吐蕃屏迹不敢近青海。吐蕃保石堡城，路远而险，久不拔。
八载，以朔方、河东群牧十万众委翰总统攻石堡城。翰使麾下将高秀岩、张守瑜进攻，不旬日而拔之。上录其功，拜特进、鸿胪员外卿，与一子五品官，赐物千匹、庄宅各一所，加摄御史大夫。十一载，加开府仪同三司。
翰素与禄山、思顺不协，上每和解之为兄弟。其冬，禄山、思顺、翰并来朝，上使内侍高力士及中贵人于京城东驸马崔惠童池亭宴会。翰母尉迟氏，于阗之族也。禄山以思顺恶翰，尝衔之，至是忽谓翰曰：“我父是胡，母是突厥；公父是突厥，母是胡。与公族类同，何不相亲乎？”翰应之曰：“古人云，野狐向窟嗥，不祥，以其忘本也。敢不尽心焉！”禄山以为讥其胡也，大怒，骂翰曰：“突厥敢如此耶！”翰欲应之，高力士目翰，翰遂止。
十二载，进封凉国公，食实封三百户，加河西节度使，寻封西平郡王。时杨国忠有隙于禄山，频奏其反状，故厚赏翰以亲结之。十三载，拜太子太保，更加实封三百户，又兼御史大夫。