唐宗室。小字哥奴。累迁国子司业。开元中，迁御史中丞、吏部侍郎，深结玄宗宠妃武惠妃及宦官等，僭伺帝意，故奏对皆称旨。开元二十二年(734)，拜礼部尚书，同中书门下三品。历户、兵二部尚书，并代张九龄为中书令、集贤殿大学士、修国史。居相位十九年，专政自恣，杜绝言路，公卿不由其门而进，必被罪徙，附之者虽小人，亦被重用。对人表面可亲，暗加陷害，人称“口蜜腹剑”。玄宗后期怠于政事，大权一以委之。天宝十载(751)，兼领安西大都护、朔方节度使。因蕃将不识字，不能入相，故奏请重用之，使安禄山等长期在外镇掌握重兵，助成安史之乱。后卒于家。