唐绛州闻喜(今山西闻喜东北)人，字守约。裴仁基子。幼以门荫补弘文生。贞观中，举明经，调左屯卫仓曹参军。从苏定方学用兵术。高宗时，因与长孙无忌等非议立武后，左迁西州长史。麟德二年(665)，擢安西都护，西域诸国多慕而归附。总章二年(669)，为司列少常伯(即吏部侍郎)，改革选官制度，始设长名姓历榜，确定铨注之法。与李敬玄同时典选十余年，甚有能名。调露元年(679)，西突厥攻安西，以安抚大食使名义，将兵送波斯王子泥涅师归国，俘西突厥十姓可汗阿史那都支，于碎叶城刻石记功，擢礼部尚书。会东突厥来攻，又为定襄道行军大总管，将兵平突厥阿史那温傅等。有知人之鉴，所引部将程务挺、王方翼、李多祚、黑齿常之等并为一代名将。善草书，著《草字杂体》、《选谱》，并有集二十卷，皆佚。