褚渊的堂弟，一目失明。少年时就有高尚的气节。王俭称赞他有经邦治国的大才。被齐高帝征召为国子博士， 对渊身事宋、齐二代，异常不满。渊就任司徒时，宾客满座， 独叹惜说：“彦回不顾名誉节操，竞猖狂到这等地步，今日就任司徒，实在是家门不幸!”渊将轺车(一马驾的轻便车)赠，大怒说：“若坐这车，有辱门户，赶快烧掉。”驾车人火速赶车逃跑，车才未毁于火。