景云初安石为宰辅时，授太子通事舍人。早修整，尚文艺，容止严厉，有大臣体，与兄韦陟齐名。开元十七年，司徒薛王业为女平恩县主求婚，以斌才地奏配焉。迁秘书丞。天宝初，转国子司业，徐安贞、王维、崔颢，当代辞人，特为推挹。

天宝中，拜中书舍人，兼集贤院学士。兄陟先为中书舍人，未几迁礼部侍郎。陟在南省，斌又掌文诰。改太常少卿。天宝五载，右相李林甫构陷刑部尚书韦坚，斌以亲累贬巴陵太守，移临安太守，加银青光禄大夫。斌授五品时，兄陟为河东太守，堂兄由为右金吾将军，縚为太子少师，四人同时列戟，衣冠之盛，罕有其比。十四载，安禄山反，陷洛阳，斌为贼所得，伪授黄门侍郎，忧愤而卒。及克复两京，肃宗乾元元年，赠秘书监。