鸾台侍郎、同凤阁鸾台平章事，兼太子左庶子。长安三年，为神都留守，兼判天官、秋官二尚书事。后与崔神庆等同为侍读，寻知纳言事。是岁，又加检校中台左丞，兼太子左庶子、凤阁鸾台三品如故。
时张易之兄弟及武三思皆恃宠用权，安石数折辱之，甚为易之等所忌。尝于内殿赐宴，易之引蜀商宋霸子等数人于前博戏。安石疏奏曰：“蜀商等贱类，不合预登此筵。”因顾左右令逐出之，座者皆为失色。则天以安石辞直，深慰勉之。时凤阁侍郎陆元方在座，退而告人曰：“此真宰相，非吾等所及也。”则天尝幸兴泰宫，欲就捷路，安石奏曰：“千金之子，且有垂堂之诫，万乘之尊，不宜轻乘危险。此路板筑初成，无自然之固，銮驾经之，臣等敢不请罪。”则天登时为之回辇。安石俄又举奏易之等罪状，初有敕付安石及夏官尚书唐休璟推问，未竟而事变。四年，出为扬州大都督府长史。
神龙初，徵拜刑部尚书。是岁，又迁吏部尚书，复知政事。俄代张柬之为中书令，封郧国公，以尝为宫僚，赐实封三百户，又兼相王府长史。俄转户部尚书，复为侍中，监修国史。中宗与庶人尝因正月十五日夜幸其第，赐赉不可胜数。又中宗尝幸安乐公主城西池馆，公主具舟楫，请御楼船，安石谏曰：“御轻舟，乘不测，臣恐非帝王之事。”乃止。
睿宗践祚，拜太子少保，改封郇国公。俄又历侍中、中书令。景云二年，加开府仪同三司。时太平公主与窦怀贞等潜有异图，将引安石预其事，公主屡使子婿唐晙邀安石至宅，安石竟拒而不往。睿宗尝密召安石，谓曰：“闻朝廷倾心东宫，卿何不察也？”安石对曰：“陛下何得亡国之言，此必太平之计。太子有大功于社稷，仁明孝友，天下所称，愿陛下无信谗言以致惑也。”睿宗矍然曰：“朕知之矣，卿勿言也。”太平于帘中窃听之，乃构飞语，欲令鞫之，赖郭元振保护获免。俄而迁尚书左仆射，兼太子宾客，依旧同中书门下三品，虽假以崇宠，实去其权。其冬，罢知政事，拜特进，充东都留守。太常主簿李元澄，即安石之子婿，其妻病死，安石夫人薛氏疑元澄先所幸婢厌杀之。其婢久已转嫁，薛氏使人捕而捶之致死。由是为御史中丞杨茂谦所劾，出为蒲州刺史。无几，转青州刺史。
安石初在蒲州时，太常卿姜皎有所请托，安石拒之，皎大怒。开元二年，皎弟晦为御史中丞，以安石等作相时，同受中宗遗制，宗楚客、韦温削除相王辅政之辞，安石不能正其事，令侍御史洪子舆举劾之。子舆以事经赦令，固称不可。监察御史郭震希皎等意，越次奏之，于是下诏曰：“青州刺史韦安石、太子宾客韦嗣立、刑部尚书赵彦昭等，往在先朝，曲蒙厚赏，因缘幸会，久在庙堂，朋党比周，闻于行路。景龙之末，长蛇纵祸，仓卒之间，人神愤怨，未闻舍生取义，直道昌言，遂削太上皇辅政之辞，用韦氏临朝之策。比常隐忍，复以崇班，将期愧畏，稍惩前恶，而尚款回邪，苟安荣宠。宜从谪官之典，以励事君之节。安石可沔州别驾，嗣立可岳州别驾，彦昭可袁州别驾，并员外置。”安石既至沔州，晦又奏云：“安石尝检校定陵造作，隐官物入己。”敕符下州征赃。安石叹曰：“此祇应须我死耳！”愤激而卒，年六十四。开元十七年，赠蒲州刺史。天宝初，以子贵，追赠开府仪同三司、尚书左仆射、郇国公，谥曰文贞。二子陟、斌，并早知名。
陟字殷卿，代为关中著姓，人物衣冠，弈世荣盛。安石晚有子，及为并州司马，始生陟及斌，俱少聪敏，颇异常童。陟自幼风标整峻，独立不群，安石尤爱之。神龙二年，安石为中书令，陟始十岁，拜温王府东阁祭酒，加朝散大夫，累迁秘书太堂丞，有文彩，善隶书，辞人、秀士已游其门矣。开元初，丁父忧，居丧过礼。自此杜门不出八年，与弟斌相劝励，探讨典坟，不舍昼夜，文华当代，俱有盛名。于时才名之士王维、崔颢、卢象等，常与陟唱和游处。广平宋公见陟叹曰：“盛德遗范，尽在是矣。”历洛阳令，转吏部郎中。张九龄一代辞宗，为中书令，引陟为中书舍人，与孙逖、梁涉对掌文诰，时人以为美谈。
后为礼部侍郎。陟好接后辈，尤鉴于文，虽辞人后生，靡不谙练。曩者主司取与，皆以一场之善，登其科目，不尽其才。陟先责旧，仍令举人自通所工诗笔，先试一日，知其所长，然后依常式考核，片善无遗，美声盈路。后为吏部侍郎，常病选人冒名接脚，阙员既少，取士良难，正调者被挤，伪集者冒进。陟刚肠嫉恶，风彩严正，选人疑其有瑕，案声盘诘，无不首伏。每岁皆赎得数百员阙，以待淹滞，常谓所亲曰：“使陟知铨衡一二年，则无人可选矣。”
陟门地豪华，早践清列，侍兒阉阍，列侍左右者十数，衣书药食，咸有典掌，而舆马僮奴，势侔于王家主第。自以才地人物，坐取三公，颇以简贵自处，善诱纳后进，其同列朝要，视之蔑如也。如道义相知，靡隔贵贱，而布衣韦带之士，恆虚席倒屣以迎之，时人以此称重。
李林甫忌之，出为襄阳太守，兼本道采访使，又改陈留采访使，复加银青光禄大夫。天宝中袭封郇国公，以亲累贬钟离太守，重贬义阳太守。寻移河东太守，充本道采访使。
十二年入考，在华清宫。右相杨国忠恶其才望，恐践台衡，乃引河东人吴象之谓曰：“子能使人告陟乎？吾以子为御史。”象之曰：“能。”乃告陟与御史中丞吉温结托，欲谋陷朝廷，又诱陟侄韦元志证之。陟坐贬为桂州桂岭尉，未之任，再贬昭州平乐尉。
会禄山反，陷洛阳，陟爱弟斌为贼所得。国忠欲构陟与贼通应，潜令吏卒伺其所居，欲协之令陟忧死。其士豪人劝陟曰：“昔张燕公窜逐，藏于陈氏，以免危亡。诏命傥来，谁敢申覆？未若轻舟千里，且泛溪洞，候事清徐出，岂不美也！”陟慨然应之曰：“我积信于国朝，非一代也。况素所秉心，无负神理，命之合尔，其敢逃刑？燕公之谋，诚愧厚意，不能从也。”因谢遣之，乃坚卧不动。
经岁余，潼关失守，肃宗即位于灵武，起为吴郡太守，兼江南东道采访使。未到郡，肃宗使中官贾游严手诏追之。未至凤翔，会江东永王擅起兵，令陟招谕，除御史大夫，兼江东节度使。陟以季广琛从永王下江，非其本意，惧罪出奔，未有所适，乃有表请拜广琛为丹阳太守、兼御史中丞、缘江防御使，以安反侧。因与淮南节度使高适、淮西节度使来瑱等同至安州。陟谓适、瑱曰：“今中原未复，江淮动摇，人心安危，实在兹日。若不齐盟质信，以示四方，令知三帅协心，万里同力，则难以集事矣。”陟推瑱为地主，乃为载书，登坛誓众曰：“淮西节度使、兼御史大夫瑱，江东节度使、御史大夫陟，淮南节度使、御史大夫适等，衔国威命，各镇方隅，纠合三垂，翦除凶慝，好恶同之，无有异志。有渝此盟，坠命亡族。皇天后士，祖宗神明，实鉴斯言。”陟等辞旨慷慨，血泪俱下，三军感激，莫不陨泣。其后江表树碑以纪忠烈。
无何，有诏令陟赴行在。陟以广琛虽承恩命，犹且迟回，恐后变生，祸贻于陟，欲往招慰，然后赴征，乃发使上表，恳言其急。陟驰至历阳，见广琛，且宣恩旨，劳徠行赏，陟自以私马数匹赐之，安其疑惧。即日便赴行在，谒见肃宗，肃宗深器之，拜御史大夫。拾遗杜甫上表论房琯有大臣度，真宰相器，圣朝不容，辞旨迂诞，肃宗令崔光远与陟及宪部尚书颜真卿同讯之。陟因入奏曰：“杜甫所论房琯事，虽被贬黜，不失谏臣大体。”上由此疏之。时朝臣立班多不整肃，至有班头相吊哭者，乃罢陟御史大夫，颜真卿代，授吏部尚书。自后任事宠臣，皆后来初用，望风畏忌，道竟不行。因宗人伐墓柏，坐不能禁，出为绛州刺史。乾元二年，入为太常卿。吕諲再入相，荐为礼部尚书、东京留守，判尚书省事，兼东京畿观察处置等使。逆贼史思明寇逼河洛，副元帅李光弼议守河阳，令陟率东京官属入关回避，乃令兵守陕州。有诏迁吏部尚书，留守如故，令止于永乐，不许至京，候光弼收复河洛，令陟依前居守。
陟早有台辅之望，间被李林甫、杨国忠所挤。及中原兵起，天下事殷，陟常自谓负经纬之器，遭后生腾谤，明主见疑，常郁郁不得志，乃叹曰：“吾道穷于此乎，有志不伸，得非天命乎！”因遘疾，上元元年八月，卒于虢州，时年六十五，赠荆州大都督。永泰元年，诏曰：“竭忠之臣，殁不废命，奉上之节，行固无私，言念饰终，抑惟恆典。故金紫光禄大夫、吏部尚书、兼御史大夫、充东京留守、兼判留司尚书省事、东京畿观察处置使、上柱国、郇国公韦陟，敦敏直方，端严峻整，弘敷典礼，表正人伦，学冠通儒，文含大雅。顷者询谟旧德，保厘成周，眷彼郊圻，资其慎固。而凶胡残丑，密迩河洛，命居陕、虢，时俟翦除。才加喉舌之荣，遽婴霜露之疾。方期克享眉寿，冀其有瘳，奄此殂殁，良深震悼。升车而复，以申三禭之恩；在牖加绅，宜崇八座之宠。可赠尚书左仆射。”太常博士程皓议谥为“忠孝”。刑部尚书颜真卿以为忠则以身许国，见危致命，孝则晨昏色养，取乐庭闱，不合二行殊难，以成“忠孝”。主客员外郎归崇敬又驳之，纷议不已。右仆射郭英乂不达其体，请从太常之状而奏。陟子允。
斌，景云初安石为宰辅时，授太子通事舍人。早修整，尚文艺，容止严厉，有大臣体，与兄陟齐名。开元十七年，司徒薛王业为女平恩县主求婚，以斌才地奏配焉。迁秘书丞。天宝初，转国子司业，徐安贞、王维、崔颢，当代辞人，特为推挹。天宝中，拜中书舍人，兼集贤院学士。兄陟先为中书舍人，未几迁礼部侍郎。陟在南省，斌又掌文诰。改太常少卿。天宝五载，右相李林甫构陷刑部尚书韦坚，斌以亲累贬巴陵太守，移临安太守，加银青光禄大夫。斌授五品时，兄陟为河东太守，堂兄由为右金吾将军，縚为太子少师，四人同时列戟，衣冠之盛，罕有其比。
十四载，安禄山反，陷洛阳，斌为贼所得，伪授黄门侍郎，忧愤而卒。及克复两京，肃宗乾元元年，赠秘书监。安石兄叔夏别有传。从父兄子抗，从祖兄子巨源。
抗，弱冠举明经，累转吏部郎中，以清谨著称。景云初，为永昌令，不务威刑而政令肃一。都辇繁剧，前后为政，宽猛得中，无如抗者。无几，迁右台御史中丞，人吏诣阙请留，不许，因立碑于通衢，纪其遗惠。开元三年，自左庶子出为益州长史。四年，入为黄门侍郎。
八年，河曲叛胡康待宾拥徒作乱，诏抗持节慰抚。抗素无武略，不为寇所惮。在路迟留不敢进，因坠马称疾，竟不至贼所而还。俄以本官检校鸿胪卿，代王晙为御史大夫，兼按察京畿。时抗弟拯为万年令，兄弟同领本部，时人荣之。寻以荐御史非其人，出为安州都督，转蒲州刺史。十一年，入为大理卿，其年代陆象先为刑部尚书，寻又分掌吏部选事。十四年卒。抗历职以清俭自守，不务产业，及终，丧事殆不能给。玄宗闻其贫，特令给灵舆，递送还乡。赠太子少傅，谥曰贞。抗为京畿按察使时，举奉天尉梁升卿、新丰尉王倕、金城尉王冰、华原尉王焘为判官及度支使，其后升卿等皆名位通显，时人以抗有知人之鉴。
巨源，周京兆尹总曾孙也。祖匡伯，袭祖爵郧国公，入隋改封舒国公，官至尚衣奉御。巨源则天时累迁司宾少卿，转司府卿、文昌右丞、同凤阁鸾台平章事。三年，转夏官侍郎，依前平章事。有吏才，勾覆省内文案，下符剥徵，虽为下所怨苦，然亦颇收其利。证圣初，出为鄜州刺史，寻拜地官尚书、神都留守。长安二年，诏入转刑部尚书，又加太子宾客，再为神都留守。
神龙初，入拜工部尚书，封同安县子。又迁吏部尚书、同中书门下三品，进封郇县伯。时安石为中书令，以是巨源近属，罢知政事。巨源寻迁侍中、中书令，进封舒国公，附入韦后三等亲，叙为兄弟，编在属籍。是岁，巨源奉制与唐休璟、李怀远、祝钦明、苏环等定《垂拱格》及《格后敕》，前后计二十卷，颁下施行。时武三思先有实封数千户在贝州，时属大水，刺史宋璟议称租庸及封丁并合捐免；巨源以为谷稼虽被湮沉，其蚕桑见在，可勒输庸调，由是河朔户口颇多流散。
景龙二年，顺天翊圣皇后衣箱中裙上有五色云起，久则方歇，巨源以为非常佳瑞，请布告天下，许之。中宗又令画工图其状以示百僚，仍大赦天下，内外五品已上官母妻各加封邑。时中宗即雅信符瑞，巨源又赞成其妖妄。是岁星坠如雷，野雉皆雊，咎徵若此，不闻巨源有言，盖与韦皇后继叙源流，佞媚官爵，疑其开导，以踵则天。时有骁卫将军迦叶志忠、太常少卿郑愔、兵部尚书宗楚客、右补阙赵延禧等，或相讽谕，或上表章，谬说符祥，朋党取媚，识者嗟愤。
景龙三年，拜尚书左仆射，依旧知政事。未几，又拜尚书令、同中书门下三品，仍旧监修国史。时国家将有事于南郊，而巨源希韦后之旨，协同祝钦明之议，言皇后合助郊祀，竟以皇后为亚献，巨源为终献，又以大臣女为斋娘。及韦庶人之难，家人令巨源逃匿，巨源曰：“吾国之大臣，岂得闻难不赴？”乃出，至都街，为乱兵所杀，时年八十。
睿宗即位，赠特进、荆州大都督。太常博士李处直议巨源谥曰“昭”。户部员外郎李邕驳之曰：“三思引之为相，阿韦托之为亲，无功而封，无德而禄，同族则丑正安石，他人则附邪楚客，谥之曰‘昭’，良恐不当。”初，巨源与安石迭为宰相，时人以为情不相协，故邕以此称之。处直仍固请依前谥为定。邕又驳曰：
夫古之谥，在乎劝沮，将杜小人之业，冀长君子之风。故为善者虽存不贵仕，而没有余