但随着韦孝宽、韦世康和韦洸这些出色人物的先后去世，京兆韦氏难免走向了没落，隋朝代周以后，杨坚、杨广为了给关陇权贵设敌人，大力扶持韦氏、杜氏、杨氏，其中韦氏与皇室联姻者比比皆是，杨昭、杨暕兄弟二人的正妻均是韦氏女子，当时不管是谁成为杨广的继承人，韦氏的地位都嵬然不动，得到皇室扶持的韦氏因此而大兴。
当时韦氏家主是韦孝宽的孙子、二房韦总的长子韦圆成，而韦太后是三房韦寿的小女儿。当年杨昭与杨暕争夺皇储时，由于家主韦圆成的亲妹妹是杨暕的正妃，在他的操作下，韦氏全力支持杨暕，后因杨暕的妻子病逝，且太子之位已经尘埃落定，韦氏才又因为韦太后的关系转投杨昭门下。
韦圆成病死以后，由其弟韦匡伯继承了韦氏家主之位，但是韦太后和杨侑最最艰难的日子里，韦匡伯为首的韦氏又放弃了他们母子，与关陇权贵一起为李渊摇旗呐喊，李渊入门以后，不仅竭尽全力的给人给物，还将寡居在家的亲侄女韦珪嫁给了李世民当侧妃。如今到势火不太妙，又想到走韦太后的关系来了。