文帝杨坚没有亲戚关系。他的地位是自己一刀一枪扎扎实实杀出来的。只凭南下攻略南陈一战，杨素便因战功封爵越国公，食邑三千户，赐帛一万段、粟一万石及金宝无数。
大隋建立后，杨素广置地产，长安、洛阳到处都有他的宅子。这些宅子里居住着上千女眷，各个锦衣玉食地养着。要知道，隋文帝都没这样的待遇啊。不仅如此，在国内各大城市，杨素开的旅店、购置的田地和房子比比皆是，数以千百来计算。
然而，如果杨勇上台，这泼天的荣华富贵将顷刻化为乌有。
就在柳元二人起草诏书的时候，杨素悄悄把这事告诉了杨广。杨广迅速调集兵马，矫文帝诏逮捕了两人，并调运东宫将士守卫仁寿宫，宫门禁止闲杂人等出入。
与此同时，右庶子张衡奉命进入仁寿宫侍候杨坚，而其他一任无关人等统统被赶走。
张衡在仁寿宫里究竟干了些什么，谁都不知道。据《大业略记》记载，他把隋文帝毒死了。还有一种说法是，隋文帝被张衡血溅屏风。
总之，隋文帝很快就崩了。杨广登基即位，是为隋炀帝。他当上皇帝后，很快把自己的兄弟、侄子几乎全部杀光光。
另一边，张衡却步步高升，很快官至御史大夫。但这种得位不正的荣耀，注定会有反噬。公元612年，张衡的小妾诬告他心怀怨恨，诽谤朝政，隋炀帝赐他在家中自尽。