因有“白虹贯日”、“赤星”等天文星象出现，太史官奏称是除旧布新之象，当有新主出现。高湛为了顺应天意，把渤海王之位传于长子高纬，并大赦天下。
不过，因为高纬年幼，青州的军政大权依旧掌握在高湛手中。高纬也乐得清闲自在，每日只与一众宠臣玩乐，丝毫不理军政大事。
除了高纬之外，高湛还有一个庶长子，名为高绰，字仁通。他的母亲不是高湛明媒正娶，因此被贬为排行第二。
高绰从小就凶狠残暴，喜欢波斯狗，尉破胡谏阻他，他就忽然杀死数只狗，弄得满地狼藉，尉破胡吓得逃走，不敢再劝谏。
高绰还喜欢让人脱光衣服，学着野兽的样子，让狗去扑食他们。
闲暇之时，高绰坐在楼上，用弹弓弹射过往的行人。他还喜好便服微行，游玩打猎更是没有节制。
有一次，一个妇女抱着小孩在走路，看见他便立刻转身躲入草丛之中。
高绰一把夺过女人怀中的小孩儿，喂波斯狗食用。
女人大声号哭，高绰听了大怒，又放纵波斯狗扑食妇人。波斯狗不扑，他就在妇人身上涂上小孩儿的鲜血，狗才扑上去撕咬。
高纬听说此事之后，下令将高绰锁拿，押赴府衙。
等高纬赶到之后，又把他赦免，并问他怎么玩才最快乐，他答道：“多取些蝎子，和蛆放在一起，最为快乐。”
高纬连夜命人找来蝎子一斗，到天亮，只得到二三升，放在洗澡盆里，让一个人光着身子躺在澡盆中。那人被蜇得大声号叫，身体辗转扭动，高纬与高绰看了后，高兴得不得了。
高纬责怪高绰说道：“这样有趣的事情，你为何不早一点派信使骑快马奏报给我？”
从此以后，高纬就非常宠爱这位兄长，封其为大将军，两人朝夕在一块嘻闹。
高纬如此宠幸高绰，这让他的一众宠臣感受到了威胁。
于是，这些人便联合起来，陷害高绰。
因为高绰是大将军，高纬宠臣韩长鸾便在议事时提议，调高绰前往前线参战。高绰毕竟是高湛之子，相比于斛律光等外人，高湛还是更相信自己的儿子，所以他便同意了此事。
就在高绰准备出征之时，韩长鸾命高绰的亲信诬告高绰要谋反。
然后，韩长鸾等人从旁煽风点火道：“谋反是天大的事，绝对不能赦免。”
高纬不忍心公开将他处死，于是派他宠爱的胡人何猥萨在后园与高绰相扑，借机用力将他扼死。
高绰虽然残暴不仁，但却颇有识人之明，著名大儒房晖远、孙灵晖、马子结、封孝琰、李信则等人，都是他的幕僚。这些幕僚，全都是正直之人。
高绰死后，这些大儒还为其请僧设斋，转经行道。他的正妻，是来自荥阳郑氏的名门闺秀。她拒绝了家里接她回去的决定，坚定地为他守孝三年。
这也可以从侧面看出，高绰性格中的另一面。他的本质可能并不坏，或许只是因为庶长子的身份，在家里遭受了太多的冷眼，才养成了这样的性格吧。
高绰死后不久，高湛就因为饮酒纵欲过度，导致气喘病发作，不治身亡。李祖娥总算是摆脱了他的阴影，但是此时，她已经怀有身孕......
因为与高纬的母亲胡氏私通，所以高湛死后，他的宠臣和士开依然受高纬和胡氏的宠幸，继续把持军政大权。
高纬的昏暴、荒淫比他的父亲有过之而无不及，他封其奶妈陆令萱为女侍中，这样，和士开、陆令萱、高阿那肱、穆提婆等一帮奸诈之徒，勾引朋党，擅权误国。
从此，官由财进、狱以贿成，政治一片黑暗。
高湛第三子，年仅十四岁的高俨看不惯和士开、穆提婆等人胡作非为，便计划除掉这些奸臣。
和士开等人有所察觉，便进谗言诬陷高俨。
高俨是高湛最喜爱的儿子，甚至曾因为他，想要废掉高纬。在和士开等人的劝谏下，方才作罢。正因为如此，高纬十分忌恨高俨。
在和士开等人的谗言陷害下，高俨被逐出王府，只准五天回府见母亲一次，接着又开始逐渐削弱其职权。
高俨担心若是继续这样下去，他早晚会被和士开等人谗言所害。于是，他便跟自己的姨夫侍中冯子琮密谋除掉和士开。
高俨在宫中待得时间久，知道高纬批阅奏章从来不看内容，一笔勾过完事，就决定让幕僚王子宜上表弹劾和士开的罪行请求治以死罪，这份奏章由冯子琮夹杂在其他奏章中交给高纬。
结果，果然如高俨所料，高纬根本没看内容就勾过了。高俨拿到批示后，立即找领军库狄伏连，让他逮捕和士开。
库狄伏连感到事情太突然，有些蹊跷，便问冯子琮是怎么回事，并让他再上奏请示一次，却被冯子琮严词拒绝。
库狄伏连只好奉命行事，逮捕了和士开。高俨怕夜长梦多，令手下冯永洛一刀结果了和士开的性命。
高俨本来只想杀掉和士开，但事已至此，他手下的人劝道：“你已经犯了专杀之罪，事情到了这种地步，干脆把所有的奸臣除掉算了。”33小说网
于是，高俨带着部下三千多人包围了王府，打算铲除掉全部的奸佞。
高纬一看形势危急，急召斛律光前来护驾，斛律光向来忠心耿耿，况且又是高纬的岳父，当然支持高纬，但同时又对高俨除奸之举大为钦佩，便想说和二人。
可高纬根本不听，不仅用刀背狠狠打了高俨一顿，还把库狄伏连、高舍洛、王子宜等人捉起来绑到后花园，高纬亲自用箭把他们射死，又让人把他们肢解、拿到街头去示众。
冯子琮等与高俨有联系的官吏，或被赐死，或被罢职流放。
高纬的母亲胡氏知道他不会轻易放过高俨，便千方百计保护自己的爱子，她先把高俨接进到府中，跟她住在一起。为防止别人下毒，高俨的饭菜她必须先尝一尝，这样高纬一时也下不了手。
可只有千日做贼，没有千日防贼。
高俨最终还是中了高纬的诡计，被他用绳子勒死，埋在府内。
高俨死时年仅十四岁，他的四个遗腹子，也都在出生数月后被幽禁而死。