再加上他和高德政搞政斗这件事，明明晋阳军阀的事情都没解决，就开始争夺权力，分不清自己是大小王。
三件事加在一起，让高殷很不喜欢杨愔，而且杨愔的忠诚也不一定能相信。
由于掌握人事权二十年，让杨愔扩大了自己的朋党，是高洋亲党中最大的次级派系，又尚了前魏帝之后、太原长公主高静，借着姻亲关系拉拢到了一批外戚。
虽然这个时代的人看不懂，但高殷可太熟悉了，这个路子不就是隔壁老杨的路线吗？
试想若是杨愔有女儿，嫁给了高殷，而后生下杨家外孙，高殷再莫名其妙的病危，那大权不就完全落入了这位杨相手中？
到时候杨隋朝照样诞生，不过不是在周国，而是在齐国了。
权力的诱惑，足以使一个人面目全非。
“昔年文襄遇害，兰京持刀入房，屋内有元康、季舒与杨相。元康以身体遮蔽文襄，身遭重创，而杨相与季舒一个逃脱，一个堕入茅厕，方才幸免于难。若杨相当初同样护文襄，只怕便无今日之相位啊。”
这话说得杀人诛心，彼时已经是正统继承人高澄的臣子，且是已经能谋划篡魏大事的心腹重臣，遇到大事时仍不敢用性命去保护主上。
那到了高洋这里，他的忠诚是可信的吗？到了高殷这里都转到第三手了，又敢保证他没有异心吗？
而且这其中还有很让人难绷的一点。
陈元康护主而死，死前请祖珽写信，说了些家事，还说祖喜欠自己东西，让家属去找祖喜讨要。结果祖珽这个拟人生物直接把信藏起来了，自己去找祖喜要东西，得到二十五锭金子，只给祖喜留了两锭，其余的全部自己拿走。
同时祖珽还跑去偷了陈元康家里几千卷书。
最让人难绷的是什么呢？是祖喜怀恨在心，去和陈元康的弟弟们说了这些事情，他们大为不满，于是去找杨愔报告。
结果杨先生皱着眉头说，这种事情暴露出去，对陈元康又没好处，把事情给压了下去。
所以说杨愔这个人实在是太极品了，几乎是刻薄寡恩的代言人，君主被刺杀，前同事护主而死，即便自己做不到，杨愔也该尊敬佩服陈元康，何况这件事完全是陈家受害。
结果人一走，茶就凉，一点同事爱都没有，这样的人，高殷可不敢相信。
高洋还从未从这个角度考虑事情，被高殷这么一说，顿时回忆起了他好大哥的死因。
虽然利好高洋，但高洋还是颇为悲怆的，站在君主的角度，他可不希望自己是那种死法。
高殷说得很对，如果臣下关键时刻不能尽忠，那他就不配得到国主的宠信与扶持。
高洋轻哼一声，命人取来纸笔，写了些东西，并没有给高殷看。
虽然他相信现在的高殷有能力去处理，但自己先帮他料理了，就会更轻松，只是不再像历史上一样，杀死高德政了。
高殷接着进言：“请召杜辅玄还朝。”
高洋微微侧目，又有些不悦：“汝何以用他？”
杜弼字辅玄，很早就追随高欢了，算下来也是三朝老臣，不过在篡魏的事情上反对高洋，因此被高洋嫌弃。
之后高洋还问过杜弼，治国应该用什么样的人，杜弼直接来了一句鲜卑人是拉车的马客，治理国家还是得用我们中国人。
作为精神鲜卑人，高洋大为光火，但没杀杜弼，光从这次没杀就足以看出杜弼的资历是有多老，堪比东吴的张昭。
然而这次不杀不代表下次不会，杜弼不仅怼高洋，也怼高德政，这些臣子无一例外在他眼中都是垃圾。
更因为杜弼与晋阳军方渊源颇深，态度上又曾经反对高洋篡位，属于站队错误的失败者，因此被赶到了海州做刺史，他的长子次子四子也都各自贬走。
所以他历史上所谓的“喝酒喝多了，越想越气，就派人去杀了杜弼”，多少有点遮掩和抹黑的意思，实际上是感觉杜弼是汉人，却属于晋阳一党，和太后关系也好，会压制住高殷班底的高德政、杨愔等人。
所以高洋先杀了高德政，让高殷派系暂时矛盾消散，全力辅佐高殷应对晋阳的挑战，而后又杀了杜弼防止他干扰汉人世家。
可惜杨愔就和他选人的标准一样，取其大者，中看不中用，把高洋苦心设计的托孤局，硬生生盘成了孤儿局。