此后，宇文化及等人便开始了他们的阴谋。每当有机会在高允文面前时，他们便有意无意地提及高羽权力过大的问题。宇文化及装作忧心忡忡地对高允文说：“陛下，如今摄政王权力滔天，各项改革举措虽表面上为了大夏，但难免让人猜测他是否有其他心思。您看这兴修水利、推广作物，看似造福百姓，实则是在拉拢民心啊。” 王瑜也在一旁添油加醋：“是啊，陛下。还有那压缩士族特权，士族乃是我大夏的根基，如此做法，恐怕会动摇国本。摄政王如此行事，恐怕是不把陛下您放在眼里啊。”

而皇后宇文丽华，作为宇文化及的女儿，自然也听从父亲的命令，在高允文耳边吹起了枕边风。夜晚，在寝宫之中，宇文丽华依偎在高允文身旁，娇声说道：“陛下，您可要小心摄政王啊。近日臣妾听闻，朝堂上下都在议论摄政王权力过大，恐有不臣之心。您如今贵为天子，可不能被他人架空了权力啊。” 高允文本就年少，心性不定，经他们这么一番挑拨，心中渐渐对高羽产生了不满和猜忌。

起初，高允文对这些言论还半信半疑，但随着时间的推移，听得多了，心中的疑虑也越来越深。他想起高羽平日里的种种举措，虽然都是为了大夏的发展，但自己作为皇帝，却仿佛被置于一旁，没有太多的话语权。这种感觉让他既失落又担忧，担心自己的皇位有朝一日会被高羽所夺。

太皇太后和皇太后很快察觉到了高允文的变化。一日，太皇太后将高允文召至宫中，语重心长地对他说：“孙儿，哀家知道你近日心中烦闷，但切不可听信他人谗言。你四叔对我大夏忠心耿耿，他所做的一切，都是为了大夏的江山社稷，为了百姓的福祉。你想想，若不是摄政王在瘟疫肆虐时力挽狂澜，若不是他在战场上奋勇杀敌，大夏怎能有今日的安宁？”

皇太后也在一旁说道：“是啊，允文。你自幼与你四叔亲近，他是怎样的人，你应该最清楚。他一心辅佐你，是希望你能成为一代明君，复兴大夏。那些说摄政王坏话的人，不过是为了自己的私利，企图破坏我们大夏的稳定。你可不能被他们蒙蔽了双眼啊。”

高允文听了太皇太后和皇太后的话，心中虽有所触动，但那些谗言早已在他心中种下了猜忌的种子，一时之间难以完全消除。