有视察过库房，梁芳又怎料得到他会忽然有兴致来查看，发现了自己的勾当？这时只好硬着头皮道：“启禀万岁爷，这些金银，都在您的同意下，拿去兴建显灵宫和祠庙了，为的正是替陛下祈万年之福啊！”
成化皇帝再愚笨，也听不进这等鬼话，但他知道梁芳受到万贵妃的信任，库里的钱大约是被万贵妃给拿去了，也不好深究，只能自己发了一顿脾气，搁下狠话道：“我管不了你，以后总会有人跟你算账！”说完拂袖而去。
梁芳心中害怕，便跑去向万贵妃哭诉求救。万贵妃自然并不在乎成化皇帝发顿脾气，但她听了“以后总会有人跟你算账”的话，也不禁皱眉；皇帝春秋正富，但总有不测的一日，如今坐稳太子宝座的，仍是那可恨的小娃子。
梁芳揣测万贵妃的心意，进言道：“太子年纪已长，人又颇机灵聪明。不如我们及早下手，废了太子，换上年纪还小的兴王，就不必担心了。”
自从泓儿当上太子之后，万贵妃也懒怠去谋杀其他的皇子了，几年之间，成化皇帝便多添了七八个儿子，其中最年长的名叫朱佑杬，被封为兴王，母亲是邵宸妃。
梁芳这话正对了万贵妃的胃口。她当即去跟成化皇帝哭诉，说太子对她毫无敬意，扬言要对她报复，要求成化皇帝废了太子，另立兴王。成化皇帝原本耳根子软，这几年来太子在周太后的保护和谢迁及李东阳等人的教导下，人品端正，性格坚毅，长成了一个跟他自己截然不同的人。他知道自己懒怠无能，但心中对于这个太过能干正直的儿子不免有些忌惮，暗想：“太子都十五岁了，逐渐懂事，说不定便要开始指责批评朕的过错，更可能生起贰心。到那时节，便不好收拾了。兴王年纪还小，人又老实些，换成他当太子，说不定也是好事。”
成化皇帝既动了这念头，便找了怀恩来商量。怀恩一听，大吃一惊，心想太子又没犯什么错，怎能如此轻忽地说废就废？当即磕头问道：“太子是陛下长子，自古皆以长子正位东宫，岂可轻言废长立次？不知太子有何重大错处，令万岁爷动此念头？”
成化皇帝支支吾吾说不出个所以然来，只好说道：“我看兴王这孩子挺不错的。”
怀恩道：“禀陛下，兴王不过九岁，就算资质良好，又怎能取兄长而代之？”
成化皇帝跟怀恩话不投机，恼羞成怒，顿时对这老太监生起反感，喝道：“你一心保护太子，存的是什么心，朕岂有不知？你不过是想等到太子即位之后，会记得你拥护他的功劳恩情，对你更加信任重用。在朕面前，你却满口大道理，装出一副仁义道德的模样，哼！居心叵测！”一怒之下，便将怀恩贬
