，就是向嘉靖皇帝推荐方士蓝道行，蓝道行深得嘉靖皇帝信任，有一次，严嵩在上朝前，徐阶事先跟蓝道行联络，告知了他这件事，蓝道行于是今有奸臣奏事，嘉靖皇帝见严嵩果然上朝，心中便信了几份蓝道行的话，蓝道行又趋热打铁地：“严嵩、严世蕃是奸臣，徐阶是忠臣。”
嘉靖皇帝于是有让严嵩退休的心思，御史邹应龙本是徐阶的学生，他愤恨于严嵩残害忠良，一直想找机会弹劾严嵩；徐阶知道此时时机已到，告诉邹应龙道：“如今的严嵩、严世番就像没有根基的高楼大厦，一推就可以倒，杨继盛、沈炼的仇我一直没有忘，如今可以报了！“
嘉靖四十一年邹应龙上《贪横阴臣欺君蠹国疏》曰：“工部侍郎严世蕃凭藉父权，专利无厌。私擅爵赏，广致赂遗。使选法败坏，市道公行。群竞趋，要价转钜。刑部主事项治元以万三千金转吏部，举人潘鸿业以二千二百金得知州。严年尤桀黠，士大夫无耻者呼为鹤山先生。遇嵩生日，年辄献万金为寿。臧富侈若是，主人当何如？尤可异者，世蕃丧母，陛下以嵩年高，特留侍养。世蕃乃聚狎客，拥艳姬，恒舞酣歌，今下水旱频仍，南北多警。而世蕃父子方日事掊克，内外百司莫不竭民脂膏，塞彼溪壑。民安得不贫？国安得不病？人灾变安得不迭至也？臣请斩世蕃首悬之于市，以为人臣凶横不忠之戒。苟臣一言失实，甘伏显戮。”
嘉靖皇帝看了邹应龙的上疏后，以严嵩溺爱严世蕃，有负于首辅职责的罪名，强行命他退休；严嵩跪下为严世蕃请罪，嘉靖皇帝不听他的解释，但嘉靖皇帝念在严嵩多年服待自己有功的情份上，仍命有司岁给米百石；严世蕃被逮捕于大理寺狱中，严嵩知道嘉靖皇帝对自己仍念旧情，于是贿赂太监们，告蓝道行状，蓝道行被关进刑部大牢，严党想让蓝道行供认是徐阶让他这么做的。蓝道行一直到死也不肯承认。
法司最后定了严世蕃确实有贪污受贿的罪名，判处严世蕃及其子锦衣鹄、鸿，客罗龙文，戍边远。嘉靖皇帝看了这个判决后，原则上同意，为表达对严嵩的宽宏大量，特地赦免严鸿为民，让他去服侍严嵩，而将严府的奴仆严年禁锢于牢狱，将邹应龙升为通政司参议。
嘉靖四十一年五月，为祸朝廷多年的严嵩、严世蕃父子终于倒台，听到这个消息，两京十三省的民众“欣喜若狂”，很多人专门买来鞭炮庆祝。
严嵩回到江西老家，嘉靖皇帝追念他平日里和自己谈论修道之事，如今走了，感觉自己有些寂寞，于是跟徐阶，欲传位给裕王，退居西苑，专祈长生。杨阶闻言”大惊失色“向嘉靖皇帝力极不可，嘉靖皇帝曰：”卿等不欲，必皆奉君命，同辅玄修乃可。严嵩既退，其子世蕃已伏法，敢更言者，并应龙俱斩。“