大明隆庆三年六月，著名“愣头青”海瑞升任都察院右佥都御史、总督粮储、提督军务、巡抚应天十府。这一年的十二月，海瑞来到了松江府上海县，查看吴淞江水患，同时张榜告之，鼓励百姓检举乡官的不法行为，尤其是侵占民田、制造冤狱的。这次上海之行，目标只有一个，就是曾经的大明首辅、海瑞的伯乐——徐阶。
徐阶为部臣时,也是严嵩权势熏灼之际。“天下知有嵩,不知有陛下”,群臣“畏嵩甚于畏陛下”。徐阶由夏言荐举而提擢。严嵩与夏言争权,曾置言于死地而代之,自然十分忌讳徐阶。徐阶受宠,严嵩心怀憎恨,时时设法挤阶。当时徐阶“度未可与争”,遂处处提防,“屈己事之,凡可以结欢求免者无所不用”,甚至“以附籍、结姻以固其好”,求得安生。
当然徐阶也很狡猾，张居正是次辅，首辅高拱，要想彻底搞掉海瑞就必须笼络好这两个人，于是徐阶用三万两黄金贿赂这两人，受人钱财替人消灾嘛，他们一出面，什么事都好办啦，海瑞的应天巡抚被撤掉，调海瑞去别的地方做官，徐阶用小小手段都消除了麻烦，还真是牛人啊，所以大家说“家居之罢相，能逐朝廷之风宪。”，看来退休回家的徐阶破坏力还是很强的！
徐阶回乡后，他的家人开始大肆侵占田产，为祸乡里作恶多端，徐阶对此基本不闻不问，朝廷有海瑞和蔡国玺二人秉公办案，惩戒了徐阶的家人，然而徐阶却通过张居正直接罢免了海瑞和蔡国玺，有人称：“家居之罢相，能逐朝廷之风宪”，所以徐阶晚年也被冠以权奸之名。