而且唐顺之在地方，居然深得朝中大员的欣赏，御史赵炳然、江南巡按舒汀、内阁学士徐阶、工部侍郎赵文华等相继荐其复官，被他一一回绝，而且严嵩也对他青眼相加，认为唐顺之是平定东南倭乱的不二人选，数度举荐唐顺之，要其复官。
能够让严党、徐党都争相举荐的人，能力自然是非比寻常，连严世蕃也不得不承认，唐顺之确实不一般，故而严氏父子对唐顺之特别重视，严嵩甚至亲自写信，请唐顺之出山。
唐顺之坚辞不允，严嵩甚至耍起了流氓，说道：“闻唐荆川欲学吴康斋，视吾辈荐用者为石武清。 ”吴康斋指吴与弼，石武清指石亨。吴与弼是明代中期知名的理学家。明英宗复辟时，大将石亨势焰熏天，想要征召吴与弼进京为官。吴与弼料知石亨必败，固辞还乡。严嵩认为唐顺之是把自己当作石亨那样的弄权大将，不愿意合作。威逼之下，唐顺之压力巨大，不得已出山任兵部职方司郎中。
唐顺之步入书房，对着严世蕃行礼后，严世蕃说道：“荆川公可是等家父的？家父尚在西苑未归。”
唐顺之笑着说道：“下官今日是来找小阁老的。”
严世蕃笑着说道：“荆川公说笑了，不知寻某说何事啊？”
唐顺之说道：“还请小阁老高抬贵手，放仲芳一条生路。”
见唐顺之直接开门见山，严世蕃心中不喜，暗道这老儿好不晓事，来求我办事，怎么也得先拿个千两白银意思一下吧，小阁老的们就这么好进吗？当下说道：“荆川公怕是找错人了，现在杨继盛的案子可是北镇抚司在办，那可是诏狱，没有陛下的旨意，谁敢插手？”
唐顺之心里不屑，若不是为了仲芳，谁有心情陪你扯淡，天下谁人不知，陆炳和严嵩现在是政治盟友，嘉靖二十七年陆炳和严嵩联手将夏言至于死地，曾铣下狱后，陆炳奉命进行审问。三月，他在上报的审讯结果中称，夏言收受曾铣贿赂、串通边防将领的事都属实，于是夏言被判死罪。
后来仇鸾因在庚戌之变中勤王而得宠，凌驾于严嵩之上，但独怕陆炳。仇鸾与严嵩翻脸后，陆炳与严嵩再次联手对付仇鸾，嘉靖三十一年（1552年），仇鸾病重，陆炳趁机揭发了他图谋不轨的情状。嘉靖大惊，立即收回给仇鸾的敕印。仇鸾忧惧而死后，陆炳向嘉靖报告锦衣卫掌握的仇鸾“通虏纳贿”罪证，嘉靖命陆炳会同三法司审理此案，结果以谋反律定罪，仇鸾被剖棺戮尸。
严嵩受贿，陆炳一样也不干净，和他一起谋划事务、收受贿赂。很多时候陆炳都积极的配合严嵩，若是严氏父子能够向陆炳开口，那至少杨继盛在诏狱里就没有性命之忧，北镇抚司的诏狱可不是那么好进的，在里面被折磨致死的官员不计其数，打死一个六品武选司员外郎根本不叫事情。
唐顺之说道：“小阁老，仲芳固然言辞激烈，但是严阁老身居宰辅，肚量岂是一般人能比的？严阁老若保全仲芳，天下谁不敬佩阁老的肚量？若仲芳有所不测，岂不令严阁老声名受损，令无知之人，非议阁老。”
严世蕃在心里冷笑，名声？现在他们父子两个还有什么名声可言？若是不弄死杨继盛，以后大家都来弹劾我们父子，三人成虎，终究有一天陛下会厌弃我们，到时候才是身死族灭的时候。
严世蕃直接不回答唐顺之的问题，唐顺之也不说话，就这么和严世蕃在客厅里喝茶，好一会后，管家来报，严嵩回来了，听说唐顺之来了，还没来得及换衣服就来到客厅了。
严嵩走进来，严世蕃赶紧下去扶着严嵩，严嵩高兴的说道：“应德（唐顺之字）可是稀客，什么时候来的？”
严嵩还穿着仙鹤补子德公服，只是没戴官帽，显然是刚从西苑回来，唐顺之笑着说道：“劳阁老挂念，下官也是刚刚到。”
严世蕃当即出言讽刺道：“爹，唐大人可是专程前来让你放过杨继盛的。”
严嵩坐下后，说道：“应德的意思，我已经清楚了，若是杨继盛只是弹劾老夫，自无不可，可是他万万不该将此事与裕、景二王联系起来，现在陛下盛怒，令锦衣卫穷究此事，缓急之间，恐怕难以寰转！”
见唐顺之激动起来，严嵩赶紧说道：“应德不要急，现在陛下既然关注此事，锦衣卫绝不会在这个时候将杨椒山置于死地的，依老夫看，暂时没有性命之忧，只是要吃些苦头罢了。”
严嵩既然说杨继盛暂时没有性命之忧，那就基本无事，只要严嵩不下黑手，他们再运作一下，大不了就是贬官流放嘛，赶到大赦还是可以起复的，得到严嵩答复的唐顺之于是告辞离开。
严世蕃见唐顺之走了后，才对严嵩说道：“一个兵部郎中，以为自己是个人物了？徐华亭都不敢出头，他还敢做仗马之鸣，真是找死！”
严嵩浑浊的老眼突然盯着严世蕃，幽幽的问道：“严世蕃，要不然我这把椅子也给你做了吧！”严世蕃赶紧低声说道：“父亲，这唐顺之实在是太不识抬举了，父亲举荐也不来，徐华亭举荐也不来，还以为自己是诸葛武侯吗？”
严嵩说道：“唐顺之有大用的，东南要是出乱子，他能平定的。”
严世蕃不屑的说道：“几个倭寇罢了，严令州县卫所加以剿灭，再不行就从九边抽调精锐，还对付不了几个倭寇吗？”自从嘉靖二年争贡之役以来，大明断绝与日本的朝贡，沿海滋扰的倭寇逐年增加，已经成为东南大患了，严嵩作为首辅，不得不加以筹谋，故而一定要起复唐顺之，就是以备不时之虞。