秦泰对于严嵩的了解并不多，但是听别人多次提及过严嵩这个人。高拱说严嵩是一个大明最大的蛀虫，一切罪源之于他。谭纶说严嵩是一个老奸巨猾的官场老手，是一个怎么打都打不倒的“不倒翁”。张居正却说严嵩是一个十分值得研究的一个人。徐阶对于严嵩的评价更是特别，说严嵩是他徐阶一辈子都追赶不上的人。
就在秦泰抓到严世藩的罪证，动摇严党根基的时候。就在秦泰把自己手里的罪证交给友人张居正的时候，张居正曾经叹了一口气说了一句当时秦泰听不太懂的话。后来秦泰和张居正聊天的时候，张居正告诉秦泰其中的真正含义。严嵩一辈子精打细算，几乎没有任何把柄落在外人手里，就算是嘉靖皇帝朱厚熜想针对他都不那么容易，严嵩唯一的弱点只有一个，那就是他的儿子严世藩。
严嵩中年得意，在内阁首辅的位置上一干就是三十多年，实际掌控内阁近四十年。他的养气和忍耐的本事已经练到了炉火纯青的地步。作为嘉靖皇帝朱厚熜的代言人，严嵩从来不嚣张跋扈，也从来没有利用过嘉靖皇帝朱厚熜的名声为自己光明正大地办过事。后来成为百官之首之后，严嵩有了自己的威严和做派，也和自己的性格没有直接的关系。他用自己的威望和地位压制对手，让对手不敢正面和他较量。所以严嵩十分专权但是并不霸道，任何人不可能抓到严嵩的错处。在位多年的严嵩依然恪守臣子本分，并没有恶意攻击过任何一个同朝官员。这也是张居正最佩服严嵩的一点，任何人到了严嵩这个年纪地位后，都不可能像严嵩这么克制自己。
相比之下严世藩比他的老子严嵩几乎是一个截然相反的模样。严嵩博学多才但是不张扬，严世藩却是从小聪明扬名天下了。早在严世藩少年时期，因为他的一篇文章得到嘉靖皇帝朱厚熜的夸奖，所以被许多人知晓。当时称之为神童的人不少，但是后来真的有出息的并不多，严世藩是一个，还有一个是张居正。严世藩从小自以为自己了不起，再加上旁人有意无意地蛊惑，所以十分嚣张跋扈，大有目中无人的姿态。这时候刚好是严嵩努力发展自己事业的时候，所以严嵩并没有及时更正儿子严世藩的态度。
记得那是严世藩十三岁的的时候，那一年严世藩的父亲严嵩正式接任内阁首辅。嘉靖皇帝朱厚熜召见了严嵩和严世藩父子，嘉靖皇帝朱厚熜不但当场夸奖了严世藩，而且说了一句半真半假的话。“你父亲是当朝内阁首辅，将来你的成就不亚于你父亲，你会是未来的内阁首辅。”这句笑话被大家当做一种暗示，说明嘉靖皇帝朱厚熜默许将来严世藩接替严嵩进内阁。所以大家更加看好严嵩和严世藩，甚至于有人开始为严世藩安排未来的道路起来。
严世藩十八岁进国子监，以国子监第一名的身份考取功名，成为当年殿试第一名。二十三岁担任工部侍郎，二十八岁进内阁担任“内阁行走”。当他进入内阁后，大家好像看到了未来的内阁首辅一定是严世藩的了一样。无论是徐阶还是其他人也不得不承认这一点，严嵩培养出一个好儿子。至于严世藩这个“小阁老”的称呼，也是嘉靖皇帝朱厚熜第一个叫出来的。严世藩二十八岁进内阁，嘉靖皇帝朱厚熜第一次在内阁会议上见到了严世藩。嘉靖皇帝朱厚熜戏称这个内阁最年轻的成员严世藩为“小阁老”。从此大家人前人后都称呼严世藩为“小阁老”，这成为了严世藩的一个外号。
“阁老”是内阁正式成员的专用称呼，是官员对内阁成员的一种尊称。严嵩担任内阁首辅之后，大家都称呼严嵩为“严阁老”。后来时间久了大家省去了姓氏，称呼严嵩为“阁老”。凡是在公开场合称呼为“阁老”的只有严嵩一个人。徐阶等人不能称呼为“阁老”，而是例如“徐阁老”等等。“小阁老”这个名词是没有的，但是嘉靖皇帝朱厚熜说出了口，成为了一种职务，一种只有严世藩一个人专用的职务，也算是嘉靖皇帝朱厚熜给予严世藩的一种承诺。
严世藩有了这个外号后，觉得自己将来的地位更加巩固了，所以脾气越来越霸道。不但更加专注于揽权，而且开始针对敌对势力。他要在自己的党派里面树立自己的威望，更需要让敌人们对自己害怕。无所顾忌的他开始越来越胆大，甚至于做起一些连他父亲严嵩都不敢做的事情。
张居正曾经私下告诉秦泰几件关于严世藩的事情，秦泰听了差一点跳起来。朝阳郡主的父亲过世，朝阳郡主为父王守孝。刚刚除服就得到朝廷的嘉奖，让朝阳郡主来京亲自接受封赏。朝阳郡主来京后，并没有见到嘉靖皇帝朱厚熜，代表嘉靖皇帝朱厚熜下达封赏指令的是当时的总管太监吕芳。朝阳郡主受封的时候，刚好严世藩代表父亲严嵩来和吕芳接触。严世藩一眼就看中了朝阳郡主，严世藩就用自己的身份有意无意地接近朝阳郡主。朝阳郡主明知道严世藩对自己有意，但是她仗着自己是郡主是皇亲国戚，不愿意和严世藩这种的人过多接触。没想到这么做彻底恼怒了严世藩，严世藩在一个晚上来到朝阳郡主的行馆。第二天一早严世藩离开了，朝阳郡主不久之后上吊自缢了。明眼人想也想得到，严世藩仗着自己家的势力霸占了朝阳郡主，一点不担心嘉靖皇帝朱厚熜会责怪自己。结果嘉靖皇帝朱厚熜真的没有处理这件事情，导致严世藩更加嚣张跋扈。
严世藩看上了前吏部郎官刘平的女儿，他让自己的手下带口信给刘平，让刘平自动献上自己的女儿给自己。刘平是一个倔强的老头当然不愿意了，而且告诉来人自己的女儿已经定亲了。严世藩知道后一点也不着急，几天后刘平的亲家来退婚。刘平知道是严世藩逼着亲家这么做的，就把这个软弱无能的亲家和严世藩大骂一顿，说自己绝对不会把女儿送给严世藩的。结果第二天刘平被锦衣卫无缘无故地抓了起来，一家老小也受到了牵连。七天后刘平的老婆女儿在被严世藩折磨和侮辱后，送进了教坊司当官妓。刘平的唯一一个儿子被阉割后进攻当一个永远没有前途的杂役太监。刘平在监狱里面得知之后，自己咬舌自尽了。临死前他诅咒严世藩一家不得好死，他做鬼也不会放过严世藩的。
严世藩专管工部的时候，不但挪用工程款，而且干了不少的恶事坏事。严世藩去通州视察工程的时候，看见河边几个船工家属在洗衣服。其中有一个女孩子很漂亮，严世藩二话不说就在那里欺负了这个女孩子。由于这个女孩子不顺从，惹得严世藩不高兴不痛快。严世藩霸占女孩子后，竟然把女孩子赏给了自己的手下。一大群大男人轮番上场，活活把这个女孩子折磨死了。一边的老百姓敢怒不敢言，女孩子的父母赶到后抱着女孩子的尸体大哭，没有人敢站出来为他们说话。事后女孩子的父母上告衙门，衙门的人不敢受理这件案子，女孩子的父母几乎跑遍了所有的衙门，没有一个衙门愿意接手。
嘉靖四十年秋，朝鲜使者来朝贡，不但送来了无数的金银财宝还有十名最美的少女。嘉靖皇帝朱厚熜因为年纪大了再加上要修炼道术，所以不能享用这些美女。内阁会议上说好的，这十名少女分别赏赐给藩王和亲王的。可是严世藩一点顾忌也没有，整天呆在这些女孩子房间里面，自比风流的皇帝。少女们不知道真相，还以为严世藩就是中原国家的皇帝，所以尽心尽力伺候严世藩。到了第二年春天的时候，十名美女分送到各地藩王府。本来满心欢喜的藩王们，发现这些美女不但都不是处女了，而且有几个已经有了身孕。这么明目张胆地给藩王“戴绿帽子”，也只有严世藩敢这么做了。嘉靖皇帝朱厚熜听了后不但不生气，而且觉得这个严世藩好色胆子大，大有以前自己的威风。嘉靖皇帝朱厚熜这么明目张胆的保严世藩，谁也不敢把严世藩怎么样。这就更加助长了严世藩的嚣张，严世藩觉得自己比几个皇子还要威风，更加不把别人放在眼里。