汉武帝时期，张汤曾经显赫一时，但终因睚眦必报，四处树敌而落到被迫自杀的下场。大概是因为吸取了他的经验教训，张汤的儿子张安世，却走向了与父亲完全不一致的道路，最终将家族的荣光延续了近两百年。
张汤死后，汉武帝查明是被诬陷的，严惩了他的仇家，并且将他的儿子张安世重用提拔。张汤的另一个儿子张贺，因为卷入了巫蛊之祸，本应该处死，张安世苦苦求情，最终改为腐刑，做了一个阉人，担任宫中的掖庭令。
张贺在担任掖庭令的时候，遇到了汉武帝的皇曾孙、废太子的皇孙刘病已。因为和太子关系交好，还曾经做过太子宾客，张贺将恩情全部报答在刘病已身上，给予了他无微不至的关心，并亲自辅导他读书习字。
刘病已也非常争气，人品学业都出类拔萃。张贺不免有些自得，到处夸奖，还牵强附会说刘病已不愧是龙种，就是有异象。张安世每次听到，都怒斥自己的哥哥，让他闭嘴，不要惹来祸端。这时候的张安世，就懂得了低调做人的道理。
后来，霍光与张安世等人商量，废掉了刘贺，让刘病已做了皇帝，这就是开创了西汉极盛时期的汉宣帝。按理说，张安世和霍光几乎一样，都是有拥立之功，被列为麒麟阁十一功臣之列。但张安世却完全没有半点的飞扬跋扈，相反，他低调得令人不可思议。
曾经有一位郎官，工作得非常不错，向张安世求官。张安世见面和他打哈哈，也不说可以，也不说不可以，热情迎来，热情送走。不久，这位郎官果然升了官，张安世却不承认是他推荐的。当时人都讥讽说张安世不识才，这么有能力的官员都不推荐，可他却毫不在意。
还有一位郎官，晚上宴会的时候喝醉了，在大殿撒了一泡尿就跑了。面对这样无法无天的事情，张安世却只是笑笑，不做处理。他和他的父亲酷吏张汤完全不同，不仅没有一查到底，而且还幽默的对属下说：你们怎么知道他是溜了，而不是去找水来冲洗呢?
霍光死后，霍家因为谋反而被诛灭，盛极一时的豪门顿时灰飞烟灭，这更为张安世敲响了警钟。他和霍光有姻亲，孙女张敬是霍氏外亲族的妻子，理应被族诛，但就是因为他平日低调谨慎，让皇帝法外开恩赦免了张敬。
此时，他以大司马车骑将军领尚书事，做到了人臣之极，只差拜相了。他与汉宣帝关系特殊，两个人几乎就能决定天下大事，但他却不愿意树敌，表面上尊重百官之首的丞相。
每当他和皇帝讨论完大事，就提起回到家中告病不出。直到汉宣帝发布了诏书，他才假装和惊讶的说：“皇帝的命令果然如此吗?”。不仅如此，他还将戏演全套，打发人去丞相府问问详细情况。久而久之，大臣们都以为他不知内情。
官位越高，他越是低调谨慎，不受贿，不结党营私。他曾经举荐过一位贤良的官员，后来此人来他府上道谢。张安世既不要他的礼物，又很遗憾的告诉他：“我是因为你的才能而举荐你的，你现在所作所为很令我失望，只能绝交。”
这样一个人，也许很多人觉得他过得很窝囊，很不过瘾，明明有那么大的权力，却始终韬光养晦。但这就是他的生存之道，他用父亲张汤的经验教训，浓缩成低调二字，从不招摇，这在汉朝的列侯之中也是绝无仅有的。
他的这种风范传承了子孙，也让他的家族获得了回馈。他被封为富平侯，这个爵位一直传承到汉朝灭亡，一共一百八十多年，其中哪怕王莽篡汉的时候都没有中断。唐朝诗人李商隐专门写有《富平少侯》诗赞颂他：
七国三边未到忧，十三身袭富平侯。
参考资料：《汉书》、《资治通鉴》