没有想到，像吴晗这样一贯紧跟的人，也会身遭不测之祸。1962年以后有段时间，毛泽东突然鼓吹起了海瑞精神。胡乔木将此信息带给了吴晗，因为吴是明史专家，就在报上发表了几篇海瑞的文章。马连良想排个海瑞的戏，让吴晗执笔编了个海瑞罢官，这戏当时许多人说好。但后来文革开始后，成了文革的导火线。

文化大革命开始后，吴晗屡遭批斗，被打伤。后被投进监狱，遭受种种摧残和迫害，他被打伤得很厉害，忍受着巨大的肉体痛苦和精神痛苦。肉体痛苦因为他被打伤了胁骨，打得全身青紫，当时，什么组织都可以批判他，什么人都可以打他斗他。他是文革初期最有名气的阶级敌人。他没有想到，当年，他积极地批判党点了名的阶级敌人，真是党指向哪里，他请批向哪里。哪里知道，今天革命又以他为对象了。无产阶级文化大革命，不仅是一场触及肉体的革命，也是一场触及灵魂的革命。他想不明白，自己好端端的紧跟毛泽东，怎么又成了凶恶的阶级敌人了？

吴晗挨批判还不算，他的莫须有的罪名侵害了全家。他的夫人袁震也被送去“劳改”，袁、吴二人于1969年先后含冤而死。他们的女儿小彦深受刺激，精神失常，后被抓进监狱，也于1976年去世。吴晗一家四口，竟死了三个，仅儿子吴彰幸存。真是造孽啊！