延光二年，杨震代替刘恺为太尉，汉安帝的舅父、官居大鸿胪（九卿之一，分管礼仪）的耿宝向杨震推荐中常侍（传达皇帝诏令和掌管文书的官员）李闰的哥哥，想让其入朝做官，杨震坚决予以拒绝。于是耿宝就亲自到杨震住处拜访，并威胁说：“李常侍是皇上所重用的人，想让你征召他的哥哥入朝做官，我耿宝仅仅只是给你传达一下皇上的意思而已。”杨震义正词严地说：“如果朝廷想让‘三公’之府征召谁，就应该由尚书那里把皇帝的敕书送来，怎么能让你来传达皇上的意思呢？”耿宝无言以对，愤恨而去。皇后的哥哥官居执金吾（督巡三辅治安）的阎显也利用职权向杨震推荐自己的亲友入朝做官，杨震同样予以拒绝。而掌管工程建设的司空刘授听到这个消息后，当即征召此二人入朝做官，并且在很短时间内予以提升。两相对比，可见杨震为官是何等地光明磊落、无私无畏，但杨震因此招致阎显怨恨。
延光三年（公元124年）春天，汉安帝东行巡游泰山，樊丰等人乘皇帝在外巡游之机，竞相修建宅第。杨震属下掾吏高舒召来大匠官署的令史查问，得到樊丰等人伪造假诏书等罪行证据，于是杨震便准备好奏章，等汉安帝巡游回京后上奏此事。
樊丰等人获悉这个消息后非常害怕，当时恰好发生太白犯昴的自然星象变化，太史官奏说此星变逆行，昭示人臣有悖逆犯上行为。樊丰等人乘机将此星象变化归罪到杨震身上，并在汉安帝前造谣诬陷杨震说：“自从赵腾死后，杨震对朝廷深怀怨恨，杨震本是邓氏家族的门生故吏，对当今朝廷一直存有怨恨之心。”他们等汉安帝车驾东行归来准备选择吉日入宫时，连夜派使者收缴了杨震的太尉印绶。于是杨震紧闭大门，谢绝一切宾客来访。樊丰等人对此还觉得不够解恨，就请大将军耿宝再上奏章，诬陷杨震对朝廷收缴他的印绶心怀怨气，有不服处置之罪。汉安帝于是下诏遣送杨震回归故里。
杨震接诏后，立即动身返乡，在返乡途经洛阳城西几阳亭时，慷慨悲愤地对他的儿子和门人说：“死，本是士大夫的寻常本分之事，我蒙圣上之恩官居上司，痛恨奸臣狡猾而不能诛杀，厌恶奸邪的女人倾乱朝廷而不能禁止，我还有什么面目活于人世？我死之后，以杂木做棺板，以粗布做寿衣，既不要送我回归祖茔，也不要设祠祭祀。”说完，杨震就饮毒酒而死了，当时已七十多岁。弘农太守移良秉承樊丰等人的意旨，派人在陕县截住了杨震的灵车，不准运回本籍，并将灵柩露停道旁，听任日晒雨淋。杨震的几个儿子则被罚做苦役，代替邮差往来送信，广大百姓无不为之垂泪。
一年以后，汉顺帝即位，樊丰、周广等人都被处死，杨震的门生虞放、陈翼等人上书汉顺帝要求重新调查处理杨震冤案。当时朝廷上下都交口称赞杨震的正直忠烈。于是，汉顺帝就下诏给杨震平反，除拜杨震的两个儿子为郎官赠钱百万外，还下诏以很高的礼仪改葬杨震于华阴潼亭。改葬这天，远近百姓络绎不绝都来参加葬礼，以纪念这位清正廉洁、正直无私、疾恶如仇、敢于直谏的好太尉。