嘉靖皇帝迷信道教。有一次他下令制作了五顶香叶冠,分赐几位宠臣。夏言一向反对嘉靖帝的迷信活动,不肯接受。而严嵩却趁皇帝召见时把香叶冠戴上,外边还郑重地罩上轻纱。皇帝对严嵩的忠心大加赞赏,对夏言则很不满。而且夏言撰写的青词也让皇帝不满意,而严嵩却恰恰写得一手好青词。严嵩也利用这个机会,在写青词方面大加研究,同时还迎合皇上的心意,给他引荐了好几个得道的“高人”。皇帝越来越满意严嵩而疏远夏言。
又有一次,夏言随皇帝出巡,没有按时值班,惹得皇帝大怒。皇帝曾命令到西苑值班的大臣都必须乘马车,而夏言却乘坐小车。
几件事情都引得皇帝不高兴,因此,皇帝对夏言越来越不满。严嵩眼看时机已到,马上一改他往日的谦卑,勾结皇帝所宠幸的道士陶仲文,一起在皇帝面前添油加醋地说了夏言许多坏话。
一天,当严嵩单独去见世宗时,世宗与他谈及夏言,并对他们之间的不和略有询问。世宗的话,似乎勾起了严嵩的什么难言之隐,只见严嵩全身颤抖,匍匐在地,痛哭不已。