李斯死后，赵高名正言顺地当上了丞相，事无大小，都完全由他决断，几乎成了太上皇。羽翼已丰的他，渐渐不把胡亥放在眼中了。
一天，赵高趁群臣朝贺之时，命人牵来一头鹿献给胡亥，说：臣进献一马供陛下赏玩。胡亥虽然糊涂，但是鹿是马还是分得清。他失声笑道：丞相错了，这明明是头鹿，怎么说是马呢？
赵高板起脸，一本正经地问左右大臣；你们说这是鹿还是马？围观的人，有的慑于赵高的淫威，缄默不语；有的惯于奉承，忙说是马；有的弄不清赵高的意图，说了真话。胡亥见众口不一，以为自己是冲撞了神灵，才会认马为鹿，遂召太卜算卦，太卜道：陛下祭祀时没有斋戒沐浴，故至于此。胡亥信以为真，便在赵高的安排下，打着斋戒的幌子，躲进上林苑游猎去了。二世一走，赵高便将那些敢于说鹿的人纷纷正法。