高宗在位期间最大的政治事件，莫过于废立皇后之争，即废掉王皇后，另立武皇后。在这场政治风波中，产生了两派针锋相对政治势力，即以许敬宗、李义府等人为代表的支持派，和以长孙无忌、褚遂良等人为代表的反对派。长孙无忌、褚遂良等人是一批元老重臣，功劳大，根基深，从内心里反对出身寒微、当过尼姑、且心狠手辣的武则天母仪天下；而许敬宗、李义府等人虽然在政治上比较失意，但他们善于钻营，见风使舵，看到唐高宗对武则天的眷恋之情，便投奔到武则天麾下，为武则天当皇后摇旗呐喊，充当喽啰。
从高宗角度看，他内心里更倾向于武则天。为了立武则天为皇后，高宗甚至还给长孙无忌送过礼，希望得到这个舅舅的支持。据《旧唐书》记载，“帝将立昭仪武氏为皇后，无忌屡言不可，帝乃密遣使赐无忌金银宝器各一车、绫锦十车，以悦其意。”结果，长孙无忌并不买高宗的帐，依然力保王皇后。鉴于长孙无忌势力强大，性情懦弱的高宗不想为此引起麻烦，一直在等待更佳时机。
这时，许敬宗揣摩到高宗此时此刻的尴尬境遇，当笑话一样说：“一个农夫要是多打了十斛麦子，还想换换原来的老婆呢；天子拥有一个国家，废立皇后，有什么可说的？”这话虽然轻薄，但高宗听了很受用，立武则天为皇后的信念增强。
后来，高宗密访避祸称病的李勣，说：“朕想立武昭仪為皇后，但顾命大臣都认为不行，现在已经停止了。”李勣回答说：“这是陛下的家事，不必问外人。”李勣一句话，点醒了梦中人。家事，何需外人插嘴，高宗最终拿定了主意，义无反顾地废掉了王皇后，立武则天为皇后。很多时候，决定历史走向的，往往是一句话。
