这当然是皇帝指使的，否则许敬宗胆子再大，也不敢跟人说皇帝要废皇后啊。结果呢，这个皇帝的第三招，还是被长孙无忌给挡了回来。《资治通鉴》卷一九九的记载是：“许敬宗亦数劝无忌，无忌厉色折之。”长孙无忌拒绝同意皇帝废皇后，对于三个人有三种方式回绝。对于皇帝，是不接话，使皇帝无法说下去。对于杨氏，他的表现是“不许”。对于许敬宗的表态最为激烈，是“厉色折之”，声色俱厉地把许敬宗教训了一顿。看来，长孙无忌还是根据来说情人的身份不同，采取了不同的对策，但是方向是一致的，就是回绝。许敬宗被训斥一顿，心中那个恨啊，后来终于找到机会实施报复，那是后话。
皇帝要换皇后，用了三种不同办法去说服长孙无忌，最终都撞了墙。皇帝发动的第一阶段进攻，全面失败。大家也许会想，为什么一定要通过长孙无忌，皇帝自己决定不就成了吗？第一，皇帝显然还不想跟自己的舅舅闹翻。第二，唐朝的政治，凡事都是讲规矩的。皇帝发出的命令，必须有宰相大臣签字，必须通过中书省、门下省。如果大臣不同意，皇帝没有办法独自发出命令。而废立皇后，是要经过正式的皇帝命令来宣布的，不能由皇帝自己口头宣布。这就是为什么高宗必须找长孙无忌。长孙无忌是朝廷真正掌控大权的人，皇帝知道，舅舅不点头，别人谁也不会配合。
那么，长孙无忌不同意换皇后，他究竟想的是什么呢？
长孙无忌的态度、立场我们是知道的，但是他坚持这个观点的理据我们是不知道的。如果推测，大约不外是两条：其一，皇后母仪天下，不可轻易废黜，否则有损国家形象；其二，皇帝不能太任性，这个事情不能听皇帝的。前者，是国家利益原则，坚持有利于国家。后者是权力本位原则，坚持则有利于长孙继续控制权力。或者二据其一，或者两个因素都存在。但是，后来当高宗坚决地确立武则天为皇后的时候，我们没有看到长孙无忌的反对行动，那么，权力本位的观念，恐怕还是很重要的。
也许，在长孙无忌看来，唐高宗这个小毛孩子还是太小啊，碰碰壁就会学乖的。长孙无忌如此志得意满，根本不重视高宗的诉求。那么高宗怎么办呢？
在皇后问题上做文章，我们已经说过，这对于高宗而言是相对有利的。皇后毕竟是皇帝的妻子，皇帝应该拥有更高的发言权。皇后属于后宫，不是外朝，长孙无忌的控制相对薄弱。此外，这个事情有武昭仪的感情因素，因此更有动力。但是，总体上大家一定要注意，这后宫其实也是长孙无忌铁围的一部分。
废王立武是永徽后期最重要的事件，也是唐朝历史上的大事。这个事件的背后，有深厚的社会背景，同时也是一个严重的政治问题，即皇帝与长孙无忌的权力争夺。在长孙无忌，是要保住现有的权力和权力结构，在高宗皇帝，是打破长孙无忌的垄断，夺回法理上属于自己的权力。
面对长孙无忌，高宗决定战斗到底。于是到了永徽六年（655）的时候，双方斗争进入第二阶段。