唐永徽六年（公元655年），在是否立武昭仪为皇后的斗争中，褚遂良与长孙无忌强烈反对任何废黜王皇后的企图。高宗召太尉长孙无忌、司空李绩、尚书左仆射于志宁以及褚遂良进官商议废后立后之事。褚遂良发了一通议论，给皇帝泼了一瓢冷水。而他的那种不要命的态度——将官笏放在台阶上，同时也把官帽摘下，叩头以致于流血——更使皇帝大为恼火，让士兵把他强行拉了出去。而坐在皇帝后边的武氏则恨不得立刻将他处死。在关键的时候，善于迎合旨意的李绩却说了一句话：“此乃陛下家事，不合问外人。”这一来既改变了唐王朝的命运，也将褚遂良等人推入了悲剧的深渊。

    太宗死后，传位高宗李治，在李治册封武曌皇后之前，大臣们有很多是坚决反对的，其中就以河南公兼大书法家褚遂良、赵公长孙无忌、英公徐世积等反应最为强烈。他们想力谏高宗，长孙无忌想第一个进去劝谏，因为李治决心已下，这个时候谁去阻挡他，无异于去送死。

    褚遂良拦住了他道：长孙太尉是国舅，如果事情不顺利，就会让皇上背上一个向舅舅发怒的名声，这不好！徐世积说：请让我李积先进去吧！褚遂良说：李司空，你是国家的重臣，一旦事情难办，就会让皇上背上一个治罪大臣的坏名声，这样不好。褚遂良我出自布衣，没有立下一点功勋，只不过受太宗宠遇，这才有了今天，况且今天正是我报答太宗的恩情之时，如果我不去，何以面对先帝的在天之灵啊！于是就第一个冲了进去，结果，褚遂良妙语连珠，竟然把高宗暂时说服了，册封皇后之事，就暂时束之高阁，武后入宫，也就后延了一段时间。