做太子妃的当年就怀孕生下长子，老公做了皇帝仍然被收拾得这么服贴，应该说，韦氏的驯夫术
李显的一席话，充分地向老婆一家表了忠心，却也十足地把裴炎吓了个魂飞魄散。为了避免皇帝“说到做到”，更为了自己得罪皇帝性命堪虞，裴炎将这场见面会实况转播给了武太后。武则天听后大怒，发觉这个表面窝囊的儿子原来不但刚愎自用，而且还娶了媳妇忘了娘，全不如想象中那样听话，立即下定了废李显的决心。
二月六日这天，在武则天的安排下，裴炎与中书侍郎刘袆之、羽林将军程务挺、张虔勖等人率重兵入宫，当着百官的面宣布了太后懿旨，废李显为庐陵王，幽于别所。李显猝不及防，只会大喊：“我有何罪？”武则天看着这个没出息的儿子不紧不慢地回答：“你想要将天下送给韦玄贞，这还不是大罪吗？”
李显哑口无言，只能低头认输。
废帝第二天，李显的同胞弟弟李旦被按在了皇帝的座位上，改元文明。
第三天，李显和韦氏年仅两岁的长子李重照被废为庶人，正在做宰相梦的韦玄贞被流放钦州。
三月五日，李显的二哥、废太子李贤在流放地巴州自杀，时年30岁。
全部料理完了之后，武则天终于有时间去处置三儿子李显了。四月二十二日，闯下塌天大祸的“庐陵王”李显和妻子韦氏领着一堆年幼的儿女、一群哭哭啼啼的姬妾，垂头丧气地离开了曾经呼风唤雨的长安城，在重兵的“护送”下，前往流放地房州（今湖北房县）。二十六日，武则天又改变主意，下令将李显一行转押均州（今湖北十堰市）。
一切摆平之后，武则天心情大佳，却不料大不吉利的彗星竟于此时出现，而且足足在西北天际挂了三十三天。为了趋吉避凶，她于当年九月六日宣布大赦天下，并改元“光宅”。——就这样，公元684年成了三个不同年号的“元年”，而且都只元了这么一年：第二年，由于徐敬业被平，武则天再次改年号为“垂拱”。
垂拱元年三月十一日，武则天又忽然想起了李显一家，下令将他们重新安置，又从均州迁回房州。——根据史书记载，韦氏的最后一个孩子、李显最小的女儿就是降生在去往房州的路途上的。不过究竟是嗣圣元年的四月二十二日至二十六日这一次，还是垂拱元年三月十一日后的这一趟，就没有确切的说法了。不过无论是哪一种说法，这个小女婴都是在父母最惊惶的时候降临人世的。而且此时的李显夫妇已经陷于穷途末路的窘迫，当刚降生的婴儿急切需要一点保暖的被褥或衣物的时候，他们都无处找寻。慌乱中，李显只能将自己身上穿着的衣服脱下来包裹孩子。这个女婴因此有了她的第一个名字：裹儿。她就是未来的安乐公主。
（常言道，生易养难，父母尊长对儿孙的感情也必须在亲历抚养过程中才能真正培养得起来。由于皇族父母基本是只管生不管养，儿孙往往只是他们寻欢作乐的副产品、前途的保障或利用的工具，难得有真正的人伦感情，于是往往对儿孙还不如对左右奴婢，动辄就喊打喊杀毫不怜惜。李显的母亲武则天就是最现成的例子。然而李裹儿的情形却与大多数的皇家子女不同，她的孕育过程，是韦氏三次生育经历中最凄凉的一次，恐怕也是拥有四子八女的中宗李显唯一亲眼全程目睹自己的孩子如何降生的一次。由于他们此时的处境与当初已经是云泥之别，比寻常百姓尚且不如，李裹儿的养育也就只能由他们夫妻勉力亲为。夫妻俩因此都对这个小女儿百般宠爱。）