許敬宗這時(shí)又在一旁煽風(fēng)點(diǎn)火道：“這樣的官員，實(shí)在是罪不容誅??！”

這下徹底鬧翻了，本來(lái)高宗想大治他，后來(lái)武則天想到這畢竟是一位新起用的官員，而且本來(lái)也沒(méi)有什么事情，罪不至死，于是只是下令免了他的宰相一職，貶到虔（今江西贛州）做刺史罷了。而且，他的兩個(gè)兒子也被免了官。這一件莊稼引發(fā)的糾紛讓許圉師付出了不相匹配的代價(jià)。

還有一個(gè)人，武則天其實(shí)一直以來(lái)想要收拾的，是那個(gè)為她辦過(guò)許多事情的李義府。這個(gè)人本來(lái)可以穩(wěn)穩(wěn)地坐好他的地兒，可是他太不老實(shí)了，武則天知道這是個(gè)不折不扣的小人，一直到她實(shí)在不能再容忍下去了，李義府被徹底治罪。

龍朔三年（663年）的時(shí)候，李義府正做右相典選，這是一個(gè)專門選拔官員的活兒，可以說(shuō)是一個(gè)肥得流油的差事，他倒也會(huì)鉆營(yíng)，在其位“謀”其事，專門做些買官賣官的事兒，對(duì)于那些經(jīng)他手的官員選拔，不看政績(jī)，只看金錢，一時(shí)間弄得大臣頗為不滿，百姓怨聲載道。這之前武則天和高宗都警告過(guò)他，可是他仍不往心里去，權(quán)作左耳聽(tīng)右耳出。這讓高宗頗為生氣。

李義府素來(lái)人品不怎么樣，也得罪了不少人，就在這時(shí)候，有人瞧準(zhǔn)了，整治他的時(shí)機(jī)到來(lái)了。

有一個(gè)自稱為杜元紀(jì)的方士，這一天來(lái)到李義府的府上求見(jiàn)，神秘兮兮地對(duì)他說(shuō)：“你的府第有獄氣啊，如果想消除這災(zāi)禍，得用20萬(wàn)緡來(lái)抵消。”

本來(lái)李義府對(duì)這話是將信將疑的，可是看著杜元紀(jì)自信的樣子，就寧可信其有不可信其無(wú)。這一來(lái)，他還真的想方設(shè)法四處斂財(cái)，越發(fā)的放縱無(wú)度了。