高宗李治于龙朔四年正月，再改年号为麟德元年，令众臣制定泰山封神礼仪。

这时李义府权势逆，公然收钱卖官。

给他送线多的人能买到工资高、事务清闲的官职。

李义府以权谋私，疯狂敛财。

他儿子女婿依仗他权势，横行霸道。

他在皇帝面前讨好献媚，在外肆意枉法、大施官威。

百官对他心怀恐惧，没人敢对皇上他不好。

高宗李治对此略有所知，当面告诫他：

“听你儿子女婿横行枉法，我都替你掩盖，你该对他们严加管教。”

李义府听了勃然变色：

“谁告诉的陛下？”

李治：

“你知道戒免就行！

不必追问我是怎么知道的！”

李义府也不谢罪，昂着头就走了。

李治越发厌恶他。

不久，李义府请术士杜元纪望运势、看风水。

杜元纪：

“您的府宅有冤狱造成的怨气，你得猛存钱！

你攒钱两千万，才能把对您不利的冤气压住。”

李义府对杜大师深信不疑，更加急切地搜刮钱财。

他老娘死去，他还趁哭丧他娘之时，穿上平民衣服和杜元纪出城。

时人都认为李义府窥测灾异，图谋不轨。

这时，李义府又向长孙无忌的孙子长孙延索取七百贯钱，授给他司津监的官职。

结果这事被右金吾仓曹参军杨行颖向皇帝告发。

663年四月，李治将李义府下狱，会刑部尚书刘祥道联合御史台、大理寺，共同审讯。