杨国忠没有喝过多少墨水，杨慎矜就不同，这个人满腹经纶，而又不拘泥史书，是个王佐之才。又有杨国忠和杨贵妃背后支持。一旦得了气候，必然会取代自己。

李林甫对权位日盛的杨慎矜，起了猜忌之心。每每下朝后，在月堂思谋对策。要想搞垮杨慎矜，必须找到他的缺点。这个人不贪污不受贿，能力出众，工作勤勉，从来没有大的过错。他没有缺点和把柄。李林甫百思不得其计。

杨慎矜与王鉷的父亲王瑨是表兄弟，王鉷是他的表侄，小的时候常在一起玩耍。王鉷入御史台任侍御史，杨慎矜任御史台主事，也有推荐援引之力。等到王鉷迁中丞，杨慎矝虽与王鉷同在朝班，仍像对待子辈那样经常直呼其名。王鉷自恃与李林甫交好，心中渐渐不平。

杨慎矜性情爽快，向来与王鉷亲密，曾经对王鉷解说谶书，又与还俗僧人史敬忠交往，说他有学业。后来，杨慎矜夺取王鉷的职田，又在背后辱骂王鉷，并诋毁其母。王鉷不堪其辱。两人由是交恶。

王鉷素受杨慎矜轻鄙，对他怀恨在心，每常在老狐狸面前，诋毁杨慎矜。李林甫知道王鉷与杨慎矜有矛盾，就诱说王鉷构陷他。王鉷于是伺机诬陷杨慎矝。

李林甫将其视为心腹，并引荐王鉷为御史中丞。王鉷尝到巴结李相国的甜头，格外卖命帮助打击政敌。他苦思一计。李林甫抚背称善。

杨慎矜勾结杨国忠的流言，在皇帝耳边不时飞来飞去。

“你以为皇帝，真的信任你麽？他这是郑庄公杀弟弟的阴谋。就等着你犯错呢。只要你有贪心，或者犯错，或者勾结边将，只要落下一条，立马灭族。”

“三郎，你我都是隋公后人，本应情同手足。但是，同朝为官，显贵招人嫉妒。咱们日后还是公事公办，不要私下来往。”

“我以忠贞待皇帝。武宗是一代明主，决不会杀我。李林甫，也拿清官没有法子。”

“金杯共汝饮，白刃不相扰。”杨门因为杨贵妃的关系，不可能都被打击。最好的办法，便是笼络杨国忠，打击杨慎矜党羽。武宗便提醒李林甫盯住杨慎矜。

天宝六年，杨慎矜到达温汤，正在吃饭，忽然看见一个身长丈余的鬼，穿红衣戴头巾，站立在门扇后面。杨慎矜大声斥责，很长时间没有消失，用热汤泼洒后才消失。

少陵原杨慎矜的父亲墓封的区域内，草人都流血。杨慎矜令僧人史敬思祈福消灾，自己则梦见，在退朝之后，被戴上刑具，身体赤裸，站在荆棘之间，像这样几十天流血不止。

杨慎矜夜不能寐，就向史敬忠讨主意。

史敬忠对杨慎矜说，天下将乱，劝杨慎矜避居临汝，购买田产为将来做打算。时逢婢女明珠获罪，杨慎矜准备杀掉她。

史敬忠说：“不要杀，卖掉她可以换回十头牛，每年可以耕田十顷。”

杨慎矜听从他的建议。这个婢女被卖到杨贵妃的姐姐家，因而得以见到皇帝。

杨慎矜有一个美貌的侍婢叫明珠。史敬忠屡屡对她眉目传情，于是杨慎矜就把这名侍婢赠送。当他们的车辆路过贵妃姐姐的楼下时，贵妃的姐姐邀请史敬忠上楼，并要留下明珠，史敬忠不敢拒绝。

至次日，贵妃的姐姐入宫，并带上了明珠。

武宗喜欢她的善辩聪明，将她留在宫中，因此得以侍奉左右。武宗见到明珠十分奇怪，拿言询问。明珠如实回答。

武宗问：“他很缺钱花麽？”

婢女回答说：“本来自己快死了，幸好得到史敬忠的解救，得以免死。”

武宗听闻史敬忠有法术，就问其所为。

明珠便将史敬忠夜里拜访杨慎矜，坐在庭院中推演星象变化，直到半夜才离去的事情，告诉了武宗，同时又禀告驱邪之事。

武宗认为杨慎矜与妖人往来，十分厌恶，只是当时怒而不发。

王鉷打算试探武宗的态度。上朝奏事，多次称引杨慎矜。

武宗薄有愠色说：“是你的亲戚麽？不要同他私下往来。”

王鉷因此确认皇帝十分憎恨他，后来见到杨慎矜，傲慢不以礼相待。不久，王鉷对李林甫编造杨慎矝的罪状，说他是隋家子孙，心中计划克复隋室，所以藏有谶书，与坏人来往，谈论国家的吉凶。

天宝六年，十一月，武宗在骊山华清宫游幸。眼看时机成熟，王鉷便在老狐狸的挑拨下，制造谋反的流言，称杨慎矜是隋炀帝玄孙，勾结术士，密藏谶书，图谋恢复隋朝。这个流言，不包括杨国忠，符合形势的需要。

武宗本就对杨家十分忌惮。当初提拔杨慎矜倒不完全是出于信任和才干，存着试探杨慎矜，“暴风雨要来，就让它早点来”的意图。得到禀报后，果然中计，立即将杨慎矜关押在尚书省，下诏刑部尚书萧隐之、大理卿李道邃、少卿杨璹、殿中侍御史卢铉，共同审问；又派遣京兆士曹吉温，前往东都洛阳，收捕杨慎矜兄少府少监杨慎馀，弟洛阳令杨慎名等一起审问；又令吉温在汝州抓捕史敬忠，押往皇帝外出停驻的地方。

先令卢铉收太府少卿张瑄于会昌驿，关押起来进行审问。张瑄不肯回答。卢铉千方百计拷打审问没有结果，就命令负责侦缉逮捕的小吏枷锁张瑄，用手拉住脚，把木头按在双脚之间，打击枷柄向前，拉长了身体数尺，腰细的快要断绝，眼鼻都流出血，称之为“驴驹拔撅”。张瑄秉性刚烈，备受煎熬，最终还是不肯伏罪。

皇帝又派殿中侍御史卢铉与御史崔器，入城搜查杨慎矜的住宅，并无所获。老狐狸便授意卢璇，拷打其小妾韩珠，并在竖柜顶安放暗盒，从衣袖中拿出谶书装进去，辱骂着拿给杨慎矜看。

杨慎矜自知被栽赃陷害，百口无辩，恐慌说：“以前没见过，今日突然见到。这是我的命，看来我要死勒。”