最后没办法，赵桓只得让道。

林灵素赢得了一时的风光，也正因此而得罪了太子。

于是赵桓就假借林灵素兴道灭佛，在徽宗面前告他的状。

一时间，是道士法力高还是和尚法力高，成了太子和林灵素所代表的两大政治派系争执的焦点。

当时宋徽宗极崇尚道教，他甚至自封为“教主道君皇帝”。在林灵素的撺掇怂恿下，整个大宋朝把全国的和尚全都改成了道士，所有的寺庙能拆的拆除，不能拆除的，也全都改成了道观。和尚不能幸免，据说尼姑也跟着遭殃，全改信道教，变成了道姑。

林灵素利用宋徽宗的宠信，建议宋徽宗开展“夷夏之辩”，甚至建议将佛刹改为宫观，释迦改为天尊，菩萨改为大士，罗汉改尊者，和尚为德士，皆留发顶冠执简。

这下林灵素把佛门得罪狠了，佛门高僧就通过太子，要与林灵素斗法。这次斗法被当时的一个名叫赵鼎的官员记录下来：

一日皇太子上殿奏曰：林灵素妖术，愿陛下诛之。臣每日念他自知法力广大，不可思议，如陛下不信，乞宣法师等皆见在京，可与林灵素斗法，别其邪正。

徽宗皇帝准许后，太子把十四名高僧集合到凝神殿与林灵素斗法，宋徽宗还召集文武大臣前来观看。

太子要林灵素先施法。

林灵素来到法台中央，向着天空喷了一口水。那口水顿时化成五色云彩，云彩上飞舞上百只仙鹤，绕着大殿飞翔，在那些仙鹤中，还有一条五爪金龙伴飞。

那群和尚见了，纷纷嗤之以鼻，说林灵素不过施的幻术而已。

“妖道林灵素，这些不过是纸龙纸鹤罢了，看我们使出神通，让这些龙鹤瞬间坠地，化为纸片。”和尚说。

太子听了和尚的话，非常高兴，对众大臣说：“如果真是这样，林灵素就是一个妖道，使用妖术蛊惑皇上，应当斩首。”

林灵素听了，微微一笑，只见他手持拂尘，对着那十四个高僧一挥。其中有十二个和尚顿时张不开嘴巴了。只剩下两个和尚还能张嘴。

那十二个被林灵素使了法术的和尚顿时面如死灰。