天变迭兴。荆公自以为是，复倡为三不足之说：“天变不足畏，人言不足恤，祖宗之法不足守。”因他性子执拗，主意一定，佛菩萨也劝他不转，人皆呼为拗相公。文彦博、韩琦许多名臣，先夸佳说好的，到此也自悔失言。一个个上表争论，不听，辞官而去。自此持新法益坚。祖制纷更，万民失业。

一日，爱子王方病疽而死，荆公痛思之甚。招天下高僧，设七七四十九日斋醮，荐度亡灵，荆公亲自行香拜表。其日，第四十九日斋醮已完，漏下四鼓，荆公焚香送佛，忽然昏倒于拜毡之上。左右呼唤不醒。到五更，如梦初觉。口中道：“诧异！诧异！”左右扶进中门。吴国夫人命丫鬟接入内寝，问其缘故。荆公眼中垂泪道：“适才昏愦之时，恍恍忽忽到一个去处，如大官府之状，府门尚闭。见吾儿王方荷巨枷约重百斤，力殊不胜，蓬首垢面，流血满体，立于门外，对我哭诉其苦，道：‘阴司以儿父久居高位，不思行善，专一任性执拗，行青苗等新法，蠢国害民，怨气腾天，儿不幸阳禄先尽，受罪极重，非斋醮可解。父亲宜及蚤回头，休得贪恋富贵，……’说犹未毕，府中开门吆喝，惊醒回来。”夫人道：“‘宁可信其有，不可信其无。’妾亦闻外面人言籍籍，归怨相公。相公何不急流勇退？早去一日，也省了一日的咒署。”荆公从夫人之言，一连十来道表章，告病辞职。天子风闻外边公论，亦有厌倦之意，遂从其请，以使相判江宁府。故宋时，凡宰相解位，都要带个外任的职衔，到那地方资禄养老，不必管事。荆公想江宁乃金陵古迹之地，六朝帝王之都，江山秀丽，人物繁华，足可安居，甚是得意。夫人临行，尽出房中钗钏衣饰之类，及所藏宝玩，约数千金，布施各庵院寺观打醮焚香，以资亡儿王方冥福。择日辞朝起身，百官设饯送行。荆公托病，都不相见。府中有一亲吏，姓江名居，甚会答应。荆公只带此一人，与僮仆随家眷同行。

东京至金陵都有水路，荆公不用官船，微服而行，驾一小艇，由黄河溯流而下。将次开船，荆公唤江居及众僮仆分付：“我虽宰相，今已挂冠而归。凡一路马头歇船之处，有问我何姓何名何官何职，汝等但言过往游客，切莫对他说实话，恐惊动所在官府，前来迎送，或起夫防护，骚扰居民不便。若或泄漏风声，必是汝等需索地方常例，诈害民财。吾若知之，必皆重责。”众人都道：“谨领钧旨。”江居禀道：“相公白龙鱼服，隐姓潜名，倘或途中小辈不识高低，有毁谤相公者，何以处之？”