此時出來一個叫鄭俠的看守城門的小官，他畫出了一張《流民圖》，連同一篇上書，運用關系以急件直達皇帝手中。書中說：“愿陛下開倉廩，賑貧乏，取有司掊克不道之政，一切罷去。冀下召和氣，上應天心，延萬姓垂死之命?！边€說：“旱由安石所致，去安石，天必雨?！辈⒄f如果十日不雨，“即乞斬臣宣德門外，以正欺君之罪”。宋神宗反覆觀圖，長吁數(shù)四，袖以入。是夕，寢不能寐。此時兩個太后也哭著對皇帝說：“安石亂天下。”于是皇帝就沒經王安石同意，“命開封停放免行錢”。

免行錢是王安石新法之一，宋代除向工商行戶收取商稅外，官府需要的物料人工，都向各行勒派，行戶不勝其苦。熙寧六年改為用錢折算，有錢的出錢，有力的出力，稱為“免行錢”。

皇帝又令司農寺再放常平倉糧米，暫停收交青苗錢和免役錢，暫罷方田法與保甲法。

王安石再次要求離去，既想改革又想安撫守舊勢力的皇帝，以手詔諭王安石：“欲處以師傅之官，留京師?！?/p>

但王安石還是堅持要走。他跟皇帝說，“欲臣且留京師以備顧問”，我也“誠不忍離左右”，但是，經過認真考慮，我以為，陛下現(xiàn)在已有可接受之人，推誠委任，足以助成圣治，所以我“義難以更留京師”。不過，王安石也同時跟皇帝說，“至于異時，或賜驅策”，“所不敢辭”。

在王安石已成守舊派的眾矢之的時，他的離去也許可以以退為進，為改革贏得生路。

皇上沒辦法，只好又賜手詔說：“繼得卿奏，以義所難處，欲得便郡休息。朕深體卿意，更不欲再三邀卿之留，已降制命，除卿知江寧，庶安心休息，以適所欲。朕體卿之誠，至矣，卿宜有以報之。手札具存，無或食言，從此浩然長往也?！?/p>

熙寧七年四月，王安石罷相，“以吏部尚書、觀文殿大學士，知江寧府”。宋神宗依王安石的推薦，任命韓絳、呂惠卿為正副宰相，繼續(xù)變法改革。

有一些人認為，王安石是在這次罷相回江寧的途中寫下那首《泊船瓜州》，“明月何時照我還”，意味著王安石憂心他何時再返政壇重新掌權。然而這種見解實在是更讓王安石孤獨寂寞了。

王安石在江寧只待了十個月，便再次被宋神宗召回了朝堂，實在是用誰都不如王安石。

普遍認為，王安石是在此次出江寧時寫下《泊船瓜州》，這個說法比較符合王安石的心態(tài)——他再次出山，更多的是留戀后土，而不是展望前途。春草年年綠，王孫歸不歸？歸！

王安石見到了皇帝，他拿出自己在江寧所寫的詩《六年》，送給這位對他一直念念不忘的年輕皇帝：

六年湖海老侵尋，千里歸來一寸心。

西望國門搔短發(fā)，九天宮闕五云深。

千里歸來一寸心，兩個人是君臣，卻更像是英雄惜英雄，知己憐知己。連宋神宗都自言：“自古之君臣，如朕與安石相知絕少?！?/p>

王安石回到汴京才一年，他深愛的兒子王雱去世，王安石大受打擊，從此更是對這片大宋的江山意興闌珊。他來到此世間，不過蜉蝣一世，石火光中，爭長兢短，幾何光陰？蝸牛角上，較雌論雄，許大世界？這些功名利祿終將付與歷史大潮的沉沙，唯讓他覺得此間溫暖的只是這一片親情而已。

而王雱不僅是王安石的愛子，更是變法的支持者和參與者。同時，他也是王安石文學上的知音。王雱為世間留詩不多，只一曲就驚艷：“相思只在，丁香枝上，豆蔻梢頭?！边@么優(yōu)秀的兒子去世，怎不讓王安石大慟？

有一天，王安石在一段墻壁上看見兒子王雱的遺墨，悲傷地寫下：

題永慶壁有雱遺墨數(shù)行

永慶招提墨數(shù)行，歲時風露每悽傷。

殘骸豈久人間世？故有情鐘未可忘。