救了海瑞一命的徐階后來(lái)又提拔他到江南當(dāng)官。海瑞上任后，發(fā)現(xiàn)徐階家族在當(dāng)?shù)卣继?4 萬(wàn)畝，民怨甚重，于是要求徐階退田。徐階退了一些，海瑞并不滿意，弄得徐階很是尷尬，后只得退了一半的田地，兩個(gè)兒子被判充軍，親弟弟被治罪。海瑞后來(lái)又遭彈劾，沒有人再保他，只得被迫去職，在家賦閑十余年。再?gòu)?fù)官時(shí)，朝廷給的都不過(guò)是些虛銜了。

海瑞的家庭生活大致是這樣的：海瑞由寡母帶大，與母親感情甚深，34歲還與母親同睡一床，一生清貧的海瑞只在為母親祝壽時(shí)才買了兩斤肉，并因此轟動(dòng)一方。海瑞一生娶有一妻三妾，但婆媳不和，妻妾相爭(zhēng)，有兩妾同日自縊，還導(dǎo)致海瑞被懷疑謀殺。海瑞又先后將剩余的一妻一妾休棄，逐出家門。海瑞育有一兒一女，兒子死得不明不白，女兒則是因?yàn)槌粤藙e人送的餅被海瑞嚴(yán)責(zé)而絕食七日活活餓死。

關(guān)于為官之道，一代名臣曾國(guó)藩總結(jié)說(shuō)：“世事紛繁，人心不一，官場(chǎng)復(fù)雜，尤為微妙。識(shí)見固要閎深，行事更需委婉，曲曲折折，迂回而進(jìn)。當(dāng)行則行，當(dāng)止則止，萬(wàn)不可呈才使氣，只求一時(shí)痛快?！边@說(shuō)的正是情商！相比之下，海瑞的情商根本不及格。對(duì)他的不近人情，有人懷疑他有道德潔癖，也有人歸因于心理殘疾。不管怎樣，為官之人，家沒齊，國(guó)沒治，徒有道德也枉然，明代思想家李贄這樣評(píng)價(jià)他：“先生如萬(wàn)年青草，可以傲霜雪而不可充棟梁。”