三年勞動過程中，鄧小平夫婦一天也沒有缺勤過。開始，工人們都懷著好奇的心情打量著這位聲名顯赫的老人，后來逐漸發(fā)現(xiàn)他很慈祥也很勤勞，不像有人批斗時把他說得跟兇神一樣。工人們逐漸對二位老人產(chǎn)生了好感與同情，車間的工人們對老鄧夫婦都很關(guān)心。為了防止“造反派”危及他們的人身安全，車間工人們還特地在廠圍墻開了個旁門，修了條小道一直通到步校，以免與外人接觸。鄧小平夫婦從這里走了三年，后來這條小路就叫“鄧小平小道”，以紀(jì)念這位偉人的這段坎坷經(jīng)歷。

鄧小平夫婦每日上午在工廠勞動半天，下午在步校校園里，拓出一片菜地，種上白菜、胡豆、辣椒、絲瓜、苦瓜等各色蔬菜。這樣三位老人也可以補(bǔ)充一些食品。他們當(dāng)時的工資已被扣發(fā)，只留給一點(diǎn)生活費(fèi)，三位老人年齡加起來已超過了200歲，而且鄧小平要負(fù)責(zé)一些拖地、劈柴、砸煤之類的活，卓琳則要洗衣和打掃衛(wèi)生，而且卓琳還患有高血壓病，常常臥床不起。這時鄧小平還得細(xì)心照料卓琳，而年已古稀的繼母則還要做三個人的飯，因此，補(bǔ)充一點(diǎn)食品是很有必要的。

值得慶幸的是，鄧小平被允許可以把他的藏書帶來，使這位睿智的老人可以用書本知識來填補(bǔ)被監(jiān)禁的寂寞。鄧小平同妻子抓緊時間，除了讀了大量馬列著作外，還讀了《二十四史》以及中外許多的書籍，這些書是以前在繁忙的工作中無暇涉及的。他們生活很單調(diào)，但也很有規(guī)律，上午去工廠勞動幾個小時，中午回來吃飯聽新聞廣播，下午在園中耕作，間或讀書看報。

1969年11月下旬的一天，鄧小平的監(jiān)管秘書根據(jù)“上頭”的指示要鄧小平寫一份一個月來勞動和學(xué)習(xí)的心得體會。鄧小平沉默了一會兒說：“我準(zhǔn)備給毛主席、黨中央寫信。”看到那個監(jiān)管秘書尷尬的神情，鄧小平又隨和地補(bǔ)充了一句：“你也盡到了你的責(zé)任?！?

鄧小平夫婦離開北京到江西后，唯一的一塊心病，不是留戀中南海的舊居和美麗的首都，而是那些親骨肉，那些成年的和沒成年的，連一聲告別的話都沒說，便匆匆各奔東西了。鄧小平第四個孩子鄧榕遠(yuǎn)在陜西省插隊勞動，本來約好了12月到北京見面，誰知他們突然被林彪一個“一號令”，就遷到江西來了呢？

一天，鄧小平主動找了他的監(jiān)管秘書，婉轉(zhuǎn)地表達(dá)了希望把鄧榕在北京見面改在南昌，還用略帶自我批評的口吻說：“說溫情主義嘛有點(diǎn)，自己的孩子有點(diǎn)想，可能是落后思想……”一位戎馬生涯幾十年的共和國元勛，道出自己想同孩子團(tuán)聚的心情，還作了自我批評，聽了真叫人心酸。

可是過了一個多月，仍然遲遲沒有回答。卓琳又想到了大學(xué)畢業(yè)后遲遲不給分配還老挨整的大女兒鄧林，要求把鄧林接到這里。監(jiān)管秘書向上面請示后，得到的答復(fù)是：“子女可以來這里，但江西省革委會不好出面聯(lián)系?！?

這無疑是給鄧小平夫婦開了一張空頭支票。江西省革委會不給聯(lián)系，自己又是管制對象，連通信、行動的自由都沒有，怎么進(jìn)行聯(lián)系？不聯(lián)系，孩子能來這里嗎？自從鄧小平被打倒以后，他們子女所在學(xué)校里的“紅衛(wèi)兵”，都像發(fā)了瘋似的，把對“走資派”的怒火，都發(fā)泄到他們子女的身上，游街、批斗、戴高帽子、人身攻擊、毒打，“十八般兵器”通通使出來了，這些鄧小平夫婦是知道的，而如今，他們想讓孩子們來這里享受片刻的寧靜都不可能了。古人曾說“莫生帝王家”，而他們是新中國一代元勛的子女，為什么也要經(jīng)受這樣的摧殘？真是人妖顛倒的世界。

1971年，殘廢的鄧樸方被準(zhǔn)許到三位老人身邊。從此，他們還要照料這個殘廢的兒子，為兒子洗澡擦身這一類最重的活就落在了鄧小平身上。后來，政治環(huán)境稍微寬松一些，使他們漂泊四方的子女可以在短期內(nèi)來看望他們。從1971年起，他們幾個子女索性都搬來與父母同住，監(jiān)禁地成了他們家庭聚首的地方。

1971年11月5日，鄧小平夫婦被通知去工廠參加會議，這是自鄧小平被監(jiān)禁以來首次讓他參加政治活動，這已昭示著某種轉(zhuǎn)機(jī)。因?yàn)?971年10月1日國慶節(jié)沒有在天安門廣場游行，這在建國以來還是第一次。林彪的名字也有好幾個星期沒有在報上出現(xiàn)，這對那個如日中天的“第一接班人”來說，是不尋常的。果然，坐在家里等候父母歸來的孩子們從父母的表情中看出一定發(fā)生了重大事情。由于當(dāng)時看守人員在場，卓琳就把女兒拉到廚房，在女兒手心中悄悄地寫了四個字：“林彪死了”。直到看守人員吃晚飯去了，鄧小平夫婦才詳細(xì)地對子女?dāng)⑹隽藙倓倧膹S里聽到的情況：毛主席“最親密的戰(zhàn)友，最好的學(xué)生，最理想的接班人，活學(xué)活用毛主席著作的光輝榜樣”林彪，原來是個資產(chǎn)階級的投機(jī)分子、陰謀家、反革命兩面派、變節(jié)者和叛徒，他拼湊反黨集團(tuán)，妄圖搞武裝奪權(quán)，竟然企圖炸毀毛主席乘坐的列車加害毛主席，陰謀敗露后倉皇出逃，終于摔死在溫都爾汗。鄧小平當(dāng)時顯得很興奮和激動，他只說了一句話：“林彪不亡，天理不容?！编囆∑搅⒓唇o中央委員會寫了一封信，表示堅決擁護(hù)關(guān)于林彪反革命集團(tuán)的決議。

鄧小平一方面要遏止“四人幫”的猖狂活動，另一方面要使整個中國從瘡痍中恢復(fù)過來

林彪摔死后，他在江西的追隨者也被撤換，鄧小平一家的日子好過了許多。1972年1月10日，在陳毅元帥的追悼會上，毛澤東說陳毅是個好同志，并說鄧小平和劉少奇的問題不一樣，屬于人民內(nèi)部矛盾。鄧小平聽到這個講話后，寫信給毛澤東表示愿意為黨為國家為人民再做些事情。毛澤東對鄧小平是了解的，1968年黨的八屆十二中全會上林彪、江青一伙極力主張開除鄧小平黨籍，毛澤東極力反對。正如鄧小平后來自己說的：“林彪和’四人幫‘想整死我，但他們未遂，是毛主席保護(hù)了我。”

1972年秋天，鄧小平和妻子被安排去江西革命圣地井岡山參觀，并且重訪了瑞金，參觀了景德鎮(zhèn)瓷器廠，鄧小平知道，他復(fù)出的日子不遠(yuǎn)了。