长子孙安平回忆说：“但小孩子们是有感觉的，或多或少对父亲的冤枉知道一点，心中总为父亲的遭遇叫屈。有时候看到父亲想到旧日的部属受到不好的对待，或想到过去一些不公平的事情，总是涨红了脸，不说话，我们就觉察到他很难过。”
孙立人老年得子，对他们虽疼爱有加，但管教却丝毫不放松。他每天为孩子补习功课，无论国语、英语还是数学，他都能讲解，有时比老师讲的还清楚。在他的悉心调教下，长女孙中平和幺女孙太平考取清华大学，长子孙安平考取中原理工学院，次子孙天平考取辅仁大学。
四个孩子上大学，每年开学交学费，是家里的一大难事。孙立人的堂妹孙敬婉回忆说：“二哥脾气很犟，非到山穷水尽，绝不会让人帮忙。有一天，他的大儿子要进大学学费没着落，二哥迫不得已，才打电话给我，要我帮忙，我知道他一定是没办法了，才会开口的。”
1974年，长女孙中平由清华毕业，父女希望能一起参加毕业典礼。但上头觉得敏感，孙立人未能前往，成为遗憾。1959年孙立人的亲哥哥孙同人去世时，孙立人也同样受阻未能前往，只好看着哥哥送的砚台痛哭。
到了1979年，长子安平和幺女太平同时从清华毕业，孙立人再度申请参加毕业典礼，终获许可，但同时上头与他约法三章：不许上台说话，不准带花，不准与任何人交谈。孙立人如此参加过典礼后，在笔记本上写道：有理无处讲，有冤无处申。
四、孙立人结束了长达33年的幽禁生活，重获自由。有记者采访孙立人对“平反”一事有何感想时。孙立人立刻反驳“从未反过，何平之有”！
1983年5月，孙立人自清华大学毕业满60周年，虽未能前往，但台湾清华大学派杨觉民教授登门赠送纪念金牌。杨觉民随后发表一篇文章，讲述孙立人近况，这是孙立人被软禁28年来第一次公开见诸报道。
上世纪80年代是台湾社会巨变的关键时期，政治气氛也愈加缓和。1984年，台北动物园为庆祝大象林旺(此象系抗战胜利后由孙立人的新1军带回的战利品)60岁生日，邀请当年参加中印缅作战的老兵出席，这些孙立人的老部属由此开始了聚会，关注孙立人的处境。
1986年，《孙立人事件始末记》一书正式出版，首次详细叙述孙立人案的全过程，引起舆论广泛关注。1987年7月14日，蒋经国发布“总统令”，台湾地区自1987年7月15日零时起解除戒严。
政治气候转暖，让孙立人的1日属感到给老长官翻案的时机到了。以原新1军参谋长舒适存为首的十位将军发起组织了“印缅远征军联谊会”，为孙立人平反而努力奔走。
1988年1月13日，蒋经国逝世。政治空气进一步活跃起来。2月，孙立人的家人联系《自立晚报》记者李文邦到孙家访谈，孙立人案真相随即发表。自此，“孙立人案”成为媒体报刊关注的焦点新闻，要求恢复孙立人清白和荣誉，公布“监察院”五人小组调查报告的社会呼声和压力越来越大。
3月20日和27日，“国防部长”郑为元两度亲往台中拜访孙立人将军，表示今后将军有行动和言论的充分自由，可以到任何地方，见任何朋友。自此，孙立人结束了长达33年的幽禁生活，重获自由。有记者采访孙立人对“平反”一事有何感想时，孙立人立刻反驳“从未反过，何平之有”！
远在海外的长女孙中平得知这一喜讯，脱口而出埋在心底多年的话：“我终于可以自由自在、痛痛快快和爸爸妈妈通越洋电话了。”
恢复自由后，民进党多次找他，让他出来揭露蒋介石的残暴，都被孙立人拒绝，孙立人并非不在意自己的遭遇，而因为蒋介石是长官，不肯言长官之过。
说到孙立人，大家心目中反映出的都是一位具有西方军人风度，个性硬朗的军人形象。这是由于孙立人毕业于西点军校，军事作风果决，外形气质十分干练之故。