1957年，荣毅仁首次出任政府要职。
当时的国务院副总理陈毅以老市长身份为荣毅仁助选上海副市长，他称赞荣毅仁“既爱国又有本领，应当选为国家领导人”。
不久，荣毅仁作为上海民族资本家的总代表顺利当选上海市长。
那时十六七岁的荣智健已经是上海知名的“荣公子”，经常开一辆红色的Singer英式敞篷跑车，带朋友兜风，请朋友去国际饭店、红房子吃饭。
1959年，荣毅仁又担任了纺织工业部副部长。
接到任命后的荣毅仁，曾赋诗述怀，以“龙驹乘风追日月，挥戈卅（四十）年未为晚”的诗句，表达他能为振兴纺织工业出力的兴奋心情。
纺织部机关干部原来以为他最快也要过了国庆节才能履任，没想到仅隔３天，荣毅仁就来到了新中国的政治中心——北京，到部任职了。
在“文革”时，荣毅仁作为“资产阶级头面人物”首当其冲，成为红卫兵的专政对象，红卫兵疯狂对待过去的资本家，荣毅仁也备受折磨，常常被游街批斗，身心受到严重的摧残，根本谈不上去正常工作。
荣毅仁的右手食指被铁柱打断，妻子杨鉴清更是昏死过多次，连他们因患大脑炎而精神有障碍的四女儿智远也未能幸免。
全家人每天都在战战兢兢的生活着。
虽然“**”开始后不久,周恩来专门指示纺织部的人要注意保护荣毅仁，“荣毅仁一定要保护好，他是中国民族资产阶级的代表人物，在国际国内都有影响，一定要保护好”。
但随着形势的迅速发展,一些红卫兵很快就占据了荣毅仁的家，住宅被红卫兵搜查,瓷器、古玩等被砸毁,家具、家产被没收,荣智健的妹妹智婉趁外出拿报纸机会,向纺织部打了求救电话,纺织部闻讯后,派出几十人组成红卫兵赶到荣家,要求把荣毅仁交给他们纺织部的红卫兵批斗,这样纺织部成功地保护了荣毅仁一家。
但是,事情并未就此了事,荣毅仁还是受到了全国工商联的批斗,被勒令参加劳动。
年过半百的荣氏夫妇从未干过这种重活,没办法,只好听从安排。
荣毅仁夫妇不离不弃,携手共渡难关。
荣毅仁在此期间患了肝炎并引起眼底出血,由于耽误治疗,造成左眼失明。
左眼失明后，军代表责成其与时任全国工商联副主席的经叔平打扫卫生，洗刷厕所，荣干得很认真，自己掏钱买来盐酸，把马桶洗刷得干干净净。