1961年初春，突患肝炎的林绍纲被安排到八大处休养。作协党组书记邵荃麟夫妇、文学评论家侯金镜也在此休养。一日三餐，同桌进餐。伙食很好，早餐有牛奶和鸡蛋。作家们每天上午读书写作，下午自由活动，散步聊天。

当时外国作家经常点名求见赵树理，但林绍纲邀请他时总是被拒绝。一次，他终于答应了，穿着布鞋、胡子拉碴地随团出访，住宾馆非硬板床不睡，只好让他锁上门睡地板。别人在台上讲话，他不爱听了就去洗手抽烟，边哼哼山西上党梆子。看晚会总是睡着，甚至打起呼噜。

《人社部：坚决防范、及时化解各类欠薪矛盾纠纷》1978年，经中央批示，中国文联和中国作协正式恢复。林绍纲被负责筹备的秘书长张僖从北京图书馆要了回来，进入新成立的作协对外联络部。不久后，对外联络部设欧美和亚非分部，林绍纲分管亚非部。