1978年，经中央批示，中国文联和中国作协正式恢复。林绍纲被负责筹备的秘书长张僖从北京图书馆要了回来，进入新成立的作协对外联络部。不久后，对外联络部设欧美和亚非分部，林绍纲分管亚非部。

他生性诙谐，个性外向不设防，宴请外宾时，谈完正事之后喜欢讲故事。长相俊美的单身汉杨朔总成为严文井开玩笑的对象，如果席间坐着日本作家，他就会请人给杨朔介绍日本女孩做妻子，总是弄得杨朔很尴尬。

《北京：元旦春节原则上不办庙会等节日文化活动》北洋军阀时期，这里是北宁铁路局局长的私宅，日本占领时期成了日本宪兵队司令部，抗战胜利后又成为国民党“励志社”的所在地。因为当年铁路局局长在这里自杀，这座大院被人称为北京“四大凶宅”之一。