1926年，林去病、葉子午受中共溫州獨(dú)立支部指派回家鄉(xiāng)瑞安發(fā)展黨組織。他們到瑞安后，先后吸收進(jìn)步知識青年戴義、徐澤民、郭演九、陳明達(dá)4人入黨，并于同年11月在瑞安城區(qū)小東門外兩面河?xùn)|北側(cè)的話桑樓成立了中共瑞安小組，這是瑞安地區(qū)最早建立的中共黨組織，歸中共溫州獨(dú)立支部領(lǐng)導(dǎo)。此后，林去病等人進(jìn)一步在城區(qū)和農(nóng)村發(fā)展黨員，先后建立城區(qū)、莘塍、肇平垟和仙降黨支部。1927年2月，瑞安黨組織擴(kuò)大后，中共瑞安小組改建為中共瑞安特別支部，其辦公地點(diǎn)仍設(shè)在話桑樓。話桑樓成為瑞安黨組織的重要活動場所。
中共瑞安小組成立遺址話桑樓，又名飛云閣,位于瑞安市玉海街道小東門街，建于清光緒二十四年（1898年），由居官退閑的黃體芳等人興建。此閣面闊五間（14.7米），進(jìn)深七架（11.5米），共兩層，占地面積約200平方米，建筑面積約300平方米，建筑顯示晚清時(shí)期的特色。解放后，話桑樓被原瑞安縣人民政府列為第一批文物保護(hù)單位，后曾被瑞安制藥廠占用，損壞程度嚴(yán)重， 2001年因建南門變電所需要，話桑樓被拆除。
信息來源：中共溫州市委黨史研究室