瑞云塔始建于明万历三十四年（1606年）冬，历时九年竣工。当时由叶向高之子、符丞叶成学与知县凌汉聊募捐鸠工，名匠李邦达负责设计施工。传说卜基之日，五色云自太保山来覆其上，烂漫辉映，故塔成后名为瑞云塔。塔高三十点六米，花岗石材质，仿木结构阁式，七层八角。塔座周长二十四米，塔基由八块青石围成，状似八条案几脚，承托着角形的莲花座。座上依次以长短不一的八块一组青石叠加而上。飞檐八角浮雕弥勒，飞檐下是步廊，八面围上石栏杆，石匾上镌“凌霄玉柱”四字。第二层至七层两面开门，每个门各有两尊守门神，全身披挂，威武雄壮，全塔共有二十六尊。每层塔吣还设有佛龛，雕有佛座像，后佛像被人盗走。各层都浮雕着武士、比丘、罗汉、花卉、飞禽走兽和佛教故事等图案，丰富多彩。全塔大小浮雕菩萨、力士、佛像等共四百多尊，最大的高一点五米，小的只有零点二米，千姿百态，形神兼备。塔檐八角均镇一尊石雕镇塔将军，全塔计五十六尊。

瑞云塔乃石工李邦达之杰作，极臻完善，有江南第一塔之称。1961年5月，列为福建省文物保护单位。