古代万象山指的是现在烈士墓这座山。因宋代参知政事何澹在山上建了一座万象楼而得名。元朝筑城时把这座山圏进城内，成了城中最高山，镇城之山。后来万象楼其地被改为万象庵,后又改为崇福寺，有元代大书法家赵孟頫写的《处州万象山崇福寺记碑》和明代屠隆撰文、布衣林芝书《重建万象山崇福寺记》名闻遐迩，今碑拓尚存，原碑下落不明。崇福寺历代为处州著名寺庙。清代咸丰年间太平军三次攻克丽水，崇福寺连同清代造的秦淮海祠被烧毁。后来同治年间曾重建。上世纪抗日战争期间又遭日寇飞机轰炸。现在寺庙旧址的烈士墓和纪念碑是上世纪六十年代丽水县人民政府做的。

古代万象山多松树。有诗云：“青山佳气郁葱葱，爽籁松生满壑风。”太平军占据期间山上松树被砍光。后来同治年间新来的处州知府清安重新栽松。到上世纪五十年代，洞天楼上面松树有两人合抱大。1958年大办钢铁砍掉时，树龄近一百年。

民国年间曾在万象山建设中山公园。造了洞天楼小洋楼和六也亭，至今还在。但未发现有那时种的树。

六十年代初，万象山和西山（今烟雨楼这座山）都成了光头山。客观上与青田做瓯江电站丽水要成为库区有关。三年困难时期，居民上山种玉米、地瓜度荒，山上不见一棵树，有一把泥土的地方都种上了地瓜、玉米。

现在山上的树是1962年以后种的。

万象山重新植树造林始于1963年，起因与当时浙江省委书记江华的批评有关。当时任丽水县委书记的梁如志后来告诉我，1962年省委书记江华来到丽水，汽车在桃山过渡时，看见江边万象山光秃秃的，一棵树都没有。到了碧湖就对他说，我们有些共产党人还不如和尚，和尚都会在寺庙旁边种上树。刚才过渡时江边那些山就在你们县委旁边，山上光光的，一棵树都没有。梁如志说：那山上都是石头，不好种树。江华书记说：“石头可以打洞挑上泥种嘛！”就这样第二年开始在万象山大规模种树。后来还专门建立万象山林场负责培育管理。本人曾多次参加机关组织的义务植树活动，上山种过树。最早种的大部分是松树。

1978年万象山和西山合在一起建设万象山公园。将当年崇福寺的菜园改造成蓄水池，在上面造了九曲桥和得月亭。同时在山顶造了烟雨楼，沿江建起望江亭、小括苍亭、放翁亭。

1981年“4.4”大风，万象山遭受巨大破坏。江边望江亭、烟雨亭被掀翻。1800多松树被吹倒、折断。更让人想不到的还有到上世纪九零年代，山上的松树已形成特色景观的时候，还出现500多株14公分以上的松树被滥伐。近年加上松材线虫病危害，现在万象山松树成了凤毛麟角，巳被大量自然繁殖的瘦长樟树所替代。2021.5. 11