乐史《太平寰宇记》引《永嘉记》：“此山（罗浮山）秦时从海中浮来”。《永嘉县地名志》：“罗浮山，在江北岸，去城五里，一名密罗山，今名山平头”。此山在瓯江和楠溪江汇合处的西北侧，有两座小山，相距180余公尺。早年，两山犹如两艘巨舰，浮在江中，四周水波粼粼，颠簸摇曳 。岁月流逝，沧海桑田，这里形成一片冲积平原，将两山连在一起，遂成今日状况。
北面的山称章山，海拔51米。山呈长形，酷似一条自东向西爬行的蛇，故又名蛇山。据明万历《温州府志》载，章山上原有一亭，名“襟江亭”，以唐王勃《滕王阁序》中“襟三江而带五湖”一句而取名。襟江亭踞山俯江，气势雄伟，因年代久远，早已荡然无存。南面的山称罗山，又名合山，海拔66.4米。因山形极像一只自西向东爬行的龟，故又称龟山。山北侧半腰有杨府庙，稍远处有鼋亭和将军殿遗址。山北麓有一口井，清泉终年不涸。
唐张又新《罗浮山》诗云：“江北重峦积翠浓，绮霞遥映碧芙蓉。不知来后沧溟上，减却瀛洲第几峰。”