会稽民众之大规模浮海南来，在卢循、徐道覆率众南下广州前即已发生。《晋书》谓成帝时，“东土多赋役，百姓乃从海道入广州，刺史邓岳大开鼓铸，诸夷因此知造兵器。”(49)邓岳任广州刺史，当在咸和五年至建元元年间(330-343)；东土，当即指会稽郡；咸和、咸康、建元间从海道南入广州的东土百姓，主要是会稽郡的沿海居民。其南来广州之后，当即落脚于南海郡东部沿海地区。咸和六年，分南海郡东境滨海地带置东官郡，领宝安、安怀、兴宁、海丰、海安等五县，(50)当即为了安置从海道南来的会稽沿海百姓。《晋书·葛洪传》说葛洪南来广州，邓岳表为东官太守，葛洪辞不就，邓岳乃以洪侄望为记室参军，(51)显然是希望利用葛氏的威望抚治南来的会稽百姓。会稽沿海百姓之南来，且正安置在博罗、增城县境内罗浮山以东的沿海地区，应是徐道覆所说罗浮山乃自会稽漂移而来的历史背景。
    文献所记传说由海上漂移而来的罗浮山或浮山，在东南沿海地区并不止博罗、增城县境内的罗浮山一处，还有永嘉罗浮山、高凉浮山。有的山或洲屿，虽然并无罗浮山或浮山之名，但传说也是从会稽等处漂移而来或者飞来的，如闽县飞山与白马山、潮阳白屿洲等。显然，山体或洲屿本不会漂移，“漂移的罗浮山”之类故事隐喻的应当是滨海地域人群沿着海岸的移动；各地传说不同，折射出不同沿海人群移动的历史故事。
    1.永嘉罗浮山。《太平寰宇记》记罗浮山“在(温)州北十八里，高三十丈”，并引谢灵运《永嘉记》云：“此山秦时从海中浮来。”(52)谢灵运于刘宋永初三年(422)出为永嘉太守，《永嘉记》即其在永嘉郡守任上所撰。谢灵运所记，应是当地故老相传。《史记·越王句践世家》记越王无强为楚所杀之后，“而越以此散，诸族子争立，或为王，或为君，滨于江南海上，服朝于楚。后七世，至闽君摇，佐诸侯平秦。汉高帝复以摇为越王，以奉越后。东越，闽君，皆其后也。”(53)这里的“江南”，当指浙江水以南；“海上”，当释为滨海地带。盖无强之后，越人退守浙江以南的滨海地域，其中之一支，可能自海上南来，上岸后居于瓯江口。永嘉罗浮山乃秦时从海中浮来的传说，或者就是此一历史事实的遗存。
    2.闽县飞山、白马山。《太平寰宇记》福州闽县“昇山”条：“在州西北十四里。越王勾践时，一夜从会稽飞来。西南地号道士洞，旧名飞山。临海人任敦于此升仙，其迹犹存。”其“长乐山”条：“在州东六里。越时有神仙骑白马来此，因名白马山。”(54)二山距海均较远，无法浮海而至，故传说乃称其为飞来，或神仙骑白马而来，其背后反映的也当如永嘉罗浮山一样，是战国以来越人沿海南徙的故事。临海人任敦于此升仙的故事，则反映了其与会稽(临海郡乃吴太平二年分会稽郡南部置)间的联系。
    3.潮阳县白屿洲。《太平寰宇记》引《郡国志》曰：“潮阳白屿洲，亦自海浮来，后会稽人姓丁识之，云曾藏铜熨斗于洲上，往取，果得。”据《宋书·州郡志》，潮阳县置于晋安帝义熙九年(413)，此条记载当出其后。会稽人丁姓藏斗取斗，暗示此洲是从会稽漂移而来的。与潮阳县同时所置，还有义安郡及所领绥安、海宁、义招等县，其中义招县，原注云：“以东官五营立。”《太平寰宇记》引刘宋沈怀远《南越志》云：
    义安郡有义昭县，昔流人营也。义熙九年立为县，永初元年移上郡之西。有海宁县，在郡之东六里，西接东官县界……又绥安县，在郡之东一千里，海道也。东接泉州晋安县界，北连山数千，日月蔽藏。昔建德伐木以为舟船之处。又云：绥山县北有连山，昔越王建德伐木为船，其大千石，以童男女三百人牵之，既而船俱坠于潭，时闻附船者有唱唤督进之声，往往有青牛驰回船侧。(55)
    则义昭县初置时当在义安郡之东，滨海；海宁县在郡东，亦滨海。绥安县，在义安郡东海道千余里，一般定在今福建云霄县。潮阳、义昭、海宁、绥安四县及义安郡之置，正是在卢循、徐道覆之乱平定后，义昭县又是在流人营基础上设置，很可能是为安置卢循、徐道覆徒众而立。南越王建德使人伐木为船，以童男女牵之的说法，应当源自秦始皇遣方士徐福将童男女数千人入海，求蓬莱神仙不得，遂留居夷洲及澶洲的传说。
    4.高凉浮山。《太平寰宇记》载：“其山高七百尺，尧时洪水泛溢，此山独浮，人居山上，复免沈垫，人呼为浮山。”(56)按：宋高州茂名县乃唐潘州省废后合并原潘州所属茂名、南巴、潘水三县而成。唐潘州乃永徽元年(650)割高州茂名、南巴、毛山(后改潘水)三县置，唐高州则为隋高凉郡所改，其地乃是隋唐之际着名的岭南豪酋冯盎的根据地。《新唐书·冯盎传》云：
    盎，字明达，高州良德人，本北燕冯弘裔孙。弘不能以国下魏，亡奔高丽，遣子业以三百人浮海归晋。弘已灭，业留番禺，至孙融，事梁为罗州刺史。子宝，聘越大姓洗氏女为妻，遂为首领，授本郡太守，至盎三世矣。(57)
    北燕冯氏的根据地在辽西龙城；冯弘往投高丽，事在北魏太延二年(436)。则冯业之浮海南来，并非归晋，只能是归宋。《新唐书·冯盎传》说冯氏南来后留居番禺，而《隋书·洗夫人传》则谓冯氏“因留于新会”，(58)当以后者为是。据《宋书·州郡志》，新会郡置于晋末元熙二年(420)，很可能也是卢循、徐道覆之乱平定后为安置沿海流民而新置的。《宋书》记新会郡领宋元、新熙、永昌、始成、招集、盆允、新夷、封平、封乐、初宾、义宁、始康等十二县。其“宋元令”注称：“文帝元嘉九年，割南海、新会、新宁三郡界上新民，立宋安、新熙、永昌、始成、招集五县。”“封乐令”原注：“元嘉十二年，以盆允、新夷二县界归化民立。”(59)凡此诸县，显然都是为了安置“新民”、“归化民”而设立的。而这些“新民”、“归化民”中，可能就有相当部分属于卢亭户之类的水上人家。冯氏本身文明程度较高，浮海远来，航海经验丰富，故入居其地后，乃成为当地人群的首领。高凉郡(宋茂名县)浮山的传说，很可能折射了冯氏之浮海南来；其所以上溯至尧遭洪水之时，似乎暗示了冯氏原居地之遥远及其北方中原背景。