传说三过家门而不入的上古治水英雄大禹，一生行迹中的四件大事：封禅、娶亲、计功、归葬都发生在会稽山，《山海经·海经第八卷·海内东经》曰：“会稽山在大楚南”。秦始皇亦“上会稽，祭大禹”。很多人认为绍兴城南6公里会稽山即《山海经》中会稽山，是大禹娶妻、封禅之地，大禹陵所在。
春秋时期的吴、越两国为了融入华夏集团，称自己为周祖、大禹后人，浙江会稽山为勾践命名，史书中说越王勾践“封于会稽,以奉守禹之祀”的夏后帝少康庶子之苗裔，入越地被拥而为王，西汉收复闽越后，为巩固统治，正式命名为会稽山，祭禹，史料中亦多记载。
汉以后这里成为佛道胜地，山中的阳明洞天为道家第十洞天，香炉峰为佛教胜地，至更正语序今香火旺盛。
顾恺之说会稽山“千岩竟秀，万壑争流，草木蒙笼其上，若云兴霞蔚”。晋朝贵族王羲之、谢安等定居绍兴。
南朝诗人王藉咏会稽山的诗句“蝉噪林逾静，鸟鸣山更幽”传诵千古。
