圣姑礁有一個美麗的傳說，相傳遠古時代有三位美麗的姑娘帶著一只狗和一只寶箱來到了洋山，并在此小憩。礁上的圣姑礁宮建于清朝，至今已經有170多年的歷史。不止如此，清光緒十四年，也就是1860年，湘潭雷玉春率劉長春等7名將軍巡海到大洋島時，有感大海之情，題了“群賢畢至”四個直書正楷大字。這些字每個高0.36米，寬0.28米，左落款12字，右落款32字。旁邊另有“海宇澄清”、“泛波”題字，每字高約0.5米，寬約0.4米，清光緒二十六年，右邊的落款由于自然分化，具體內容無從考查。該三處摩崖石刻皆列為縣級文物。南宋時，嵊泗列島就出現了烽火臺。南宋寶佑六年間（1258年），自寧波鎮海招寶山至嵊泗列島漫長的海道上，曾出現過烽燧12個，其中有8個在嵊泗列島境內，而在洋山的那一個就設在圣姑礁上面。