三賢亭位于錄泉寺內大雄寶殿右側。亭周圍崖壁上有滴滴泉、涵息泉、活水泉，崖上披蘿掛蔓，樹蔭蔽日，竹影婆娑，四時泉水叮咚，幽靜清雅。相傳晉陶侃、唐元結、宋蘇軾常在此游憩。明嘉靖初年，知縣許穡卿建亭祀之，名曰“三賢亭”，指以上三位賢士。因亭周有三股泉水，故又俗名“三泉亭”。清兵部尚書、三江總督彭玉麟巡視長江水師時，曾于西山留畫老梅一幅，題詩多首。當代畫家關山月、端木夢錫來西山參觀時，盛贊彭玉麟所作的梅花為歷代畫梅中的佳品。邑人孟晉撰、周華琴書寫的對聯“悠游泉石知何日，常伴梅花不計年”，現刻于三賢亭內壁。