屬于寧鎮山脈的香山，位于高資境內，山麓有一座始建于唐朝的寺廟，這座寺廟雖沒有靈谷寺等寺廟的名氣大，卻很不一般，它的存在證明了高資在唐朝時的繁盛。它就是香山寺。歷史由來唐朝時期，高資因良好的港口位置而成為江淮要沖，“舟車之輕從，郵置之經繹，漕運之轉輸，軍期之傳送，未有不由此途者。”有兩位唐朝名人在高資留下了足跡，一位是大將尉遲敬德，他出資修建了東方橋；一位是唐朝的賢臣魏徵，他在玄武門事變后來到高資的山林中隱居，唐太宗李世民親赴高資請魏徵到朝廷擔任要職，魏徵折服于李世民招賢的誠意，特在高資的一處地方修建了接駕亭，此處因此被命名為唐駕莊。
唐朝時信佛之人眾多，在人來人往的高資港附近建造一座寺廟是眾望所歸。一天，下了船的過客們突然發現青翠的香山山麓增加了一座黃墻碧瓦的寺廟，信佛之人興奮地走向這座古香山寺，拜佛祈福求好運。