趙南星祠堂位于高邑縣東關趙家街路南。南北長二十六點八米，寬八點四五米，有瓦房兩排。北房為過廳門口一間，兩側耳室各一間；南房為布瓦硬上頂正殿。正殿與門樓高墻相連，中間成一小方院。院內植松柏，并置一圓形小花池。祠堂門前有一點五米高的圍墻，裝有鐵柵欄門。
趙南星祠堂原稱趙家宗祠，是明天啟年間吏部尚書趙南星的宗祠，初建于明洪武年間。清嘉慶元年，改平頂為布瓦硬山頂。民國十三年，省政府曾撥款重修。一九八二年，石家莊地區文物處撥款四千元資助修繕。一九八三年縣政府將北房過廳東側耳室的磚墻及北房房頂全部更新。對南方即正殿硬損處進行補修，所有的門窯及房檐下的木板油漆刷新，使其修茸如初。