元代建。主要建筑在中轴线上。有山门、二进殿宇和4块石碑。山门与第一进殿之间，左边有明正统五年(1440)四月八日碑记一块，额篆书“敕赐灵鹫禅寺”。第二进殿是正殿，无梁建筑。第二进殿后搪墙两旁，立辽、元碑各一块。辽碑为大康四年(1078)四月十五日立。元碑为“大元至正七年(1347)三月”立。寺东配殿南侧有正统五年(1440)四月八日立“敕赐灵鹫禅寺兴建记”碑一块。旁有小石狮一尊。寺后台地上有圆通殿一座。在谷积山中，还有古塔三座。分别立在三座山上，铃档塔建于明代。鞭塔建于辽代，东塔也称和尚塔。明成化十五年(1479)所建，山上还有张公、华公太监墓。