พระปรางค์วัดเขารักษ์ สร้างเมื่อปี พ.ศ. ๒๔๒๙ ตั้งอยู่บนยอดเขารักษ์ ไม่ทราบประวัติการสร้างที่แน่ชัด สันนิษฐานจากรูปแบบสถาปัตยกรรมได้ว่าน่าจะสร้างขึ้นในสมัยอยุธยาตอนต้น คือ เป็นเจดีย์ทรงปรางค์ขนาดใหญ่มีความสูง ๙.๘๐เมตร องค์ปรางค์อยู่ในผังย่อมุมโดยแต่ละมุมจะมีมุมประธานซึ่งมีขนาดใหญ่กว่ามุมประกอบอีก ๔ มุม ซึ่งเป็นระเบียบงานช่างที่มักปรากฏอยู่กับพระปรางค์สมัยอยุธยาตอนต้นเป็นส่วนใหญ่ นอกจากนี้รอบอุโบสถยังมีใบเสมาหินชนวนขนาดใหญ่ปักล้อมรอบ ซึ่งเป็นที่นิยมในสมัยอยุธยาตอนต้นเช่นกัน

ปีงบประมาณ พ.ศ. ๒๕๖๑ กรมศิลปากรได้รับการจัดสรรงบประมาณเพื่อบูรณะ พระปรางค์วัดเขารักษ์โดยได้ขุดตรวจสอบทางโบราณคดีเพื่อหาระดับพื้นในสมัยแรก และสกัดโครงสร้างคอนกรีตเดิมที่ครอบพระปรางค์ทั้งหมดออก อีกทั้ง ซ่อมเสริมความมั่นคงภายใน และฉาบผิวขัดปูนตำ องค์พระปรางค์ทั้งหมด พร้อมทั้งใส่คานคอนกรีตรัดรอบฐานรากพระปรางค์ เพื่อปฏิสังขรณ์ให้พระปรางค์มีความแข็งแรงและรักษารูปแบบศิลปกรรมของเดิมไว้ให้ได้มากที่สุด