ถ้ำเขาย้อย ตั้งอยู่ทางทิศตะวันออกของเขาย้อย ในถ้ำนี้มีพระพุทธรูปใหญ่น้อยหลายปางประดิษฐานอยู่ คล้ายกับถ้ำเขาหลวงและวัดถ้ำเขาบันไดอิฐที่อยู่ในเขตอำเภอเมืองเพชรบุรี