Περί τον 13ο αιώνα, όταν οι Φράγκοι κατέλαβαν την Πελοπόννησο (μετά την Δ’ Σταυροφορία), ίδρυσαν το Πριγκιπάτο της Αχαΐας. Το Κατάκολο, λόγω του λιμανιού του, έγινε διοικητικό και στρατηγικό σημείο.
Οι Φράγκοι έκτισαν στην κορυφή του λόφου το κάστρο Μποβουάρ (Beauvoir), που μετέπειτα ονομάστηκε Ποντικόκαστρο. Το όνομα ίσως προέρχεται από τη λέξη “ποντίκι” λόγω της μορφολογίας του ή από τη λέξη “pontus” (λατ. για «θάλασσα»).
Το κάστρο πέρασε σταδιακά στα χέρια των Ενετών και κατόπιν των Οθωμανών. Κατά περιόδους, αποτέλεσε σημείο συγκρούσεων μεταξύ ευρωπαϊκών δυνάμεων και ντόπιων πληθυσμών.