Το νησί της Ήμερης Γραμπούσας, αποτέλεσε σημαντικό πειρατικό καταφύγιο. Το επιβλητικό ενετικό κάστρο του, που κατασκευάστηκε το 1579, αλλά καταστράφηκε από κεραυνό το 1588 που χτύπησε την μπαρουταποθήκη. Ξαναχτίστηκε το 1630.
Το κάστρο περιλαμβάνει έναν ναό του 16ου αιώνα, αρχικά αφιερωμένο στον Ευαγγελισμό και μετέπειτα στην Παναγία Κλεφτρίνα. Οι πειρατές κατέφευγαν εκεί για να ζητήσουν συγχώρεση για τις επιδρομές τους, πιστεύοντας ότι η θεϊκή δύναμη ήταν ανίκητη. Ως ένδειξη ευγνωμοσύνης, αφιέρωναν το ένα δέκατο της λείας τους στην εκκλησία.
Στις 2 Αυγούστου 1824, Σφακιανοί οι λεγόμενοι «καλησπέρηδες» κατέλαβαν τη Γραμπούσα, την πρώτη ελεύθερη κρητική γη. Το κάστρο έγινε ορμητήριο αγωνιστών και κέντρο πειρατείας, Τουρκικών αλλά και ευρωπαϊκών καραβιών, ενισχύοντας την Ελληνική Επανάσταση. Μόνο τον Σεπτέμβριο και τον Οκτώβριο του 1827 οι πειρατές της Γραμπούσας λεηλάτησαν 81 πλοία.
Οι πειρατικές ενέργειες εξόργισαν τις ευρωπαϊκές δυνάμεις, οι οποίες με συμφωνία της ελληνικής κυβέρνησης επιτέθηκαν και κατέλαβαν τη Γραμπούσα το 1828. Οι πειρατές συνελήφθησαν, εγκαταστάθηκε πολυεθνική φρουρά και το κάστρο κατεδαφίστηκε.
