Los Jardines de la Galera ocupan el espacio contiguo a la fortificación árabe situado entre la torre de Espantaperros o de la Atalaya y la unión con la muralla abaluartada del siglo XVII. Este es el sector con muros más antiguos conservados de la alcazaba. Tuvo diversas funciones a lo largo de su historia: carcel, hospicio, escuela, almacén de granos y hasta ayuntamiento.