Il date du XIIe siècle, et fut réformé au XVe siècle puis modifié aux XVIIIe et XXe siècles. Actuellement, il conserve une grande partie de sa construction primitive. Cette construction, de base carrée, est d’origine almohade, et fut érigée au XIIe siècle. Elle fut la résidence des califes sévillans et le siège des gouverneurs chrétiens après que la ville fut tombée aux mains d’Alphonse X. Dans ses dépendances, magnifiquement restaurées, se trouvent la mosquée christianisée, sous l’invocation de Santa María la Real, les Bains Arabes, le Moulin à Huile et les beaux jardins.

La Camara Oscura est située dans la Tour du Palais de Villavicencio (XVII-XVIIIème siècles) dans l´Alcazar, le monument le plus ancien de la ville. La visite inclut l´entrée à deux expositions, la première sur les chambres noires existantes dans le monde, la deuxième est une exposition thématique sur Jerez, expliqué par un guide, en détaillant les monuments les plus significatifs.