Dépendant du Conseil municipal de Lorca, le noyau de population appelé “Maisons des Aluns d’Almazarrón”, dans lequel s’est fondé le Château de Los Vélez et la maison du Marquis de Villena, s’est organisé peu à peu. Les deux maisons s’installent dans la zone à partir des dernières décennies du XVe siècle, après la concession du privilège d’exploitation des mines d’alun par Enrique IV aux deux marquisats. Le château a un plan irrégulier, occupant une surface de quelques 3.000 m2 pouvant être divisé en deux zones bien différenciées: la forteresse proprement dite et la cour des armes. Ses murs, d’un mètre de grosseur, s’appuient directement su la roche mère. Selon les témoignages écrits par González Simancas, qui a visité le château en 1903, la structure interne d’origine du château conserve des vestiges de différents pièces, des dallages, des portes avec des linteaux de calcaire façonné, des décorations réalisées à base de stucs rouges, des éléments décoratifs, des pans, des constructions souterraines et autres détails aujourd’hui disparus ou cachés sous la pente escarpée d’une vieille mine, ouverte à l’intérieur de l’enceinte.

Le château devait servir de demeure occasionnelle au Marquis de Los Vélez lors de ses visites sporadiques et comme logement quotidien à son gouverneur dans la ville. L’enceinte hébergeait également une petite garnison chargée de défendre la côte des attaques berbères. Pendant ces menaces, le château protégeait également la population de Mazarrón, composée fondamentalement des travailleurs des mines.

Le Château de Los Vélez de Mazarrón est déclaré Bien d’Intérêt Culturel.