Ces jardins s'étendent de la sortie de la Rauda jusqu'à l'esplanade où se trouve la Tour des Dames (Torre de las Damas). Au même endroit se trouvaient les palais royaux, distribués aussi de façon échelonnée, et plus tard, les Chambres de l'Empereur Charles Quint (Habitaciones del Emperador Carlos V) y furent construites. 

Pendant la période arabe il y avait de nombreux bâtiments des magnats qui habitaient au tour du Palais Royal (Palacio Real), parmi lesquels un des plus importants est la Tour des Dames (Torre de las Damas).