Hoy día destinado a equipamiento cultural y sala de exposiciones, en época medieval perteneció a los infantes de Granada, hermanastros del rey Boabdil. Residencia temporal de la monja alférez. En los siguientes siglos pasó por diferentes manos nobles, hasta que en 1980 fue adquirido por el ayuntamiento de Valladolid y remodelado.