Si mencionamos el actual edificio del Banco de España y lo allí se que guarda muchos seguro que en lo primero que piensan es en el oro que hay en su caja fuerte, o en la propia caja fuerte y en sus medidas de seguridad, y seguramente les vendrán a su cabeza varias historias, más o menos ciertas, que se cuentan sobre este lugar.
La construcción del Palacio de Buenavista data del siglo XVI, cuando el arzobispo de Toledo, D. Gaspar de Quiroga regala la propiedad al rey Felipe II, con ocasión del traslado de la Corte desde Valladolid a Madrid.