Este edificio que data del primer tercio del siglo XVI, en sus inicios fue casa del primer obispo de la Nueva España, Fray Juan de Zumárraga, quién lo convirtió en el Real Hospital del Amor de Dios, sitio donde se atendía a los enfermos de «bubas» (sífilis). El edificio dejó de funcionar como hospital en 1788, instalándose ahí en 1791 la Real Academia de las Nobles Artes de San Carlos de la Nueva España.

Las Galerías de Arte datan de la segunda mitad del siglo XIX, atribuyéndose las pinturas que se encuentran en los plafones a Ramón Sagredo. Los trabajos de intervención realizados consistieron principalmente en consolidación de muros por medio de remamposteo de grietas con materiales similares a los existentes, esto con el fin de restituir su capacidad de carga, realizándose en algunos casos inyecciones de baja presión, así mismo se realizó la reintegración de aplanados en muros, retiro de entrepisos (terrados y duela), integración de armaduras metálicas para apoyo de pisos nuevos de duela, reintegración de yeserías, así como trabajos diversos de restauración de puertas y plafones de madera, como reintegración de elementos de cantera.