Justo enfrente del Palacio de López, una manzana completa de casas restauradas de distintas épocas —de la colonia al art nouveau— funciona como centro cultural municipal. La Casa Viola, con techo de tejas a dos aguas y vigas de madera, es la joya del conjunto y alberga el Museo Memoria de la Ciudad, con mapas, fotos y objetos que cuentan cómo creció Asunción. También funcionan el Museo del Arpa Paraguaya, el Museo José Asunción Flores, la Biblioteca Municipal Augusto Roa Bastos, salas de exposición y un auditorio. Sus patios interiores son un oasis de sombra en pleno centro.

La Casa Viola data de 1750–1758 y es la construcción más antigua del conjunto; la Casa Castelví es de 1804 y la Casa Ballario, neoclásica, de 1901. Salvado de la demolición, el conjunto se restauró desde 1991 por iniciativa municipal, con el artista Carlos Colombino como primer director; la última casa se habilitó en junio de 1996. El auditorio Federico García Lorca se inauguró en 1999.