Vennero costruiti nei primi anni del '500 per volere di Ludovico Gonzaga, figlio di Gianfrancesco, sotto la direzione di Andrea Bertazzolo da Acquanegra, padre del più famoso Gabriele e molto probabilmente aggiunti in un secondo tempo al fabbricato retrostante, con la funzione di strada coperta.