Construit par la famille Suardi au milieu du XIVe siècle, il est ensuite devenu la propriété du Consortium de la Miséricorde et de la famille Avogadro.
En 1477, la façade a été décorée de fresques réalisées par Donato Bramante, dont les quelques fragments ont été conservés dans le Salone delle Capriate du Palazzo della Ragione.
Le palais a subi de nombreuses modifications et fonctions au fil du temps.