L’edificio occupa l’area tra Piazza Colonna e Corso Nasini ed è un notevole esempio di architettura civile del pieno Rinascimento nell’area amiatina. Nella Loggia esterna, sono murati stemmi ed iscrizioni che ricordano personaggi di Castel del Piano che hanno ricoperto cariche pubbliche nel corso del XVI e XVII secolo. In un angolo della Loggia si trova la Cappellina dedicata alla Santissima Concezione, la cui costruzione risale probabilmente al XVII sec., in cui sono visibili tracce di una decorazione pittorica attribuibile all’ambito dei pittori della famiglia Nasini.

Dopo la famiglia Nerucci il palazzo passò alla famiglia Cerboni, quindi divenne proprietà pubblica, residenza dei Capitani di Giustizia, poi sede del Comune di Castel del Piano e successivamente del Liceo. 

Dopo un importante intervento di restauro, il Palazzo è stato destinato alle attività culturali: oltre alle raccolte d’arte, ospita la sede dei “Cardellini del Fontanino”, gruppo folk polifonico famoso a livello nazionale e internazionale e, all’ultimo piano, la Scuola Comunale di Musica “Italo Fazzi”.