Il palazzo è in stile rinascimentale. La chiesa di Santa Teresa si trova a pochi passi dal palazzo. La sede del governo, il convento, il seminario e la sede distaccata del Palazzo di Giustizia hanno tutti utilizzato questo palazzo. Il nome fu preso dal committente, Simone Caccetta. Simone Caccetta era un importante mercante.

La facciata principale del palazzo è composta da elementi di dispirazione gotica con elementi della tradizione romanica pugliese, su cui spiccano le finestre bifore e trifora.