Il primo impianto dell’edificio risale al Medioevo. A cavallo tra l’XI e il XII secolo il principe normanno di Turi, Tommaso da Frassineto, fece erigere qui il suo maniero. Fu rimaneggiato prima nel XIV secolo con gli Svevi e successivamente nel XV secolo con gli Angioini. Nel 1547, giunse a Turi il nuovo feudatario Francesco Moles, originario di Gerona, in Spagna, che trasformò l’edificio in un palazzo-fortezza, impiantandovi nuove torri e ampliandolo con altri corpi di fabbrica. Nella seconda metà del XVIII secolo, il feudo passò a Ottavio Venusio da Matera il quale intervenne profondamente sull’aspetto del palazzo, parzialmente demolito e ricostruito. L’antico maniero assunse così l’aspetto attuale di una lussuosa residenza barocca. In piazza Colapietro si apre il monumentale ingresso con balconate e finestroni riccamente decorati. Attualmente il complesso è stato trasformato in una lussuosa struttura ricettiva e sala ricevimenti.