Con la morte senza eredi dell'ultimo Acquaviva D'Argona, il feudo di Casamassima passò al Regio Fisco. L'ebreo portoghese, Michele Vaaz, lo acquistò nel 1608. Il nuovo feudatario, già nominato duca di Mola, stabilì la sua dimora nel preesistente castello medievale, trasformato per l’occasione in un'elegante dimora nobiliare. Particolarmente elegante il portale principale intorno al quale corrono "bugne a punta di diamante", pietre sporgenti appuntite come la pietra preziosa. Questo motivo decorativo si attesta in diversi edifici nobiliari in Terra di Bari, tra cui i palazzi De Matteis a Corato e Tupputi a Bisceglie.