L’aspetto attuale del Palazzo Ducale Frisari risale ai primi decenni del Settecento esso fu edificato sul sito del preesistente castello di epoca Aragonese e modificato nei secoli dalle famiglie feudatarie che lo possedettero. Alla fine del XIX secolo,il palazzo passò alla famiglia del Duca Guarini di Poggiardo che lo possiede e lo abita tuttora per via del matrimonio tra Donna Teresa primogenita ed ultima erede del Duca Frisari e Don Carlo Guarini Duca di Poggiardo nel 1894 .
Il prospetto settecentesco presenta evidenti rimaneggiamenti neoclassici di fine Ottocento e si caratterizza per l’ampio portone d’ingresso sovrastato da una balconata e per lo stemma dei duchi Frisari. Il palazzo, con pianta quadrangolare, si sviluppa attorno ad una corte interna dove si affacciano al piano terra i locali che ospitavano i magazzini, le scuderia, e nel seminterrato voltato a botte un frantoio ed una cantina. Dall’androne di ingresso attraverso uno scalone monumentale, sormontato dallo stemma Guarini, si accede ai piani superiori occupati dagli ambienti di rappresentanza e di residenza.
Annessa al palazzo è la cappella gentilizia dedicata a Santa Barbara collegata direttamente al piano nobile. Ad aula unica, la cappella è arricchita da un altare in pietra leccese.