Langa piata St Oronzo se ridica un castel, care a fost construit de catre Carol al V-lea, in 1539. Proiectul a fost realizat de catre arhitectul Gian Giacomo dell'Acaya, iar pentru relizarea castelului au fost demolate doua edificii: Capela Sfintei Treimi si Manastirea benedictina a ordinului Sfintei Cruci. Castelul nu a avut doar functii defensive, in secolul al XVIII-una din camerele sale fiind folosita ca sala de teatru. Din 1870 pana in 1979 a fost folosit in scopuri militare. In zilele noastre castelul este sediul pentru afaceri culturale al localitatii Lecce, un decor perfect pentru toate initiativele culturale care au loc aici.

Vizitatorii vor ramane fermecati de ornamentele delicate ale interioarelor, cu capiteluri si vitralii. Camerele de la etaj sunt sustinute de coloane impunatoare din piatra. O legenda legata de castel spune ca familia Orsini dl Balzo, care a detinut castelul in secolul al XIV-lea, tinea un urs alb in santul castelului. Acest animal era un simbol al statutului dar, in acelasi timp, baga spaima in cei care eventual ar fi vrut sa prade castelul.