Als historisches Symbol von Pulsano thront es mit seinem Platz im Zentrum des Dorfes, seit jeher der Hauptbezugspunkt der Gemeinschaft. Die Burg von Pulsano wird allgemein als De Falconibus bezeichnet, nach dem Namen einer edlen Familie aus Bisceglie, die seit dem 14. Jahrhundert in dieser Gegend erschien. Der Bau begann 1430 unter der Leitung von Marino De Falconibus, einem prominenten Vertreter des Feudalismus von Tarent. Durch diese neue Festung, die auf einem bereits existierenden viereckigen Turm aus normannischer Zeit errichtet wurde, wurde das sogenannte Casale di Pulsano, offen und ungeschützt, in eine befestigte Siedlung verwandelt, umgeben und geschützt durch Mauern. Die De Falconibus residierten in der Burg bis 1560: Darunter befinden sich Personen wie Cosma, Raffaele und schließlich Giovanni Antonio, der einer der beiden tarantinischen Kapitäne war, die an der berüchtigten Schlacht von Otranto von 1480 teilnahmen.
Im Jahr 1617 erwarb die edle Familie Muscettola aus Neapel die Ländereien von Pulsano, Leporano, Torricella und Monacizzo. Francesco Muscettola, der zweite Fürst von Leporano von 1646 bis 1675, wohnte gemeinsam mit seiner zweiten Frau Lucrezia Caracciolo in der Burg und brachte bedeutende noch heute sichtbare Veränderungen ein. Dazu gehören u.a. der Bau eines neuen Zugangstores auf der Westseite, das heute noch existiert, und ein Verbindungsgang mit Balkon zwischen dem großen Saal des viereckigen Turms und dem Rest des Herrenhauses, verziert mit Kaminen und Fresken, von denen heute nur minimale geometrische und florale Spuren sowie eine biblische Szene, nämlich die Vertreibung von Adam und Eva aus dem Paradies und schließlich ein Christus Pantokrator in einem Medaillon, übrig geblieben sind.
Das Schloss, auf zwei Etagen erbaut, mit Umfassungsmauern aus Carparo und Zinnen auf den Mauern, besitzt zwei runde und drei quadratische Türme, wovon derjenige, der auf den heutigen Platz davor blickt, als Informations- und Kontrollzentrum für das örtliche Verteidigungssystem genutzt wurde und visuellen Kontakt zur benachbarten Torre Castelluccia am Strand hat. Im ersten Stock des genannten Hauptturms kann man ein Kreuzgewölbe mit Stichkappen und Bögen sehen, in dessen Mitte das Wappen der Barone De Falconibus eingraviert ist. Mit Nicolò Sergio, dem Sohn von Francesco, zogen die Muscettola in ihr neues großes Palais in Leporano um, und die Burg von Pulsano wurde daraufhin bis 1912 als Lebensmittellager genutzt, als die Gemeinde Pulsano sie für 12.000 Lire erwarb, um sie als Sitz der Gemeindeverwaltung zu nutzen. Nachdem sie jahrzehntelang Verwaltungs- und politischer Hauptsitz des Dorfes war, beherbergt das Gebäude heute das Büro für Touristeninformation (IAT), das Museum für ländliche Kultur sowie verschiedene kulturelle Veranstaltungen.