Castel Schwanburg steht unterhalb der Festung Payersberg.
Schon im Jahre 1286 wurde die Schwanburg erwähnt, und zwar als “Haus in der Gaul”. Zwei Jahrhunderte später wurde die Burg renoviert und in ein Schmuckstück aus der Renaissance umgebaut. Ein wunderschöner Innenhof mit dekorativen Freitreppen wird umrahmt von Loggiengängen, in denen römische Steine eingemauert sind.
Ursprünglich waren die Herren von Boymont-Payersberg Besitzer der Burganlage, die sie dann in die Hände der Herren von Trapp gaben. In der letzten Zeit war Familie Thaler aus Nals für den Bau verantwortlich. Sie überließ Schwanburg dem Neffen Rudolf Carli, dessen Nachfahren heute den landwirtschaftlichen Betrieb und eine dazugehörende Kellerei führen.
Das Wappen von Nals ziert der Schwan und der Stier, die sich beide auch auf dem Wappen der Schwanburg befindet.
Schloss Schwanburg ist heute der Ort, an dem sich die älteste Privatkellerei Südtirols befindet.