Costruito su un isolotto collegato alla terraferma per mezzo di una passerella, il castello è l'edificio simbolo di Gmunden. Il portale della torre a bulbo dà accesso a un delizioso cortile delimitato su due lati da gallerie ad arcate sovrapposte, secondo il gusto del XVI sec. L'arciduca Johann Salvator, principe della Toscana, lo acquistò nel 1878 e prese il patronimico di Ort. Egli fu però costretto a lasciare l'Austria quando, a causa delle sue idee, fu privato della nazionalità da Francesco Giuseppe.