Il castello è situato sulla roccia calcarea, ed è stato costruito al posto di una roccaforte slava e dal XI secolo è diventato il castello reale di difesa della città. Il monumento più antico del castello è probabilmente la rotonda romanica. I resti della rotonda si trovano nel cortile superiore. Dal inizio del XIV secolo il castello fu la sede del palatino Matus Cak, che aveva possedeva altri 50 castelli.