Warownia stała się siedzibą administratora dóbr ziemskich Kapituły Warmińskiej. Administrator sprawował władzę nad trzecią częścią Warmii w tym takimi miastami jak Frombork, Pieniężno i oczywiście Olsztyn. Znajdowały się tu spichlerz i skarbiec kapituły. Przede wszystkim jednak zamek pełnił funkcje obronne.

Oczywiście wraz z kolejnymi wiekami zamek tracił swoje znaczenie obronne. Był też kilkukrotnie przebudowywany. Dziś budowla składa się z dwóch gotyckich skrzydeł połączonych murem kurtynowym oraz późnobarokowej części, przez którą prowadzi wejście na dziedziniec. Znajdziemy tam m.in. kamienny posąg tzw. baby pruskiej przywieziony z Barcian. O jego pochodzeniu u funkcji wiadomo niewiele. Podobne posągi znajdowano na ziemiach dawniej zamieszkiwanych przez plemiona pruskie, podbite w XIII wieku przez Krzyżaków. Jest tu także wersalski kamień graniczny z 1919 roku, a także nieczynna studnia.