Zamek krzyżacki w Olsztynku jest najcenniejszą czternastowieczną budowlą w mieście. Zamek wybudowano na planie regularnego czworoboku, z brukowanym dziedzińcem, dwoma poziomami piwnic, otoczony był głęboką fosą. Oprócz pomieszczeń mieszkalnych dla urzędników zakonnych, załogi i służby mieściły się w zamku kaplica, refektarz, łaźnia, zbrojownia, magazyny, stajnie oraz obory dla trzody.

Po upadku zakonu krzyżackiego, zamek stał się siedzibą starostwa utworzonego w Olsztynku. 

Zamek miał szczęście przejść obronną ręką wszystkie zawirowania wojenne. Pełnił  w różnych okresach różne funkcje: zbrojowni, gimnazjum, seminarium, jednostki wojskowej, liceum. Dziś znajduje się tu Zespół Szkół.