Wybudowany w widłach rzek Łyny i Symsarny zamek chroniony był dodatkowo murami obwodowymi i fosami od południa i wschodu (wschodnia fosa równoległa do Symsarny). W części południowej i północnej zamku zlokalizowano przedzamcza, które wraz z zamkiem otaczały potężne mury obronne. Dojazd do zamku z miasta odbywał się przez Bramę Młyńską po moście przez Łynę do północnego przedzamcza, gdzie umiejscowiony był młyn wodny. Dalej przejechać trzeba było wzdłuż zachodniej strony zamku przez kilka bram do przedzamcza od strony południowej. Przedzamcze to od zamku właściwego oddzielone było suchą fosą. Po przejechaniu mostu na wymienionej fosie można było się dostać na dziedziniec zamkowy przez bramę usytuowaną w centralnej części skrzydła południowego.
Bryłę zamku w narożu północno-wschodnim zdobi wysoka wieża w dolnych partiach czworoboczna, w górnych ośmioboczna, a w pozostałych narożach wieżyczki na konsolach. Wieżyczki te dobudowano po pożarze zamku w 1442. Ostateczny kształt uzyskały one w czasie rządów biskupa Watzenrodego.