Na Wzgórzu Zamkowym ok. X wieku ludność wybudowało warowne grodzisko. W miejscu tego grodziska, najprawdopodobniej jeszcze przed rokiem 1296, bracia Wedel wykorzystując pozostałe po grodzisku wzniesienie postawili Zamek. Zamek ten chroniony był z jednej strony przez jezioro, strome zbocze oraz sucha fosa. W pierwszej połowie XV wieku władanie nad Zamkiem przejęli Krzyżacy, a  w latach 1433 – 1436 Zamek znalazł się w rękach wojsk polskich.W końcówce XV wieku zamek został przebudowany na styl renesansowy. Został on zniszczony podczas wojen szwedzkich w XVII wieku. Do dnia dzisiejszego zachowały się jedynie ruiny murów przyziemia.