W XIV w na miejscu dzisiejszej wieży stała, tzw. Baszta Rybacka. Wzniesiona przez Krzyżaków. Służyła do ryglowania dostępu do komturskiego zamku od strony miasta.