Wieża zamkowa jest pozostałością średniowiecznego zamku zbudowanego prawdopodobnie w 1262r. przez Woka z Rosenbergu, uznawanego za założyciela dzisiejszego Prudnika.
Dziś niestety nikt nie wie jak naprawdę wyglądał zamek, który spłonął wraz z częścią miasta w 1806r., wiadomo jednak dokładnie, w którym miejscu się znajdował. Wiadomo także, że istniejąca do dziś wieża znajdowała się południowo wschodnim narożu zamku. Jak już wspomniano w 1806r. zamek Woka z Rosenbergu spłonął, a po pożarze nigdy nie został odbudowany. Część jego ruin wykorzystano w 1837r. do budowy na jego zgliszczach stajni garnizonowej, resztą zasypano fosę zamkową oraz wybrukowano plac zamkowy.