Historia Javorníka sięga XIII wieku. Początkowo należał on do Piastów świdnickich, którzy w 1348 roku odstąpili go biskupom wrocławskim. W ich rękach, z krótkimi przerwami, pozostał do 1945 roku. Sama warownia powstała na przełomie XIII i XIV wieku. Pierwotny zamek został później przebudowany w stylu barokowym za panowania Philippa Gottharda von Schaffgotsch (1716–1795), który uczynił go swoją główną rezydencją. Ostatnia znaczące przebudowa zakończyła się w 1801 roku i nadała obiektowi zachowany do dziś wygląd.
Chcąc zwiedzić zamek musimy pokonać strome schody, które zygzakami wyprowadzają nas na kamienny taras.