Imponujący barokowy zamek, który jest uważany za główną atrakcją miasta Granicy, został wzniesiony na miejscu dawnego grodu, zbudowanego w 1427 roku panami z Цимбурка. Twierdza była drewniana, ale przy tym ją otaczały potężne kamienne ściany. Po chwili zamek z drewna został zniszczony, a na jego miejscu zbudowany już kamienny dwór. Był małym, stanowił raczej nie obronne budowa, dom mieszkalny. Przeznaczenie u zamku Granicy trudne: jego przegrywali w karty, przekazywane w drodze dziedziczenia, sprzedawali za długi. Zmienił wiele gospodarzy, którzy starali się przerobić go na własny sposób. W czasie panowania w Granicy panów Пернштейнов zamek został rozbudowany i uzupełniony o wysokiej cylindrycznej wieży.

Jan Кропач, владевший zamkiem z XVI wieku, też zwracał dużą uwagę do jej rozwoju. On nadał elewacji zamku renesansowy wygląd, przetarł zachodnie skrzydło, które było nie tak długi, jak teraz. Zamkowa wieża została надстроена i pokryta jest stożkowym dachem. W zasadzie, już w tamtych czasach powstał nowoczesny wygląd zamku.

Do 1858 roku zamkiem posiadali przedstawiciele arystokratycznej rodziny Dietrichstein. Następnie przeszedł na własność państwa, które jest właścicielem i teraz. Zamek używali do przechowywania ziarna i noclegów najemnych pracowników. Obecnie mieści się w nim ratusz. Dostać się do wewnętrznych pomieszczeń nie uda, ale wejść w przytulny taras, pokryte przezroczystym zadaszeniem, można. Szklany dach został zainstalowany w trakcie ostatniej w tej chwili odbudowy zamku.