У XIII столітті в замку звели потужну кам'яну вежу, дуже схожу на Кам'янецький стовп. Але Гродненська вежа була розібрана під час чергової перебудови вже через сто років після свого будівництва.
У XIII-XIV століттях опанувати гродненським замком, який оберігав і зберігав багатий і красивий місто, прагнули хрестоносці Мазовії і Тевтонського ордена в 1284 році і 1 296 роках. Чи не змогли захопити Гродненський замок і хрестоносці в 1305, 1306 і 1311 роках, хоча чисельність ворожих загонів часом досягала 6 тис. Чоловік.
Не тільки прусаки, а й лицарі Лівонського ордену шукали удачі під стінами стародавнього поселення на Немане. У лютому-березні 1364 р німецький граф фон Ханау повів з Лівонії військо, де було 40 князів з різних країн Європи. Навіть англійські лицарі переправилися через Ла-Манш, щоб "під прапором святого Георгія" - покровителя всіх хрестоносців випробувати долю під неприступним замком, відомим всій лицарської Європі. Однак замок вистояв знову.
Міжусобиця Вітовта і Ягайла в 1390 р привела під стіни Гродно нову біду: замок, яким володів Вітовт, 50 днів витримував облогу королівського війська. Сильний нічна пожежа 1398 року, під час якого ледь не загинув разом з сім'єю сам Вітовт, звернув Гродненський замок в попіл. Після цього вирішено було більш дерев'яних укріплень не будувати. На згарищі виріс новий, кам'яний замок, на частку якого також випало чимало випробувань. Уже в 1402 хрестоносці зазнали його на міцність, і він витримав всі штурми.
Для свого часу Гродненський кам'яний замок був виключно потужним спорудою. Замок звели по периметру гори, і його стіни утворили неправильний в плані трикутник. Товщина стін сягала 2,5-3 м. У замку було 5 веж, в тому числі "вежа-брама", кругла в плані вежа ( "стовп") і три квадратні розміром 12x12 м в підставі.
У лінії стін, звернених до міста, розміщувався новий кам'яний двоповерховий палац Вітовта, з товстими стінами, які прорізали вузькі, бійниці-вікна. 50-метровий сухий рів відділяв замок від міста і Нижнього замку.
В останній чверті XVI ст. Гродно перетворилося в головну і улюблену резиденцію короля Стефана Баторія. При ньому починається перебудова Верхнього замку, який втрачає свої суворі, аскетичні риси, позбавляється низки старих будівель і веж. Зникли вежа-брама, стовп XIII в., Палац Вітовта.
У Верхньому замку за проектом італійського архітектора Скотто будується новий двоповерховий в стилі ренесансу палац Стефана Баторія. Симетрія в розбивці приміщень була відсутня. На першому поверсі знаходилася сторожа, комори, канцелярія, скарбниця і архів. Другий поверх палацу займали королівські покої, пишні шліфованим гіпсом, кам'яним різьбленням і кахлями, з тонкими лиштвами вікон, з полами, викладеними керамічними і мармуровими плитками.
Однак королівський палац не втратив і свого оборонного значення, що підкреслювалося товстими зовнішніми стінами і тісним зв'язком його планування з іншими замковими захисними спорудами: вежами, в'їзними воротами з підйомним мостом і кованими полотнищами стулок на 12-ти фігурних завісах.
Замок багато разів руйнувався, відновлювався і перебудовувався. До наших днів дійшли палац, фрагменти оборонних стін, руїни Нижньої і Верхньої церков, княжих покоїв, міст і замчище.
В даний час в цьому пам'ятнику оборонної та палацово-замкової архітектури розміщується Гродненський історико-археологічний музей.
Матеріал підготовлений за замовленням міністерства спорту і туризму РБ, в ньому використані фотографії, надані журналом "Архітектура і будівництво" , А також сайту globus.tut.by