Первое укрепление на месте замка было заложено в 1264 году рыцарем Тевтонского ордена Хартманом фон Грумбахом на месте прусского городища Капзовин (Гарзовен).
В 1337 году возвели деревянно-земляные укрепления, а в 1351 году замок перестроили в камне. После раздела земель между Орденом и самбийским епископом в 1352 году Георгенбург отошёл во владение епископа, которому принадлежал до 1525 года.
Замок неоднократно подвергался разрушениям. В 1364 и 1376 годах его сожгли и разрушили литовские войска. Между 1385 и 1390 годами замок капитально перестроили в камне, с западной стороны пристроили форбург (хозяйственную часть).
В 1403 году замок захватил войском великого князя литовского Витовта.
В XVI веке после секуляризации орденских земель Георгенбург перешёл в систему герцогства Пруссия.
С XVIII века здесь начали активно заниматься разведением лошадей.
В годы Семилетней войны в замке размещалась ставка русского фельдмаршала Апраксина, а во время наполеоновских войн здесь находился штаб маршала Даву.
После Второй мировой войны, с 1945 по 1949 год, на территории замка действовал лагерь для немецких военнопленных. Позже здесь размещались тюрьма и инфекционная больница. В 1990-е годы здание пришло в упадок.
В 2010 году замок передали Русской православной церкви. С этого времени начались работы по расчистке территории, стали проводиться туристические экскурсии и культурные мероприятия.
Замковый комплекс состоит из двух основных частей: цитадели (главного замка) и форбурга.
- Цитадель — почти квадратное в плане строение (около 40×44 м) с внутренним двором. Она была возведена из полевого камня и кирпича в характерной для орденской готики технике. До наших дней сохранились внешние стены цитадели, хотя и со значительными утратами.
- Форбург — хозяйственная часть замка, где располагались конюшни, склады, казармы и другие служебные постройки. Большинство строений форбурга утрачено или находится в руинированном состоянии.
С 2024 года замок находится на реконструкции. Планируется, что в начале 2027 года в флигеле замка откроется музей, аналогичный музею в Нойхаузене.