В 1277 году деревянная крепость Раганита, принадлежащая скальвам, была сожжена войсками Ордена. Спустя некоторое время сюда, с целью расширения зоны влияния христианства, на место бывшей крепости прибывает ландмейстер Майнхард фон Кверфурт и в 1289 основывает крепость, которая сначала называлась Ландесхут. В 1326 году ей возвращают старое название, на немецкий лад — Рагнит. Крепость была хорошо укреплена, благодаря чему в 1295 году удалось отразить нападения литовцев, а в 1338 и вовсе нанести им сокрушительный удар.
В 1356 году крепость была отстроена заново Винрихом фон Книпродем и на этот раз вокруг неё был вырыт ров. Однако это не помешало войскам ВКЛ в 1365 году вновь сжечь крепость. Тогда за дело принялся Конрад Цоельнер фон Роттенштайн и отстроил крепость на свой лад, перенеся её при этом на то место, где она находится сейчас.
С 1397 года началось строительство каменной крепости в новом стиле и на века. И в 1409 году строительство было завершено. Были красивые и ажурные ворота, окна, порталы, флигеля. Крепость имела почти квадратную форму — 59 на 58 м, а внутренний двор — 31 на 31 м. В основание фундамента были заложены массивные гранитные плиты. Они находятся на глубине 5 м. В четырёх этажах имелось 11 больших залов и множество мелких подсобных помещений. В течение столетий надземные и подвальные помещения многократно переделывались и перестраивались. Были секретные подземные туннели. Составной частью замка стала часовая башня высотой 25 метров.
В 1825 году крепость была перестроена и в ней расположилась Восточно-Прусская тюрьма, находившаяся в ней вплоть до 1945 года. Однако, в 1829 году в ней случился пожар и крепость была сильно повреждена[1]. Полностью отремонтировать удалось её только к 1840 году. С 1839 году в крепости размещались городской и районный суд, с 1849 — военный трибунал, а с 1879 в крепость вновь вернулся суд[1].
С приходом гитлеровцев к власти с 1933 года эта крепость-тюрьма стала особенно востребована. Тут провели свои последние годы многие узники-антифашисты.
После Второй мировой войны крепость получила значительные повреждения и была частично заброшена. Степень разрушения крепости на момент 1957 года запечатлена в фотоархивах «Института архитектуры и строительства Каунасского технологического университета»[2],а также «Государственном архиве Калининградской области»[3].