Одна из древнейших русских крепостей. Первое известное упоминание в летописи относится к 1384 г. Местечко Ям на Луге описывается как каменистый город. Построен новгородцами для укрепления своих пограничных земель на западе. Как и большинство древних укреплений, Ям первоначально, видимо, была деревянной с земельным валом, а в упомянутое время укреплялась, как и многие другие, современные ей фортификационные сооружения.. Место для строительства крепости было выбрано очень удачно. Высокий, обрывистый берег реки дополнительно увеличивал высоту стен и башен с наружной стороны. Крепость выдержала с честью осады шведов и ливонцев в 1395 и 1444-1448 гг. В конце XV в. Ям стал крупным административным и экономическим центром, контролирующим важные торговые пути.
Раскопки позволили обнаружить на территории бывшей крепости остатки небольшого храма и ворота, представляющие собой две стоящие одна за другой четырехугольные башни. Через которые внутрь крепости вел коридор длиной более 17 метров, перекрывающийся тремя решетками. Перед входом была каменная яма-ловушка с подъемным мостом.
Стены каменной крепости начала XVI в. были облицованы известняковыми плитами и достигали в толщину до 4,2 метров. Башни располагались в местах изгибов стен и были далеко вынесены.
По столбовому миру 1617 г. Ям почти на сто лет отошел к шведам. После взятия петровскими войсками Ямбурга, начались работы по усилению крепости. Однако уже к середине XVIII в. она теряет свое военное значение. Вскоре крепость разбирают для нужд Гостиного двора и Екатерининского собора.