Miasto założyli w roku 1255 benedyktyni jako podklasztorną osadę handlowo-rzemieślniczą. Rządy opata chyba nie podobały tutejszym mieszczanom, skoro w 1300 roku zbuntowali się przeciwko niemu.
Obecnie część klasztoru oraz kościół można zwiedzać codziennie, ale tylko grupowo. W jego kompleksie mieści się także Muzeum Ziemi Broumowskiej z wieloma ciekawymi eksponatami.
Obecnie kompleks klasztorny jest udostępniony dla zwiedzających. W rozległych podziemiach znajdziemy 34 mumie pochodzące z krypty kościoła parafialnego św. Prokopa w oddalonym o 70 km od Broumova miasteczku Vamberk.