Zástavba Brocna je od roku 1995 chráněna jako vesnická památková zóna.
Brocno je poprvé písemně zmiňováno v roce 1357, když bylo prodáno Karlově universitě v Praze. Pevnost na okraji obce byla vybudována v roce 1452, později přestavěna na zámek v renaisančním stylu. Mezi léty 1970-1990 zámek využívala papírna Štětí. Později byl zámek prodán a zchátral.
V 19. a na počátku 20. století žilo v Brocnu velké množství židovského obyvatelstva. V létě se jejich počty díky návštěvám příbuzných a známých z Prahy zvyšovaly. Malá kaple uprostřed náměstí jim tehdy sloužila k náboženským účelům.