Muzeum bylo postaveno jako vzorové místní muzeum v letech 1903-1904 v parčíku zvaném Raisovy sady z popudu Dr. Antonína Friče. Frič po vzniku tohoto typu muzea neúspěšně toužil již od roku 1866 a teprve díky souběhu příznivých okolností se jeho přání vyplnilo právě v Bělohradě. Podle jeho návrhu byly nejen uspořádány sbírky, ale i vybavení mobiliářem. V letech 1924-1925 byla k původní středové části přistavěna boční křídla a současně s jejich otevřením byly slavnostně odhaleny desky obětem 1. světové války. Později byl v jednom z nich instalován koutek K. V. Raise.
Upozornění: Fričovo muzeum je v současné době veřejnosti nepřístupné.