Kostel sv. Floriána nechal v letech 1597–1606 postavit Rudolf z Bünau, pán na Weesensteině a Blansku, jako luteránskou kapli původně zasvěcenou Panně Marii, a to v rámci výstavby zámeckého areálu v Krásném Březně. Zámecká kaple se stala farním kostelem až se zřízením farnosti v Krásném Březně v roce 1897, kdy zároveň došlo k jejímu zasvěcení sv. Floriánovi. Kostel je unikátní památkou tzv. saské renesance s žebrovou síťovou klenbu s trny, diamantovými portály, okenní kružbou či patrovými emporami. Nejhodnotnější částí mobiliáře je zcela unikátní renesanční oltář s alabastrovými reliéfy z roku 1604. Do dnešních dnů se kostel dochoval téměř beze změn, což bylo důvodem jeho zapsání na seznam národních kulturních památek v roce 2008.