A korabeli helyi elöljáróság hozta azt a döntést, hogy Szent Flóriánnak, az árvizek és tűzvészek elleni védőszentnek, utóbbi révén a tűzoltók védőszentjének tiszteletére a város területén, a tűzoltószertár közelében méltó emléket állít.
Az úgyszintén klasszicizáló késő barokk (copf) stílusú épület a templommal egyidőben, 1800 körül épült. Oromzata vakolatkeretében ugyan az 1833-as évszámot mutatja, ez azonban egy felújítás emlékét őrzi csak. A templommal közös telken áll, annak határán az utcavonalon emelték.
A reformátusság a város belső főútvonalának a Belvárosba vezető mellékutcájában alakította ki hitéleti centrumát.
A 19. század második felében építették az akkor jellemző historizáló stílusban. Nevét az itt lakott Paál Józsefről (1835-1919), a dombóvári hercegi uradalom kerületi felügyelőjéről kapta.
A templom nem utcavonalon, hanem távolabb, udvarban, kis magaslaton helyezkedik el.
