Католическая часовня размещается в перестроенном торговом здании советского времени.
Первая часовня Святого Казимира в Жлобине была построена в 1911 году.
24 мая 1909 года власти дали разрешение на строительство католического храма. В соседнем городе Рогачеве в это время шло строительство нового костела. Старый – все еще добротный деревянный храм подлежал сносу. Благодаря старанием настоятеля отца Александра Болтуца, старый Рогачевский храм удалось выкупить за 900 рублей, разобрать и перевезти в Жлобин. Место под строительство католического храма было подарено князем Друцким-Соколинским.
В 1911 году храм был освящен как часовня Святого Казимира. Он работал до 1934 года, когда большевики закрыли все храмы в Жлобине. Во время немецко-фашистской оккупации фашисты, выполняя соглашение с Ватиканом, открыли все храмы в городе и разрешили проводить в них богослужения. Поскольку своего капеллана в городе не было, службы проводил немецкий военный капеллан.
После окончания войны часовню Святого Казимира вновь закрыли и передали помещение под детский сад. В 1980 году после капитального ремонта здесь открыли историко-краеведческий музей.
После распада Советского Союза, католики неоднократно обращались к властям с просьбами о возвращении святыни. Власти помещение музея отдавать отказались, но передали верующим торговое здание советской постройки, которое было перестроено в часовню Святого Казимира на средства, собранные католиками Жлобина.