1887 m. statyta mūrinė bažnyčia, restauruota 1928 m., yra eklektinė neobaroko ir klasicizmo kompozicija. Stambių proporcijų fasadinis bokštas ištrauktas priekin ir padalintas į tris tarpsnius su plačiais karnizais. Pagal baroko principus, apatinėbokšto dalis yra kvadratinio plano, o viršutinė aštuoniakampė, uždengta kupoliniu stogu. Plastiškas geležinis kryžius iškeltas ant aukštos smailės. Bokšto ir sienų angos ir langai turi pusapskrites arkas ir jas gaubiančias didesnes arkines nišas. Yra ir apskritų nišų bei angų. Tim fasadinės durys stačiakampės su arkiniu sandriku. Bokštas ir sienos papuošti gausiais klasicistiniais piliastrais. Sienų ir bokštų karnizai yra sudvigubintinir susmulkinti lygiomis traukomis. Trikampiai transeptų frontonai papuošti mažais bokšteliais. Viskas tinkuota baltai, tik įdubusios plokštumos yra tamsesnės.

Kavarskas yra garsus šv. Jono Krikštytojo – bažnyčios globėjo atlaidais, į kuriuos suvažiuoja daug tikinčiųjų. Prie bažnyčios yra garsus vandens šaltinis vadinamas šv. Jono Krikštytojo šaltiniu. Pasisemti vandens iš šio šaltinio atvyksta daugybė žmonių iš visos Lietuvos, tikėdami, kad jo vanduo turi gydomųjų galių. Atvykę aplanko ir bažnyčią. 1940 m. parapijai priklausė net 5300 parapijiečių. Dabar šis skaičius sumažėjęs daugiau nei per pusę.