Dedinka Rimavská Baňa bola počas stredoveku významnou obcou Rimavského panstva. Vďaka tomu sa tu do dnešných dní zachovali historicky nesmierne cenné pamätihodnosti. Jednou z tých najvýznamnejších pamiatok je stredoveký evanjelický kostolík, ktorého počiatok sa datuje do 14. storočia.

Kostolík je vyhlásený za národnú kultúrnu pamiatku, a to z dvoch dôvodov. Interiér je zdobený stredovekými nástennými maľbami s ladislavovskou legendou z rokov 1360 až 1380. Druhým dôvodom je cenný mobiliár - barokový oltár, baroková kazateľnica a gotická krstiteľnica.

V kostolíku sa pôvodne nachádzal aj historický organ, ktorý sa však za záhadných okolností stratil. Návštevníci si tak v súčasnosti môžu pozrieť len jeho napodobeninu. Stredoveký kostolík bol najskôr katolícky, no počas revolúcie prešiel do rúk evanjelikov, ktorým slúži do dnes.

Kostolík slúži miestnemu cirkevnému zboru Evanjelickej cirkvi a. v. a pravidelne sa tu každú druhú nedeľu konajú bohoslužby. Prehliadku kostolíka je potrebné si dohodnúť aspoň týždeň vopred.