Arhitektuurimälestis ja linna kauneim ehitis valmis 1929 ja selle projekteeris pangahooneks Edgar Johan Kuusik. Aastatel 1929 - 1934 tegutses hoones Krediidipank, aastatel 1934 – 2015 oli aga kasutusel postimajana. Hoone on kultuurimälestiste riiklikus registris. 
Tänasel päeval asub endisaegse pangahoone teisel korrusel Abja muuseum. Linnaga tutvumiseks on sobiv külastada püsinäitust "Abja-Paluoja - Mulgimaa pealinn", mis annab hea ülevaate väikelinna kujunemise loost. Muuseum tegutseb alates 1999. aastast, hoone fassaad renoveeriti 2021. aastal.