Kolárovo si dodnes zachovalo čiastočne vidiecky charakter. Medzi historické budovy sa dá započítať kostol z 18. storočia, bývalý parný mlyn či niekdajšia škola.. Židovskú komunitu z 19. storočia ešte pripomína židovský cintorín skrytý medzi rodinnými domami, synagógu podobne ako v iných mestečkách zbúrali komunisti. Z historického cintorína v centre mesta je dnes park a náhrobky sú poskladané okolo obvodového múru.