A Kaszinó már a háború előtt kicsinek bizonyult az igényeknek. Már 1943-ben készültek tervek az átépítésre, de a háború közbeszólt. A háborús kisebb károkat (tetőbádog, tetőüvegezés) hamar helyreállították, elejét vették a faszerkezetek további gombásodásának, de a homlokzat felújítására nem került sor anyagi nehézségek miatt.
A Templom utca felől továbbra is üzemelt a kerthelyiség a gesztenyefák alatt (még fagylaltot is árultak). A műszaki állapot további romlása miatt 1965-1969 között teljes átépítésre került az épület, a korábbi tervek felhasználásával, ekkor kapta a Templom utcai ráépített homlokzatot, alumínium és üveg burkolattal.
2001-2002-ben nem a korábbi állapotot állították vissza, hanem az átépített épületet még egyszer átépítették, a Templom utca felől további épületrész ráépítésével és a homlokzat egységesítésével. Mindkét alkalommal a belső terek is átépítésre kerültek (födémek, lépcsőházak, folyosók, termek, kiszolgáló helyiségek stb.).