Kort tid etter ble tillatelsen til å bygge synagogen tilbakekalt, og det delvis fullførte bygningen falt i ruiner; først i 1864 ble den endelig fullført.
De erobrende inntrengerne ønsket ikke at et så viktig kulturelt landemerke skulle bygges under deres styre.