De bygget den senere opp igjen for å styrke sin egen prestisje, bare for å brenne den ned igjen i et anfall av raseri da Meiji-restaureringen av keiserlig makt avskaffet deres shogunat i 1868.
De brente ned sin egen bygning fordi de ikke var fornøyd med Meiji.