Palasset, som nå hovedsakelig fungerer som et museum, har fått navnet sitt fra den rødt-kledde figuren av apeguden Hanuman som står til venstre for hovedinngangen til palasset.
Palasset er oppkalt etter en enkel handelsmann som ble byens konge.