Rikyu oppnådde tilsynelatende krigsherrenes vrede ved å plassere en statue av seg selv i den store hovedporten, hvorunder Hideyoshi måtte ha passert en utålelig fornærmelse til en berømt stolt kriger.
Hideyoshi angivelig tok stor fornærmelse av tilstedeværelsen av statuen av Rikyu.