Rikyu alikasirishwa sana na mfalme huyo kwa kuweka sanamu yake mwenyewe kwenye lango kuu, na hivyo kumfanya Hideyoshi awe na hatia kubwa sana.
Inasemekana kwamba Hideyoshi alidhalilishwa sana na kuwapo kwa sanamu ya Rikyu.