ワイ藤堂高虎、ギリワン扱いに激怒