小田原を平定した秀吉は天正十八年七月十七日、奥州へおもむく途中、鶴岡八幡宮に参詣した。
　そして、白旗社の扉を開けさせ、源頼朝の木像にむかって話しかけたという。
「およそ微少の身で天下を取ったのは、わが国では御身(頼朝)と自分だけである。しかし御身は多田(源)満仲の後胤という名門の出で、しかも頼義・義家は東国に名を馳せ、為義・義朝も関東に威を張った。だから流人となっても、兵を挙げると関東のものがみな従ったので、天下を統一するのにたやすかった。自分はもともと氏も系図もない身であるのにこのように天下を取ったのだから、その功績は自分の方が勝っている。しかしながら御身と自分とは天下友達である」と、ひとりしゃべりおえると、頼朝の木像の背中をポンポンと叩いた、というエピソードがあります。