泉頭城は、北条氏が柿田川上流部東側の自然の川を堀として利用し、築城したといわれているが、豊臣秀吉の小田原攻めの時に廃城となった。
徳川家康は、親しみのあった泉頭の地を、側近の以心崇伝が記した「本光国師日記」にも記されているように、元和元年(1615)の年末に隠居所として決定した。

〈 徳川家康が求めた幻の隠居所 〉

-

しかし、家康が縄張りのためにこの地を訪問する予定まで決まっていたにもかかわらず、翌年早々、急遽中止となり、隠居所は駿府(静岡市)へと変更された。