邸宅前に出迎えるのは、兜門。大磯町郷土資料館・北水慶一館長は、「サンフランシスコ講話条約を締結された記念して建てられたというふうに言われている」とコメントした。わざわざ京都から宮大工を呼び寄せて作らせた吉田の思いが詰まった門をくぐると、吉田邸の庭。花を愛した吉田が作ったのは、春には梅や藤の花、秋には紅葉と自然の移り変わりが楽しめる日本庭園。