高台院の甥木下延俊は慶長６年（1601年）、豊後国に３万石を得て入国し、初代日出藩主となった。
義兄の細川忠興の援助により、 野面積みの石垣に三層天守を持つ日出城を築城。以後270年木下家の居城として栄え、現在の日出町の礎を築いた。
高台院は延俊を幼い頃からとてもかわいがったとされ、現存する延俊宛の高台院直筆の手紙には、鮨を贈ったとの内容が記されている。