De l'autre côté de la douve, le long bâtiment de porte blanc de l'Ōtemon s'élève au-dessus de ses murs de pierre, à côté de la petite porte extérieure couverte. L'Ōtemon était la porte principale du château d'Edo, empruntée par les daimyō venus rendre hommage au shogun ; c'est aujourd'hui l'entrée principale des jardins de l'Est.