Het kasteel IJsselstein lag aan de noordwestzijde van het gelijknamige oudje stadje. Slechts een traptoren is bij de sloop gespaard en deze ligt nu in het opgeknapte Kasteelpark waar de fundamenten van het oude kasteel zichtbaar zijn gemaakt.