Un tempo situato sulle rive dell'oceano, il quartiere del castello si è gradualmente integrato alla città, in parallelo alla progressiva costruzione sul mare. Nel suo centro si ergono il castello di Buona Speranza e Grand Parade. Questa piazza funse da cornice al primo discorso tenuto da Nelson Mandela nel 1994, quattro anni dopo la liberazione dalle prigioni sudafricane dove aveva trascorso quasi trent'anni di vita.