L'île du château doit son nom à un château qui aurait été construit à Verdun-sur-le-Doubs au XIIe siècle et détruit en 1478, à la suite de la mort de Charles Le Téméraire, duc de Bourgogne. Au XIXe siècle, l'île se composait d'un jardin autour de sa villa et d'un parc agricole. Le jardin comprenait un verger, un jardin à la française et un anglo-chinois (matérialisé par un kiosque). Au fil du temps, la végétation a profondément évolué. Aujourd'hui, l'île est un espace naturel sensible, occupé, sur la partie nord, par la forêt alluviale caractéristique du Val de Saône.