Le palais de sports a été construit sur l'ancienne prison militaire d'Orléans, sombre souvenir des deux dernières grandes guerre.

La piscine du Palais des sports d'Orléans, fut ouverte au public en 1971. Dès lors, les Orléanais pouvaient se baigner en hiver. Pour accéder aux deux bassins couverts, il fallait acheter son jeton de vestiaire à la caisse puis gravir les longues marches pour accéder à son casier. Une odeur de javel embaumait les lieux très fréquentés dès l'ouverture.

La piscine sera définitivement fermée en 2021 après 50 ans de bons et loyaux services.