Tijdens de bespreking van de III Olympische Spelen heeft het Internationaal Olympisch Comité besloten om het in de Verenigde Staten te organiseren, aangezien dit land in de voorgaande twee wedstrijden goede resultaten liet zien. Aanvankelijk wilden ze de Olympische Spelen in Chicago of New York houden, maar als gevolg hiervan viel de keuze op het kleine havenstadje St. Louis.
De III Olympische Spelen in St. Louis werden samen met de Parijs gehouden als onderdeel van de Wereldtentoonstelling. Het lokale management van de tentoonstelling zag het echter niet als een concurrent, maar deed integendeel zijn best om de spellen te gebruiken voor hun eigen reclamedoeleinden. Daarnaast herhaalden de organisatoren enkele fouten van de Olympische Zomerspelen van 1900 in Parijs. Vanwege gehechtheid aan de Wereldtentoonstelling werden wedstrijden naar de achtergrond gedegradeerd en duurden de Olympische Spelen zelf bijna 5 maanden (1 juli - 23 november 1904). Veel wedstrijden werden gehouden onder leiding van verschillende professionele organisaties, maar desondanks kregen ze allemaal de titel van Olympische disciplines.
Volgens het IOC namen 12 landen deel aan de zomerspelen in St. Louis. De enige staat die voor het eerst de wedstrijd bijwoonde, was Zuid-Afrika. Vergeleken met de Olympische Spelen in Parijs is het aantal deelnemende landen sterk gedaald. De 13 deelnemende staten aan de zomerspelen van Parijs konden om economische redenen niet naar St. Louis komen. Rusland, dat destijds met Japan vocht, nam niet deel aan de competities.
In totaal hebben 651 mensen, waaronder 6 vrouwen, opgetreden op de Olympische Zomerspelen III. Ze streden om 94 sets prijzen in 18 sporten. Het grootste team was de Verenigde Staten van Amerika; zij vertegenwoordigden 533 mensen bij de wedstrijden. In veel sporten (boksen, worstelen, waterpolo, boogschieten en tennis) traden alleen Amerikaanse atleten op, dus de spellen toonden duidelijk het primaat van het land.
In St. Louis werden voor het eerst drie, niet twee atleten beloond die het beste resultaat lieten zien. De hoofdwinnaar van de wedstrijd kreeg een gouden medaille; tweede plaats atleet - zilver; en de derde plaats werd gemarkeerd door een bronzen onderscheiding. Deze traditie is tot op de dag van vandaag bewaard gebleven.
In het onofficiële teamklassement zijn de deelnemende landen als volgt: ik plaats - USA (78 goud, 82 zilver, 78 bronzen medailles), II plaats - Duitsland (4 goud, 4 zilver, 5 bronzen medailles), III plaats - Cuba (4 goud, 2 zilveren, 3 bronzen medailles).
