Ndërsa diskutonte çështjen e mbajtjes së Olimpiadës III, Komiteti Olimpik Ndërkombëtar vendosi ta organizojë atë në territorin e Shteteve të Bashkuara, pasi që ky vend tregoi rezultate të mira në dy lojërat e mëparshme. Fillimisht, ata donin të zhvillonin Olimpiadën në Çikago ose New York, por si rezultat, zgjedhja ra në qytetin e vogël port të St. Louis.
Olimpiada III në St. Louis, së bashku me Lojërat Olimpike të Parisit, u mbajt në kuadrin e Ekspozitës Botërore. Sidoqoftë, menaxhmenti lokal i Ekspozitës nuk e konsideroi atë si një konkurrent, por, përkundrazi, në çdo mënyrë të mundshme u përpoq t'i përdorë lojërat për qëllimet e tyre reklamuese. Përveç kësaj, organizatorët përsëritën disa nga gabimet e Lojërave Olimpike Verore të vitit 1900 në Paris. Për shkak të lidhjes me Ekspozitën Botërore, garat u shtynë në plan të dytë, dhe vetë Olimpiada zgjati për gati 5 muaj (1 korrik - 23 nëntor 1904). Shumë gara u mbajtën nën udhëheqjen e organizatave të ndryshme profesionale, megjithatë, përkundër kësaj, të gjithë u dha titulli i disiplinave Olimpike.
Sipas IOC, 12 vende morën pjesë në Lojërat Verore të St. Louis. I vetmi shtet që ndoqi garën për herë të parë ishte Afrika e Jugut. Krahasuar me Lojërat Olimpike të Parisit, numri i vendeve pjesëmarrëse ka rënë ndjeshëm. 13 shtetet që morën pjesë në Lojërat Verore të Parisit nuk ishin në gjendje të vinin në St. Louis për arsye ekonomike. Rusia, e cila ishte në luftë me Japoninë në atë kohë, nuk mori pjesë në konkurs.
Gjithsej 651 persona morën pjesë në Lojërat Olimpike III Verore, përfshirë 6 gra. Ata garuan për 94 grupe çmimesh në 18 sporte. Më e shumta ishte ekipi i Shteteve të Bashkuara të Amerikës, ata përfaqësuan 533 persona në lojëra. Në shumë sporte (boks, mundje, vaterpolo, gjuajtje me hark dhe tenis), vetëm sportistët amerikanë performuan, kështu që lojërat demonstruan qartë epërsinë e vendit.
Në St. Louis, për herë të parë, ata filluan të shpërblejnë tre, jo dy, atletë që treguan rezultatin më të mirë. Fituesi kryesor i konkursit u vlerësua me një medalje të artë; atleti që zuri vendin e dytë - argjend; dhe vendit të tretë iu dha një medalje bronzi. Kjo traditë ka mbijetuar deri në ditët e sotme.
Në një ngjarje jozyrtare të ekipit, vendet pjesëmarrëse u pozicionuan si më poshtë: Unë vendos - SHBA (78 ari, 82 argjendi, 78 medalje bronzi), vendi II - Gjermania (4 ari, 4 argjendi, 5 medalje bronzi), vendi III - Kuba (4 medalje ari, 2 argjendi, 3 bronzi).
