Olimpiada e vitit 1906, e mbajtur në Athinë, doli të ishte e jashtëzakonshme sepse organizatorët e saj nuk ishin në përputhje me kërkesën për pushimin tradicional katër-vjeçar midis lojërave. Për këtë arsye, Lojërat Olimpike madje nuk u njohën zyrtarisht nga Komiteti Olimpik Ndërkombëtar.
Lojërat e vitit 1906 u mbajtën për të përkujtuar dhjetë vjetorin e Olimpiadës së parë, e cila u mbajt gjithashtu në Athinë. Për të theksuar më tej lidhjen midis dy ngjarjeve, organizatorët e Olimpiadës zgjodhën të njëjtën skemë konkurrimi si në 1896. Për pjesën më të madhe, garat u mbajtën në Stadiumin e Mermerit.
Në fillim, kur u mor një propozim nga Greqia për të mbajtur Olimpiadën në 1906, IOC nuk dha një refuzim kategorik. Fakti është se në atë kohë prestigji i Lojërave Olimpike kishte rënë dhe publiku nuk tregonte më interesin e dikurshëm për to. Për të parandaluar shembjen përfundimtare të lëvizjes Olimpike, ishte e nevojshme të merreshin masa dhe nuk kishte më një mundësi për të pritur deri në 1908. Dhe megjithëse IOC më vonë refuzon të njohë Olimpiadën 1906, ajo do të quhet shpëtimi i lojërave, të cilat lejuan publikun dhe veçanërisht atletët të kthehen në veprimtari, për të mbështetur lëvizjen dhe vetë idenë e saj.
Vështirësia ishte gjithashtu në faktin se, sipas traditës, Lojërat Olimpike do të mbaheshin në vende të ndryshme të botës, por në 1906 ngjarja ishte planifikuar të mbahej në Greqi, gjë që shkaktoi pakënaqësi midis anëtarëve të IOC. Në një mënyrë apo në një tjetër, por më 22 prill, u mbajt hapja madhështore e lojërave. Ndërsa media u përqendrua në Lojërat Olimpike 1906, shumë atletë dhe mysafirë mbërritën në Athinë.
Ngjarja u ndoq nga rreth 900 atletë nga 20 vende, për më tepër, midis tyre kishte shtatë gra. Si pjesë e Olimpiadës 1906, gara u zhvilluan në sportet e mëposhtme: peshëngritje, mundje greko-romake, skermë, vozitje, vela, not, zhytje, atletikë, gjuajtje në kurth dhe plumb, çiklizëm dhe tenis. Fatkeqësisht, meqenëse IOC nuk i njohu Olimpiadat 1906, të gjitha çmimet e marra nga pjesëmarrësit e saj ishin të pavlefshme dhe nuk u morën parasysh në të ardhmen.
Ceremonia mbyllëse e Lojërave Olimpike u zhvillua në 2 maj. Pas përfundimit të ngjarjes, rezultatet e saj u diskutuan për një kohë të gjatë në vende të ndryshme, gjë që rriti ndjeshëm interesin e publikut për lojërat. Kjo u bë veçanërisht e dukshme gjatë Lojërave Olimpike të Londrës 1908, në të cilat morën pjesë më shumë se 2,000 atletë.
