III Олімпіада в Сент-Луїсі, поряд з Паризької, проводилася в рамках Всесвітньої виставки. Однак місцева дирекція Виставки не розглядала її як конкурента, а навпаки, всіляко прагнула використати гри у власних рекламних цілях. Крім того, організатори повторили деякі помилки літніх Олімпійських ігор 1900 року в Парижі. Через прихильності до Всесвітньої виставки змагання були відсунуті на другий план, а сама Олімпіада розтягнулася майже на 5 місяців (1 липня - 23 листопада 1904 року). Багато змагання проходили під керівництвом різних професійних організацій, однак, незважаючи на це, їм усім було присвоєно титул Олімпійських дисциплін.
Згідно з даними МОК, на літніх іграх в Сент-Луїсі взяло участь 12 країн. Єдиною державою, що відвідав змагання вперше, була Південна Африка. У порівнянні з Паризької Олімпіадою кількість країн-учасників різко скоротилося. 13 держав, що брали участь в літніх Паризьких іграх, не змогли приїхати в Сент-Луїс з економічних міркувань. Росія, яка воювала в цей час з Японією, у змаганнях участі не брала.
Всього на III літній Олімпіаді виступили 651 чоловік, включаючи 6 жінок. Вони змагалися за 94 комплекти нагород у 18 видах спорту. Найчисленнішою була команда Сполучених Штатів Америки, вони представили на іграх 533 людини. У багатьох видах спорту (бокс, боротьба, водне поло, стрільба з лука і теніс) виступали виключно американські спортсмени, тому ігри яскраво продемонстрували першість країни.
У Сент-Луїсі вперше стали нагороджувати трьох, а не двох спортсменів, які показали найкращий результат. Головному переможцю змагання вручалася золота медаль- спортсмену, який посів друге місце, - серебряная- а третє місце зазначалося бронзовою нагородою. Ця традиція збереглася аж до теперішнього часу.
У неофіційному командному заліку країни-учасники розташувалися таким чином: I місце - США (78 золотих, 82 срібних, 78 бронзових медалі), II місце - Німеччина (4 золотих, 4 срібних, 5 бронзових нагород), III місце - Куба (4 золотих , 2 срібних, 3 бронзових медалі).