Em 1906, 10 anos após os primeiros Jogos Olímpicos de Atenas, uma Olimpíada extraordinária e não contemplada foi realizada. A decisão da Grécia de mantê-lo a princípio provocou fortes críticas a alguns comitês olímpicos. No entanto, gradualmente, sua opinião mudou para melhor devido ao fato de que muitos países não puderam enviar equipes sérias para St. Louis ou nem participaram dos Jogos de 1904 por causa do alto custo da estrada para os Estados Unidos.
Os Jogos Olímpicos, levados às sombras pelas feiras internacionais, estavam passando por uma crise prolongada. No contexto desta situação, os gregos, como guardiões da antiga cultura helênica, foram autorizados a realizar a Inter-Olimpíada. Apesar de as Olimpíadas de Atenas em 1906 terem sido o primeiro e único evento desse tipo e seus resultados não terem sido reconhecidos como oficiais, os organizadores lidaram com a tarefa: dar vida a um projeto murcho.
O fórum grego, ao contrário de seus dois antecessores oficiais, não foi muito prolongado e conseguiu se tornar um evento mundial, reunindo para a competição um público recorde para a época - 884 atletas, que representavam 20 países.
Pela primeira vez na história dos Jogos, todos os participantes passaram pelo procedimento de inscrição nos Comitês Olímpicos Nacionais. Além disso, pela primeira vez, os telespectadores assistiram às cerimônias de abertura e encerramento dos Jogos, ao desfile olímpico e ao surgimento de faixas nacionais em homenagem aos vencedores nas arquibancadas.
Curiosos são os fatos relacionados diretamente aos participantes das Olimpíadas de 1906. Ray Urey, 8 vezes campeão olímpico de atletismo na Inter-Olimpíada, venceu o salto em distância de um local (3 m 30 cm) e o salto em distância de um local (1 m 56 cm). Se esses resultados fossem levados em consideração, ele teria ultrapassado Paavo Nurmi e Karl Lewis em ouro (9 medalhas de ouro cada). Ray Urey não estava mais autorizado a participar das Olimpíadas de Estocolmo em 1912 por causa de sua idade, ele tinha 39 anos.
Paul Pilgrim, um corredor dos EUA, venceu duas distâncias de 400 e 800 metros. Esse resultado foi repetido somente após 70 anos pelo atleta Alberto Juantorena nos Jogos Olímpicos de Montreal.
O corredor canadense Billy Schering chegou à Grécia 2 meses antes dos jogos para se adaptar às condições locais. Seus esforços não foram em vão; ele inesperadamente venceu uma maratona para todos. O príncipe herdeiro da Grécia Georg, juntamente com Schering, disputou a rodada final do estádio.
Nos jogos da Inter-Olimpíada de 1906, os atletas da Finlândia se apresentaram pela primeira vez e imediatamente ganharam ouro. Werner Järvinen recebeu uma medalha por lançar um disco em estilo antigo.
O maior número de prêmios nas Olimpíadas foi ganho por um irlandês-americano, Martin Sheridan. Ele recebeu ouro pelo arremesso de peso e lançamento de disco no estilo clássico. Por longos e altos saltos de um lugar, ele ganhou prata. O rei da Grécia presenteou Sheridan com uma lança do vencedor, que ainda está armazenada na terra natal do atleta na Irlanda.