Representantes de diversos países da America Latina após as Olimpíadas de 1932 propuseram uma espécie de “Competição Regional” só para as Américas. Nessa época já existiam os Jogos Abertos da América Central e seus dois últimos eventos tinham sido no México em 1926 e em 1930 na Cuba socialista.
A história segue até 1938 quando a região do Caribe começa a participar da competição. Após essa inclusão (e também dos Estados Unidos no ano de 1944), todos os outros países da América quiseram competir. Foi então que o ex-presidente argentino Roberto Marcelino Ortiz, fundou o Congresso Panamericano de Esportes (Pan American Sports Congress) em Buenos Aires, Argentina, em Agosto de 1940.
Ficou convencionado que Buenos Aires seria onde realizariam o primeiro Jogos Pan-americanos em 1942. Isso acabou não acontecendo em decorrência da Segunda Guerra Mundial que durou de 1939 até 1945. Com o término da segunda grande guerra, e a volta ao período de paz, alinha-se com isso, um amplo crescimento econômico (em vários países da América) em razão das exportações crescentes para a Europa destruída pela guerra.
Em virtude de tudo isso que durante o período compreendido entre 8 e 15 de Agosto de 1948, em Londres, Inglaterra, aconteceu o Segundo Congresso Pan-americanos (II Pan American Congress).
O Congresso delibera novamente sobre a Ata inicial dos jogos e decidem que em 25 de Fevereiro de 1951 a cidade de Buenos Aires iria sediar o primeiro Jogos Pan-americanos.
