L'Amicale des anciens stagiaires et animateurs de la Jeunesse ouvrière et rurale est créée en 1953. Ses activités, qui visent le public des 14-21 ans non scolarisés, s'orientent vers le monde du travail en proposant l'apprentissage des gestes justes grâce à des exercices de levage, de portage ou travail en hauteur. Progressivement l'offre se diversifie et les activités proposées leur permettent de pratiquer des sports (basket, football, athlétisme) et des activités de plein air (séjours en camping, canoë-kayak, randonnée, ski).
Puis en 1962, l'Amicale prend le nom d'Association nationale Entraînement physique et Monde moderne en 1962. Enfin, elle devient en 1967 la Fédération française pour l'entraînement physique dans le monde moderne (FFEPMM). Le développement des loisirs de masse, du sport et l'essor des activités de plein air favorisent la croissance des effectifs de la Fédération qui diversifie ses activités.

Elle affiche alors clairement dans le titre choisi deux concepts. Celui d'« entraînement physique », c'est-à-dire l'ensemble des techniques qui peuvent aider à l'amélioration de la valeur physique telles que la gymnastique, la recherche des gestes justes, la prévention des déformations professionnelles, des accidents et du surmenage, les activités de délassement ou encore l'entretien des facultés psychomotrices. Le concept de « monde moderne » renvoie quant à lui à la volonté d'étendre au maximum son champ d'actions, de toucher tous les milieux et tous les publics, en particulier ceux qui sont exclus de la pratique physique et sportive d'entretien, femmes et personnes âgées par exemple. Il affiche également la certitude de ses fondateurs de défendre une démarche pionnière dans le domaine des activités physiques et sportives de loisir.

En 1979, la FFEPMM ajoute à son titre l'expression « Sports pour tous » comme pour réaffirmer son action en faveur du sport loisir et de la pratique sportive en tant que vecteur d'insertion et de développement personnel.