SCIENCE · BENCHMARKS

Nos résultats scientifiques, chiffrés, publiés, reproductibles.

Le Maximum Entropy Relaxation est comparé au generalized raking, la méthode classique de référence, sur des benchmarks standardisés : NPORS-derived, 4 à 40 attributs, contraintes ternaires. Au-delà de 28 attributs, son avantage est structurel. Résultats publiés en avril 2026 sur ArXiv.

LES BENCHMARKS COMME PRINCIPE

Une méthode qui n'est pas benchmarkée n'est pas une méthode scientifique.

Une méthodologie ne peut pas se contenter d'affirmer sa supériorité : elle doit la démontrer sur des benchmarks standardisés qui permettent la comparaison contradictoire. Sans benchmark, une méthodologie reste une hypothèse habillée. Ce principe est rarement respecté dans l'intelligence décisionnelle : méthodologies documentées sans confrontation à des benchmarks, performances annoncées sans reproduction possible, supériorités qualitatives revendiquées sans mesure quantifiable.

Imagine All The People publie ses résultats sur des benchmarks standardisés, avec des mesures reproductibles. Le papier Maximum Entropy Relaxation of Multi-Way Cardinality Constraints for Synthetic Population Generation, publié en avril 2026 sur ArXiv par François Pachet et Jean-Daniel Zucker, compare notre approche au generalized raking, la méthode classique de référence, sur des benchmarks NPORS-derived à 4-40 attributs et contraintes ternaires. Ces résultats sont accessibles à toute contestation par la communauté scientifique.

LES RÉSULTATS PUBLIÉS

Quatre résultats structurants du benchmark NPORS 2026.

SEUIL DE SUPÉRIORITÉ MAXENT

K ≥ 28

attributs avec contraintes ternaires : MaxEnt surpasse structurellement le generalized raking

ÉCHELLE DU BENCHMARK TESTÉ

4 à 40

attributs simultanés dans la population synthétique

MÉTHODE DE RÉFÉRENCE COMPARÉE

generalized raking

le standard des enquêtes statistiques officielles

PUBLICATION ET REPRODUCTIBILITÉ

ArXiv avril 2026

benchmarks reproductibles, code et méthodologie publiés

LA MÉTHODOLOGIE DU BENCHMARK

Comment nous comparons rigoureusement Maximum Entropy Relaxation aux méthodes classiques.

Le choix du benchmark NPORS-derived.

Nous avons construit notre benchmark à partir du National Public Opinion Reference Survey (NPORS), un jeu de données public de référence utilisé par la communauté scientifique en modélisation de populations. Ce choix est méthodologiquement structurant : il permet à tout chercheur tiers de reproduire nos tests à partir de données publiquement disponibles. Nos benchmarks ne sont pas propriétaires ou opaques : ils sont publics, standardisés et contestables.

Le paramétrage du benchmark.

Le benchmark teste la génération de populations synthétiques avec un nombre d'attributs variant de 4 à 40, incluant systématiquement des contraintes ternaires (satisfaction simultanée de distributions marginales unitaires, binaires et ternaires). Ce paramétrage couvre l'ensemble du spectre pratique des simulations réelles : les cas simples à quelques attributs jusqu'aux configurations complexes à plusieurs dizaines d'attributs croisés.

La comparaison avec generalized raking.

Nous comparons Maximum Entropy Relaxation avec le generalized raking, la méthode classique de référence en génération de populations synthétiques utilisée depuis plusieurs décennies dans les études statistiques et les enquêtes officielles. Cette comparaison contradictoire est structurante : nous ne nous comparons pas à des méthodes datées ou marginales, mais à la méthode standard actuellement utilisée par les acteurs publics et privés de la sociologie quantitative.

Les mesures de performance.

Nous mesurons la performance des deux méthodes sur des critères quantitatifs standardisés : écarts moyens aux distributions cibles sur les niveaux unitaire, binaire et ternaire, temps de convergence des solveurs, robustesse aux contraintes inconsistantes. Ces mesures sont documentées dans les tableaux et graphiques du papier ArXiv, accessibles à toute reproduction ou contestation.

Le résultat central.

Nos résultats montrent que Maximum Entropy Relaxation devient structurellement supérieur au generalized raking à partir de 28 attributs simultanés avec présence de contraintes ternaires. En dessous de ce seuil, les deux méthodes restent comparables et le raking peut même être plus efficace sur les configurations les plus simples. Au-dessus, l'avantage de MaxEnt croît structurellement : c'est le régime pratique des simulations réelles que nous conduisons pour nos clients, qui mobilisent typiquement 30 à 60 attributs croisés avec de nombreuses contraintes ternaires.

COMPARAISON TECHNIQUE DÉTAILLÉE

Maximum Entropy Relaxation face au generalized raking sur cinq dimensions.

Generalized raking (méthode classique)Maximum Entropy Relaxation (notre approche)
Régime de performance optimaleConfigurations simples, jusqu'à 20-25 attributsConfigurations complexes, au-delà de 28 attributs avec contraintes ternaires
Traitement des contraintes ternairesTraitement itératif approximatif, dégradation progressiveTraitement natif par formulation exponentielle-famille
Garantie théoriqueConvergence garantie sous conditions restrictivesOptimisation convexe avec garanties de convergence par L-BFGS
Robustesse aux contraintes inconsistantesDivergence possible en cas de contraintes mutuellement inconsistantesExtension convexe pénalisée pour cibles inconsistantes
Reproductibilité par tiers indépendantsMéthode publique documentée, largement implémentéeMéthode publique documentée, benchmarks NPORS reproductibles

LES PROCHAINS BENCHMARKS

Une production scientifique continue, pas un artefact unique.

Le benchmark NPORS 2026 est un jalon, pas un point d'arrivée. Nos équipes scientifiques travaillent en continu sur l'extension des benchmarks à des régimes plus exigeants et à des applications sectorielles ciblées. Trois axes de travail sont ouverts.

Extension au régime K supérieur à 20 par Persistent Contrastive Divergence.

Au-delà de 20 attributs simultanés, le calcul exact des espérances devient intractable. Nos travaux en cours étendent le framework Pachet-Zucker par une estimation stochastique par Gibbs sampling, permettant de préserver les garanties de convergence à des échelles significativement plus élevées. Cette extension ouvre l'accès aux benchmarks à plusieurs centaines d'attributs : régime pertinent pour les simulations sectorielles les plus complexes.

Benchmarks sectoriels calibrés sur données réelles.

Au-delà des benchmarks académiques standardisés, nous préparons des benchmarks sectoriels calibrés sur des configurations réelles : populations de consommateurs pour le retail et la grande consommation, populations de patients pour la santé, populations d'électeurs pour le champ politique, populations de collaborateurs pour les problématiques RH. Ces benchmarks sectoriels documenteront la performance de notre approche sur les configurations pratiques que nos clients mobilisent réellement.

Benchmarks de robustesse temporelle.

Un axe méthodologique nouveau : mesurer la stabilité des populations synthétiques dans le temps, en soumettant les mêmes populations à des scénarios successifs avec des paramètres de calibration évolutifs. Cette dimension temporelle des benchmarks est essentielle pour valider la robustesse des projections à plusieurs mois ou années, qui constituent une part croissante de nos livrables client.

L'ensemble de ces publications à venir sera référencé sur la page Papiers scientifiques dès leur mise à disposition.

Une décision à prendre, une population de synthèse qui y répond, un éclairage

Vous souhaitez approfondir nos benchmarks ?

Le papier ArXiv d'avril 2026 documente en détail la méthodologie, les résultats chiffrés, les tableaux comparatifs, les analyses de sensibilité. Il est accessible depuis la page Papiers scientifiques. Notre équipe scientifique est disponible pour répondre aux questions techniques, permettre la reproduction de nos benchmarks, ou discuter des configurations spécifiques à votre secteur. Les benchmarks sont ouverts à la contestation contradictoire : c'est précisément l'objectif d'une démarche scientifique.

Voir les papiers scientifiques →