Étude Longitudinale par Internet Pour les Sciences Sociales (ELIPSS)

Le champ de l’enquête est composé de l’ensemble des individus résidant en ménage ordinaire en France métropolitaine, âgés de 18 ans et plus, lisant suffisamment le français pour répondre à des questionnaires auto-administrés et acceptant de faire partie du panel. La participation de l’individu sera actée par l’acceptation des conditions de participation au panel et du traitement des données mis en place par le CDSP (Centre de Données Socio-Politiques).

Le panel ELIPSS prévoit la passation d’une vingtaine de minutes de questionnaire par mois, en pluriannuel. Les thèmes abordés et par conséquent les titres des différentes enquêtes sont ceux des projets déposés par les équipes de recherche et retenus par l’équipe ELIPSS, avec la participation du Comité scientifique et technique du CDSP et des avis extérieurs complémentaires si cela est jugé nécessaire. Un questionnaire principal, l’Enquête annuelle, est quant à lui administré tous les ans depuis 2013 (description du questionnaire ci-dessous).

L’objectif premier du panel ELIPSS est de mettre à disposition un outil de collecte de données à des fins de recherche scientifique ou statistique. Cet outil peut également se prêter à diverses expérimentations d’enquête en population générale. Toute finalité commerciale en est exclue.

Il poursuit un second objectif, celui de la mise à disposition des données produites à la communauté de recherche.

Les différents volets de l’Enquête annuelle, administrée chaque année, portent sur les caractéristiques socio-démographiques de l’individu et du ménage, le travail et la formation, le logement et le quartier de résidence, les revenus et le patrimoine, la sociabilité et les loisirs, la religion, la politique, la santé, les habitude de vie et les pratiques numériques.

Cette enquête collecte chaque année un ensemble d’informations socio-démographiques en vue de leur actualisation régulière ; une partie de ces variables est appariée aux jeux de données produits dans le cadre du panel.

Pour les autres enquêtes administrées au panel, les thèmes abordés seront ceux des projets qui seront retenus par l’équipe ELIPSS, avec la participation du Comité scientifique et technique du CDSP et des avis extérieurs complémentaires si cela est jugé nécessaire. Aucune thématique n’est a priori écartée et aucune démarche commerciale ne peut être associée au panel. L’appariement des informations du panel avec d’autres données extérieures (fiscales, santé, etc.) est exclu, au-delà des données disponibles dans la base de sondage.

L’Étude Longitudinale par Internet Pour les Sciences Sociales (ELIPSS) est un panel mis en place en 2012 dans le cadre de l’EquipEx DIME-SHS afin d’étudier l’évolution des comportements, des situations et des opinions dans la société française.

ELIPSS repose sur un échantillon de la population française métropolitaine âgée de 18 ans et plus. Ce panel a été constitué en plusieurs phases.

En 2012 et 2016, un échantillon initial a été tiré aléatoirement par l’INSEE dans les données du recensement puis exploité principalement en face-à-face.

En 2020, l’échantillon d’individus a été tiré, toujours aléatoirement, par l’INSEE dans la base de référence des données fiscales. Cette nouvelle vague de recrutement a été initiée en face-à-face, puis, en raison des conditions sanitaires liées à la propagation de la Covid19, s’est terminée en multi-modes (avec l’utilisation combinée de courriers, courriels et appels téléphoniques). Elle a permis d’ajouter 900 personnes au panel ELIPSS, pour atteindre au total 2 300 participant·e·s au 1er février 2021.

Le dernier rafraîchissement du panel s’est clos en mai 2023, répondant à ses deux objectifs principaux : augmenter la taille du panel et améliorer la représentativité notamment en termes d’âge. En octobre 2024, le panel total est composé de 2 200 participant·e·s et la faible représentation des plus jeunes est désormais corrigée.

Les 2 200 personnes qui composent l’échantillon sont invitées à participer chaque mois à une nouvelle enquête disponible en général pendant 4 semaines. L’invitation est désormais (depuis la fin de l’EquipEx) envoyée par e-mail et prend la forme d’un lien à cliquer. Les panélistes complètent le questionnaire via le support numérique de leur choix (ordinateur, tablette, smartphone). Un protocole de relances par mail et par téléphone est établi pour l’ensemble des terrains, celui-ci pouvant être adapté en fonction du taux de réponse en cours d’enquête. En moyenne, le taux de réponse à chaque enquête est de l’ordre de 80 %. On peut noter que la participation est également encouragée par l’attribution ponctuelle et non conditionnelle de gratifications matérielles aux panélistes, la plupart du temps sous la forme de bons-cadeaux.

Les premier·e·s utilisateur·rice·s du dispositif sont les chercheur·e·s associé·e·s aux projets de recherche (les « coproducteur·e·s »). Au cours de ses sept premières années d’existence – qui correspondent à la période DIME-SHS -, ELIPSS a compté 42 équipes utilisatrices « primaires » (pour 72 projets déposés et plus de 375 personnes impliquées), c’est-à-dire participant à la collecte et présentant des projets de questionnaire. Les membres de ces dernières ont ensuite pu bénéficier des données post-produites et pseudonymisées pour leurs recherches et l’ensemble de ces jeux de données ont été mis à disposition de l’ensemble de la communauté académique à partir du portail Quetelet PROGEDO Diffusion, et désormais à travers la plateforme data.sciencespo. Depuis la mise en place d’un nouveau modèle à partir de 2020, près d’une cinquantaine de projets supplémentaires ont fait l’objet d’une administration d’enquête auprès du panel.

Ce dispositif ouvert à l’ensemble de la communauté scientifique a permis d’accompagner de nombreux programmes de recherche originaux. Au global, le catalogue de données du CDSP est composé d’environ 120 jeux de données disponibles portant sur un spectre très large de disciplines en sciences sociales majoritairement en sociologie et science politique, mais aussi en économie, en psychologie ou encore en linguistique, etc. Ce succès auprès des équipes productrices confirme l’attractivité du panel et son rôle important pour la recherche en sciences sociales.

Par ailleurs, le dispositif ELIPSS a été présenté par l’équipe à de nombreuses reprises depuis 2013, dans de grands instituts français (Insee, Ined, CEREQ, etc.), dans des séminaires (Société française de statistique, Association française de science politique, Université de Lausanne, Université de Mannheim, etc.), dans des conférences en France et à l’étranger (conférence internationale des utilisateurs de Blaise, colloque francophone des sondages, European Survey Research Association – ESRA, European Sociological Association – ESA, Association française de sociologie – AFS, Webdatanet, Journée de méthodologie statistique de l’Insee, World Association for Public Opinion Research – WAPOR, European Congress of Methodology, etc.).

À cela s’ajoutent les nombreuses présentations des chercheur·e·s ayant réalisé une enquête grâce au panel ELIPSS ou ayant ré-utilisé ses données : on peut en particulier citer les deux ateliers consacrés à l’instrument DIME-Quanti à l’occasion des dix ans du CDSP, le colloque DIME-SHS de septembre 2018 ou encore la journée d’études “ELIPSS : 10 ans de production de données pour la recherche en sciences sociales” en juin 2023. Par ailleurs, on recense plus d’une centaine de publications mobilisant des données produites dans le cadre du panel ELIPSS (articles, ouvrages, parties d’ouvrages et rapports), aussi bien thématiques que méthodologiques.

L’un des résultats phare du dispositif est la parution en mai 2021 d’un ouvrage consacré à ELIPSS : «Un panel français. L’Étude longitudinale par internet pour les sciences sociales (ELIPSS)». Celui-ci mobilise à lui seul douze enquêtes réalisées dans le cadre du panel. Cette publication est aujourd’hui complétée par l’article «Construire un dispositif d’enquêtes longitudinales pour la recherche en sciences sociales : le panel ELIPSS» dans le numéro 74-1 de L’Année sociologique.

En plus de ces résultats scientifiques salués par la communauté de recherche, le dispositif ELIPSS a permis de mettre en place au sein du Centre de Données Socio-Politiques une expertise très largement reconnue et sollicitée en production d’enquêtes et suivi d’un panel longitudinal.

La dernière large consultation scientifique a été organisée en novembre 2019, afin de réaménager le questionnaire de l’Enquête annuelle, enquête phare du dispositif visant en particulier à recueillir les informations socio-démographiques des panélistes. Plusieurs représentant·e·s des partenaires sociaux ont été invité·e·s à prendre part à cette consultation et nous ont fourni leurs observations.

Grâce à cette consultation, le questionnaire de l’Enquête annuelle a été largement mis à jour en 2021, afin de mieux suivre les bonnes pratiques et de se conformer aux attentes des partenaires sociaux et besoins de la communauté de recherche.

Un complément à cette consultation a été organisé auprès du Comité scientifique et technique du CDSP en novembre 2023, ce qui a permis d’apporter quelques modifications et améliorations au questionnaire.

Depuis 2020, la comitologie du panel ELIPSS repose sur le Comité scientifique et technique du CDSP. Celui-ci, qui représente l’accompagnement scientifique majeur du panel ELIPSS, propose un suivi des missions régulières du CDSP et vise tant à étoffer les expertises que peut mobiliser le CDSP qu’à asseoir la légitimation de ses choix.

Par ailleurs, l’équipe ELIPSS s’est chaque fois appuyée sur les commentaires et retours du Comité du label pour améliorer le panel et sa méthodologie.

À l’origine du projet DIME-SHS se trouvent les nombreuses difficultés et le retard accumulé par la communauté académique française pour collecter des données en SHS soulignés par le rapport Silberman en 1999. L’équipement DIME-SHS tendait à répondre à ce problème tout en mobilisant les dernières technologies pour remplir ces missions. Depuis 2012 s’est donc progressivement mise en place puis déployée une expertise dans la conception, la passation et la documentation d’enquêtes quantitatives en sciences sociales dont la pérennisation apparaît encore cruciale aujourd’hui.

Le nouveau modèle mis en place en 2020 pour pérenniser l’instrument quantitatif de l’Equipex DIME-SHS depuis la fin du financement par l’ANR demeure fragile. Un recrutement aléatoire des personnes membres du panel est essentiel afin de garantir des données de qualité. Ainsi, disposer d’un échantillon individuel au travers de la base Fideli est une étape cruciale à la réalisation du projet. Cet aspect méthodologique constitue l’une des forces du dispositif et apparaît donc indispensable à la pérennisation du panel.

Le panel ELIPSS est un dispositif d’enquêtes transversales ou longitudinales qui vise à compléter – par des projets scientifiques – ou permettre le développement de nouveaux moyens d’enquêtes des institutions publiques. Il permet de mener des enquêtes sur des sujets non couverts par les enquêtes de la statistique publique, d’expérimenter pour cette dernière des questionnaires innovants, cela à travers notamment son échantillonnage aléatoire et sa dimension longitudinale.

Parmi les sujets non-traités par la statistique publique couverts par ELIPSS, les opinions politiques et sociales ont une place importante : en effet, les questionnaires administrés depuis 2012 ont porté sur de nombreuses questions d’opinion, telles que la politique, l’environnement, les représentations de l’État ou encore l’attitude face aux formes conjugales alternatives. Un autre thème d’enquête propre à ELIPSS est centré sur les pratiques numériques des répondant·e·s, s’inscrivant ainsi dans le prolongement des enquêtes Technologies de l’Information et de la Communication (TIC) de l’INSEE.

Un autre aspect important du dispositif est de permettre des expérimentations au niveau du mode de collecte. En effet, dans la perspective de favoriser la passation de questionnaires en ligne plutôt qu’en face-à-face ou par téléphone, l’expérience acquise avec le panel ELIPSS est déterminante, tant du point de vue du design d’enquête que du suivi d’un panel en ligne.

Il s’agit de collecter des données individuelles grâce à des questionnaires auto-administrés. Le suivi des panélistes dans le temps permet, outre d’importantes économies de moyens, la constitution d’une variété de données difficiles à collecter autrement. Notons enfin que l’appariement de ces données individuelles issues d’enquêtes successives est strictement encadré (voir le point sur les utilisateurs).

Aucune extension géographique n’est prévue.

Les premiers utilisateur·rice·s du dispositif sont les chercheur·e·s associé·e·s aux projets de recherche (les « coproducteur·rice·s »). Au cours de ses sept premières années d’existence, ELIPSS a compté 42 équipes utilisatrices «primaires» (pour 72 projets déposés), c’est-à-dire participant à la collecte et présentant des projets de questionnaire. Les membres de ces dernières ont ensuite pu bénéficier des données post-produites et pseudonymisées pour leurs recherches.

Depuis la mise en place d’un nouveau modèle à partir de 2020, près d’une cinquantaine de projets supplémentaires ont fait l’objet d’une administration d’enquête auprès du panel.

Les enquêtes sont proposées par des équipes de recherche aux profils variés, majoritairement en sociologie et science politique, mais aussi en économie, en psychologie ou encore en linguistique, etc.

Au global, le catalogue de données ELIPSS du CDSP est composé d’environ 120 jeux de données disponibles aux utilisateur·rice·s «secondaires» cette fois. Ces utilisateur·rice·s peuvent disposer des enquêtes documentées finement au sein du CDSP en utilisant une norme internationale (DDI, version Codebook). Ces données sont – pour la grande majorité – disponibles sur data.sciencespo.fr

L’utilisation de cette norme facilite la réutilisation des jeux de données par des chercheur·e·s, doctorant·e·s ou étudiant·e·s.

On dénombre également dans l’utilisation de ces données, des usages pédagogiques. Pour favoriser cet usage, le CDSP a également constitué trois jeux de données pédagogiques à partir de jeux de données produits dans le cadre du panel ELIPSS.

Enfin, le potentiel d’analyse secondaire est amplifié par la possibilité de faire des “demandes sur mesure”. Il s’agit d’accéder à des jeux de données qui vont croiser des variables provenant de différentes enquêtes réalisées avec ELIPSS. Ce procédé reste néanmoins encadré, et les demandes d’appariement doivent être justifiées (projet scientifique et proportionnalité des demandes).

La période de collecte prévue pour l’enquête de recrutement est de septembre à décembre 2025. À la suite de l’inclusion dans le panel, les enquêtes sont administrées mensuellement (à l’exception du mois d’août et du terrain d’enquête réservé à l’Enquête annuelle).

Le mode de collecte est un questionnaire à compléter par Internet (Computer-Aided Web Interview) sur l’appareil du ou de la répondant·e. Depuis 2020, les panélistes répondent aux différentes enquêtes avec leur propre matériel via un lien personnel envoyé par e-mail.

Depuis 2020, la comitologie du panel ELIPSS s’appuie sur celle du CDSP, en particulier son Comité scientifique et technique. Celui-ci, qui représente l’accompagnement scientifique majeur du panel ELIPSS, propose un suivi des missions régulières du CDSP et vise tant à étoffer les expertises que peut mobiliser le CDSP qu’à asseoir la légitimation de ses choix. Ainsi, le CST du CDSP a pour missions :

• de contribuer à la veille scientifique et technique devant permettre l’évolution régulière des techniques, savoirs-faire, et offres de services du CDSP ;

• de contribuer à étayer la pertinence des choix majeurs faits par le CDSP, que ce soit dans ses missions de documentation, de diffusion ou de production de données (réflexion sur les standards, certification, choix méthodologiques, etc.) ;

• de contribuer à l’évaluation des propositions de collaborations (collaborations sur des projets de recherche, dépôts de données, etc.) pour permettre la décision du Conseil du CDSP sur ces questions quand ce dernier souhaite se saisir d’un avis extérieur ;
• de contribuer à l’attractivité et au rayonnement de l’unité, en constituant des relais auprès des communautés techniques et de recherche, et en participant aux activités de valorisation de l’unité ;
• de contribuer à renforcer les liens avec les utilisateurs des services du CDSP.

La composition du CST au printemps 2022 était la suivante :

• Gwennaëlle Brilhaut (Insee)
• Joachim Dornbusch (DSI, EHESS)
• Thomas Dubois (Insee)
• Sophie Forcadell (Sciences Po DRIS)
• Christophe Giraud (UP, Cerlis, professeur de sociologie)
• Olivier Godechot (Sciences Po, OSC, directeur du MaxPo)
• Cécile Lefèvre (UP Cerlis, professeure de sociologie)
• Sébastien Oliveau (AMU, MCF géographie, Directeur de Progedo)
• Thomas Merly-Alpa (Ined)
• Anne Revillard (Sciences Po LIEPP-OSC, Ass. prof. en sociologie)
• Jan Rovny (Sciences Po CEE, Ass. prof. science politique)
• Benoît Tudoux (PUD Nanterre, IE, bureau de MATE-SHS)

Ce CST est en cours de renouvellement en prévision d’une prochaine réunion au printemps 2025.

Malgré les contraintes certaines qu’engendre le dispositif prévu pour les panélistes, l’expérience ELIPSS montre que la constitution d’un panel de ce type est possible et qu’elle présente des garanties solides.

Pour les panélistes, la charge de 20 minutes en moyenne par mois de questionnaire dont le contenu n’est pas connu à l’avance et dont les thèmes sont très divers, est importante, sans compter que l’accumulation de données personnelles au fil du temps peut susciter des craintes. Par ailleurs, il est prévu de poser des questions sensibles sur les comportements politiques ou les opinions, par exemple. Pour minimiser autant que possible les biais de sélection et l’attrition, l’établissement d’une relation de confiance est fondamentale. Différentes méthodes pour limiter l’attrition seront en outre mises en œuvre. Sur la période 2012-2019, ces incitations et encouragements à la réponse étaient de quatre types : publication de synthèses grand public, mise à disposition d’une tablette et d’un abonnement Internet 4G individuel, relances individuelles par courrier et téléphone. Depuis 2020, la tablette tactile et l’abonnement Internet mobile ne sont plus fournis aux panélistes. Ces derniers répondent aux différentes enquêtes avec leur propre matériel via un lien personnel envoyé par e-mail. Une compensation des panélistes, avec la distribution ponctuelle de chèques cadeaux, a été mise en place afin de minimiser le taux d’attrition du panel. Par ailleurs, les panélistes reçoivent une newsletter trimestrielle.

Afin d’alléger la charge des répondant·e·s, les questionnaires peuvent être complétés en plusieurs fois et sur des supports différents. Un tronc commun comportant les principales caractéristiques socio-démographiques est administré annuellement pour éviter la répétition de ces questions à chaque enquête. Plusieurs relances sont prévues.

Par ailleurs, le rôle de gestionnaire du panel est indispensable dans le bon fonctionnement du dispositif.

Les gestionnaires du panel sont l’interface de communication auprès des panélistes pour – entre autres – faciliter l’intégration des personnes recrutées au sein du panel et répondre à toutes leurs questions, par mail ou via une permanence téléphonique tout au long de leur participation. Les gestionnaires de panel veillent aussi au suivi du terrain et assurent la relance (téléphonique et par courrier) des panélistes non répondant·e·s afin d’optimiser les taux de réponses et participer à limiter l’attrition du panel.

Enfin, les commentaires libres de fin d’enquête permettent d’évaluer la perception des enquêté·e·s et d’ajuster les formulations à venir des questionnaires proposés.

Ces différents aspects ont permis d’atténuer les contraintes pour les enquêté·e·s, et ainsi d’observer un faible niveau d’attrition couplé à des taux de réponses élevés. En mars 2019, une enquête auprès des panélistes sur leur participation à ELIPSS avait révélé que 95% étaient satisfaits ou très satisfaits du panel, et illustrent les rapports privilégiés des participants au panel.

Afin d’assurer la qualité de l’échantillon, ce dernier sera tiré au sein de la base Fidéli, qui a l’avantage d’être individuelle et donc de permettre de s’adresser directement à la personne figurant dans le fichier.

Par ailleurs, le plan de sondage prévoit à nouveau de corriger certains biais du panel par un sur échantillonnage des plus jeunes par exemple.

Des recrutements complémentaires afin de pallier l’attrition et assurer la représentativité transversale de l’échantillon sont envisagés tous les deux ans (sous réserve de disposer de financements suffisants). Enfin, un système de pondérations sera calculé afin de permettre des estimations, tant transversales que longitudinales.

La première enquête (Enquête annuelle) administrée au nouvel échantillon aura lieu en janvier-février 2026.