2. Ordre du jour
1. Point sur l’Audit de l’étude PREMIUM
2. Synthèse du séminaire EMRO 2009
3. Cross médias : échanges en cours
4. Rapprochement des études SIMM et TGI
5. Questions diverses
2
4. Mise en place de l’Audit
Fin décembre 2008 : demande d’un Audit de la part d’Audipresse
8 janvier 2009 : présentation du projet d’étude au Comité Scientifique par TNS et
Audipresse
5 février : réunion à Audipresse avec TNS, IPSOS et le CESP pour préparer les briefings
12 février : premiers Briefings BtoB et BtoC à TNS (site de Malakoff)
19 février : premier Briefing BtoB et BtoC à IPSOS (site de Plérin)
23 février : envoi d’une note à Audipresse avec les premières remarques du CESP
23 février - 24 février : envoi au CESP des liens permettant d’accéder aux questionnaires
on line (audience et media marché) TNS et IPSOS
26 février : premier retour au Comité Scientifique
30 mars : réunion avec Audipresse et envoi d’une demande d’informations sur les fichiers
utilisés, le classement des appels téléphoniques et le suivi des questionnaires online.
4
5. Informations demandées à Audipresse
Qualité et rendement des fichiers utilisés (Sirène pour le BtoB, ? pour le
BtoC)
Nombre de numéros nécessaires pour aboutir à un recrutement
Classement du résultat des appels
Taux de chute à chaque étape du questionnaire de recrutement :
• Refus de répondre au questionnaire de recrutement
• Pas d’accès à Internet
• Pas d’adresse mail
• Hors cible revenus (recrutement BtoC)
• Refus revenus
• Appartenance à la cible BtoB (recrutement BtoC)
5
6. Informations demandées à Audipresse
Taux d’acceptation de l’envoi du lien
Questionnaire d’audience online :
• Taux de retour pour l’ensemble, le BtoB, le BtoC et par cible
• Taux d’abandon par chapitre du questionnaire
Questionnaire Media marché :
• Taux de retour pour l’ensemble, le BtoB, le BtoC et par cible
• Taux d’abandon par chapitre du questionnaire
6
7. Contrôle du CESP sur la réalisation de l’étude
Les différents types d’intervention prévus avant le lancement de l’étude :
• Présence du CESP à toutes les séances de formation des enquêteurs
• Ecoutes téléphoniques sur la phase de recrutement BtoB et BtoC (objectif :
environ 2% des envois de lien)
• Contrôle de la phase de relance BtoB et BtoC
• Contrôle par rappel téléphonique des interviewés sur les questionnaires
online (audience et médias marchés)
7
8. Contrôles du CESP
Du 12 février au 17 juin 2009 TNS Sofres IPSOS TOTAL
Malakoff Bordeaux Plérin
BtoB BtoC BtoB BtoC
Nombre de briefings 3 2 2 1 8
Nombre de briefings avec présence du CESP 3 2 1 1 7
Nombre d'enquêteurs briefés 33 20 30 30 113
Nombre d'enquêteurs écoutés 25 16 30 25 96
Nombre total de jours de présence du CESP (brief ou écoutes) 20 19 39
8
9. Contrôle du recrutement BtoB
Du 12 février au 17 juin 2009 TNS Sofres IPSOS TOTAL
Nombre de contacts écoutés 69 95 164
avec recrutement 44 83 127
sans recrutement 25 12 37
- Refus de réception du lien 0 5 5
- Hors cible revenus NSP 0 0 0
- Hors cible revenus refus 3 1 4
- Hors cible PCS 9 4 13
- Hors quotas 8 2 10
- Abandon en cours 5 0 5
1,3 contact en moyenne pour un recrutement réalisé
9
10. Contrôle du recrutement BtoC
Du 12 février au 17 juin 2009 TNS Sofres IPSOS TOTAL
Nombre de contacts écoutés 128 77 205
avec recrutement 20 19 39
sans recrutement 108 58 166
- Refus de réception du lien 0 0 0
- Revenus insuffisants 72 38 110
- NSP revenus 3 2 5
- Refus revenus 9 4 13
- Hors domicile principal 1 1 2
- Hors cible (foyer éligible sur BtoB) 2 0 2
- 1ère partie* 12 5 17
- Hors quotas 6 7 13
- Abandon en cours 3 1 4
*L'individu en ligne n'est pas éligible (car éligible sur BtoB ou hors quotas) et une autre personne du foyer est éligible mais absente.
5,3 contacts en moyenne pour un recrutement réalisé
10
11. Contrôle des relances BtoB
TNS Sofres IPSOS TOTAL
Du 12 février au 17 juin 2009
Nombre de relances écoutées 32 61 93
11
12. Audit de l’étude Audipresse Premium
Terrain de l’étude terminé
Traitement des résultats par Carthage
Réunion Cesp/Audipresse/Carthage (30 juin) pour préparer l’Audit
Résultats transmis au CESP en juillet
Publication des résultats de l’étude par Audipresse début septembre
Audit du CESP prévu première quinzaine de septembre
Amélioration des relations avec Audipresse sur le suvi de l’étude
12
13. NextRegie et étude Premium
L’étude Premium comporte un volet d’habitudes d’écoute de la radio par station
et BFM radio ne figure pas dans la liste des radios citées, alors qu’elle figurait
dans la FCA. NextRégie considère qu’il y a préjudice et a interrogé le CESP sur
ce point.
Courrier du CESP adressé à Audipresse :
- Il aurait été justifié d’intégrer dans l’étude PREMIUM cette station très majoritairement
écoutée par la population des cadres et des chefs d’entreprise.
- Cet oubli pose un problème méthodologique lié à la définition des objectifs de l’étude et au
champ de l’enquête. L’étude Premium est-elle une étude d’audience de la presse ou une
étude plurimédia? Comment a été arrêtée la liste des supports étudiés et sur quels
critères ?
- Le CESP n’a pas eu connaissance du contenu des questionnaires Premium avant le
lancement de l’étude sur le terrain et n’a à aucun moment été consulté à ce sujet.
La liste des supports étudiés n’est pas la priorité du CESP sauf si son
engagement sur les questionnaires était demandé par ses adhérents.
13
14. Appel d’offres - étude One
Audipresse a proposé au CESP de participer aux réunions de
préparation de l’appel d’offres sur le projet d’étude unique pour la
presse.
14
16. Séminaire EMRO 2009
Helsingor (Danemark) -16 au 21 mai 2009
20 pays représentés
66 participants
30 exposés :
• Presse : 8
• Presse + Internet : 3
• Radio : 4
• Télévision : 3
• Affichage : 1
• Cross-médias : 1
• Méthodologie : 6
16
17. Séminaire EMRO 2009
Presse :
• Comparaison des modes de recueil :
recrutement (face à face / téléphone / access panel / on line)
recueil des données (PAPI / CATI / CAPI / DS CAPI/ CASI / CAWI)
Norvège : Etude d’audience de la presse magazine réalisée par Synovate
pour l’association des magazines norvégiens (MUF)
Test de solutions alternatives au face à face (QAA et online)
17
24. Séminaire EMRO 2009
Presse :
• Comparaison des modes de recueil :
recrutement (face à face / téléphone / access panel / on line)
recueil des données (PAPI / CATI / CAPI / DS CAPI/ CASI / CAWI)
Finlande : Etude presse sur CATI
Test d’une combinaison de plusieurs modes d’interviews pour
les individus injoignables par téléphone
– recrutement téléphonique + QAA ou questionnaire online
– recrutement postal + QAA ou questionnaire online
Solution abandonnée pour des problèmes de taux de réponse et de coûts
24
25. Telephone Penetration in Households
Source: Statistics Finland
Fixed line Mobile phone Company mobile phone ONLY company mobile phone
100
90
80
70
60
50
40
30
20
10
0
26. Séminaire EMRO 2009
Presse :
• Nouvelle mesure d’audience de la presse (Specific Issue
Reardership) - alternative à la Recent Reading (LDP)
audience mesurée numéro par numéro avec présentation des couvertures
habitudes de lecture mesurées directement
accumulation de l’audience dans le temps
Présentation de NOM/Intomar - GFK (Pays-Bas) : méthode SIR
26
27. Séminaire EMRO 2009
Nouvelle étude d’audience de la presse aux Pays-Bas :
• Depuis octobre 2006
• Échantillon aléatoire + échantillon online (access panel)
• Méthode S.I.R.
• Questions posées :
Filtre 12 mois
Provenance (habitude)
Quels numéros lus ? (nombre de numéros présentés différent
selon les périodicités)
27
32. Séminaire EMRO 2009
Nouvelle étude d’audience de la presse aux Pays-Bas :
• Avantages :
mesure de l’audience + nouvelles données sans coût additionnel
pas d’allongement du questionnaire
audiences et données complémentaires recueillies auprès des
mêmes individus
pour les quotidiens, audience selon les jours de la semaine
pour les magazines, accumulation de l’audience dans le temps et
planning temporel
• Inconvénients :
nécessité d’un ajustement pour certains titres
calage des données de l’échantillon online sur l’échantillon aléatoire
32
33. Séminaire EMRO 2009
Présentation de l’AG.MA (Allemagne) - test MediaScan :
• Test réalisé dans le cadre de l’étude d’audience de la presse :
lecteur de codes barre proposé à la fin de l’interview face à face
plusieurs configurations testées :
– Une/deux semaines de panélisation
– Présentation du lecteur en réel ou sur photo
– Incentive 10€/30€
• Résultats :
taux de réponse : 26%
période de panélisation de deux semaines minimum
33
34. Séminaire EMRO 2009
Présentation de l’AG.MA (Allemagne) - test MediaScan :
• Types de données recueillies :
nombre de prises en main
durée de lecture
accumulation de la lecture d’un numéro dans le temps
moment de la lecture (dans la journée, dans la semaine, dans le
mois, etc.)
• Objectif : modéliser ces données pour les ajouter aux
données d’audience
34
35. Séminaire EMRO 2009
Présentation de l’AG.MA (Allemagne) - test MediaScan :
• Comparaison des résultats Mediascan/ carnet de lecture :
durée totale de lecture inférieure avec le Mediascan (-20%)
moins de titres lus, moins de prises en main, moins de temps de
lecture, notamment pour :
– les quotidiens
– les programmes TV
– les hebdomadaires
• Explications :
sous déclarations avec Mediascan
réponses en termes d’habitude dans le carnet de lecture
• Automne 2009 : nouveau test (deux scanners différents)
35
36. Séminaire EMRO 2009
Presse + internet :
• L’incidence du site Internet sur l’audience du quotidien ou
du magazine dans l’étude d’audience de la presse
Danemark : "online and paper reading in the Danish NRS"
36
37. Average Circulation and Average Issue Readership
Circulation, Dansk Oplagskontrol Readership, Index Danmark/Gallup
160 500
450
140
400
120
350
100
2Tab 300 2Tab
3Land 3Land
80 Busi 250 Busi
Niche Niche
4Reg 200 4Reg
60
150
40
100
20
50
0 0
2005 2006 2007 2008 2005 2006 2007 2008
Generally going down Going up, going down, going steady
Distinguishing between online and paper reading in the Danish NRS > Background
5
38. Readers per copy
Dansk Oplagskontrol and Index Danmark/Gallup 2005-2008
6,0
5,0
4,0
3,0
2,0
1,0
0,0
Tabloid Morning Business Niche
2005 2006 2007 2008
Increasing number of readers per copy
Distinguishing between online and paper reading in the Danish NRS > Background
6
39. Séminaire EMRO 2009
Danemark : Audience presse et online
• Test réalisé dans le cadre de l’étude d’audience de la presse
pour les quotidiens en déc. 2007 et mars 2008 :
Etude CATI :
– introduction précisant que la consultation du site n’était pas à prendre en
compte
– question filtre
– date de dernière lecture
– Habitude de lecture
Pour chaque titre lu au niveau LDP, ajout d’une question : "l’avez-vous
lu sur papier, sur le site ou les deux ?"
39
40. Morning
Distinguishing between online and paper reading in the Danish NRS > Setting up the test
13
41. Tabloid
Distinguishing between online and paper reading in the Danish NRS > Setting up the test
14
42. Business
Distinguishing between online and paper reading in the Danish NRS > Setting up the test
15
43. Niche
Distinguishing between online and paper reading in the Danish NRS > Setting up the test
16
45. Magazines – Web Only > 3%, Q3 2008
Distinguishing between online and paper reading in the Danish NRS > Setting up the test
18
46. Magazines – Number of Titles, Web Only% = X
All titles with Online only >= 2% will
be adjusted
Distinguishing between online and paper reading in the Danish NRS > Setting up the test
22
47. Séminaire EMRO 2009
Danemark : Audience presse et online
• Reconduction du même test pour les magazines, fin 2008
• Depuis janvier 2009, question posée pour tous les titres LDP
dans l’étude d’audience
• Ajustement des audiences de la presse pour tous les titres
dont la part de lecteurs étant exclusivement WEB est
supérieure à 2%.
47
48. Séminaire EMRO 2009
Presse + Internet :
• L’audience de la marque : deux approches très différentes
Questions sur la fréquentation des sites de presse posées dans l’étude
d’audience (audience dédupliquée du titre et de son site auprès des
mêmes individus) - cf. EPIQ
Questions sur la fréquentation des sites de presse posées dans l’étude
d’audience pour servir de variables relais pour un rapprochement avec
les données d’audience Internet - cf. AEPM
Grande Bretagne : "Newspaper and website data integration"
France : "deux façons de mesurer l’audience d’un titre et celle de son site"
48
49. Séminaire EMRO 2009
Presse (méthodologie) :
• Prise en compte des exclusifs mobile dans l’échantillon
• Méthodes alternatives pour interroger les individus non
joignables sur ligne fixe
Espagne : Intégration des exclusifs mobile dans l’échantillon
Finlande : - test sur l’utilisation du fichier des téléphones mobiles
professionnels
- test sur l’envoi d’un questionnaire postal ou d’un
questionnaire online aux individus non joignables sur ligne fixe
Suisse : envoi d’un questionnaire postal ou online aux individus non
répertoriés dans l’annuaire téléphonique
49
52. Séminaire EMRO 2009
Presse (méthodologie) :
• Effet du partage du questionnaire média marchés en deux
Peu d’incidence sur les résultats
• Effets d’ordre dans les questionnaires auto-administrés
La rotation des blocs à l’intérieur du questionnaire a beaucoup
moins d’impact que la rotation des items dans une même liste
Suisse (WEMF - REMP) : Mach comsummer et MA leader
52
54. Architecture Cross Média
Audiences observées Traitements et Résultats mis à la
modélisations « Greffe des données »
avec Audit CESP disposition du marché
intermédiaires
AEPM
Fusion Presse Fusion
(Sociologiciels) Fusionnée (Sociologiciels)
EPIQ
MEDIAMAT
Fusion
(Sociologiciels)
MEDIACABSAT HUB Logiciel
Enquête sur 5 000 de Résultats
individus (panel radio)
restitu-
126 000
tion
?
Panel Radio
Modélisation Tous lieux
Fusion
Net Ratings tous lieux (modélisés)
(Sociologiciels)
Données
Enquêtes Modélisations Affimétrie
Fusion
Affimétrie Affimétrie modélisées (Sociologiciels)
54
=Référence
55. Champ de l’audit du CESP
Production du fichier Cross-Médias (1)
Audit du Hub Audit de la Fusion
1. Échantillon, questionnaire 1. Méthodologie de la fusion
2. Terrain 2. Restitution des données de
3. Propriétés et variables requises référence
pour une fusion 3. Contrôle des duplications
Enjeux de l’audit
• HUB :Robustesse des habitudes médias recueillies pour servir de socle au
dispositif global (au-delà du panel radio)
• Fusions : Capacité à estimer les duplications entre médias et entre supports de
médias différents
• Résultats : Validation
(1) cf. Cahier des charges de l’audit en date du 5/12/2008 55
56. Timing
(3)
Terrain (1) HUB V0 HUB V1 + HUB V2
Fusions
Sociologiciels (2)
Résultats Résultats V0 Résultats V2
Commercialisation en cours
AUDIT et ACCOMPAGNEMENT du CESP RÉSULTATS
(1) 5.000interviews par vague
(2) Fusions Hub et enquêtes Audipresse et Médiamétrie TV et Internet
DE L’AUDIT
(4)
(3) Décision en cours
56
(4) Sous réserve du respect du calendrier de fourniture des informations
57. Données alimentant l’audit Cross-Médias
Contrôle du hub
• Fourniture de questionnaires pour relecture et contre enquêtes téléphoniques
– 10% des questionnaires papier
– La totalité des questionnaires en ligne
Contrôle des fusions
• Descriptif détaillé de la méthodologie complète
• Accès à l’interface utilisateurs
• Accès aux différents fichiers de données individuelles :
– AEPM, EPIQ, Médiamat, NetRatings, HUB (≈ panel radio)
– Fichier « déplié » (46 611 lignes alimentant l’interface)
• Traitements spécifiques demandés à Médiamétrie et Socio-logiciels
• Échanges très réguliers avec Médiamétrie
57
58. Enjeux/objectifs de l’audit Cross-Médias
Contrôle du hub
• Robustesse des informations servant de socle à l’ensemble du dispositif Cross Médias
Contrôle des fusions
• Restitution des audiences des études de référence (niveaux sur cible, duplications intra-
médias…)
• Contrôle du « dépliage »
• Contrôle de la pondération du fichier déplié
• Contrôle des différentes fusions (dont « validation croisée »)
• Vraisemblance des duplications inter-médias
58
59. Etat d’avancement de l’audit
• Convention d’audit signée le 17 juin par Médiamétrie, Audipresse, Affimétrie
et le CESP
• Un communiqué de presse va être publié suite à la signature de tous
• Premier retour fait auprès de Médiamétrie et ses partenaires
– Sur la partie fusions (« dépliage » du fichier, fusions presse)
• Contrôles sur le Hub
– Relectures effectuées
– Contrôles de la partie online en cours
59
61. POINTS D’INFORMATION
Autres audits en cours :
• Etude SPG (mesure de l’exposition aux gratuits de petites
annonces)
• Etude CESSIM (étude d’audience de la presse médicale)
Collège CESP :
• Internet : vendredi 17 juillet à 9h
61
