Quatre règles basiques pour des nouvelles d'enquêtes

M'envoie une lectrice (merci, Inés) un lien à la page fantastique PHD Comics, qui raille normalement la vie académique, mais qui cette fois a écrit dans une seule une bande, quatre leçons basiques de statistique pour des journalistes.
"Piled Higher and Deeper" by Jorge Chamwww.phdcomics.com
Ma traduction rapide :

Chers médias,
Après avoir donné des nouvelles de résultats d'enquêtes, s'il vous plaît, prêtez une attention aux suivantes sugerencias:1. Si deux enquêtes se distinguent dans moins que la marge d'erreur, il n'y a pas de nouvelle. (Dans la vignette) : "Les données d'enquête pour le candidat O s'écroulent!!!")
2. Les faits scientifiques ne se déterminent pas à des enquêtes d'opinion publique (Dans la vignette) : Une chaîne de nouvelles médiévales. "Oui, Galiléen, mais : qu'est-ce qu'il nous dit des dernières enquêtes qu'ils disent que la terre est plate ?"
3. Une enquête de ses spectateurs / lecteurs d'Internet n'est pas une enquête scientifique (Dans la vignette) : Un speaker : Et maintenant, pour remplir un temps d'émission, une enquête qui montre que les gens qui pensent comment j'il est d'accord avec moi. (Dans l'affiche) ai-je raison ? Bien sûr 99 % je me casse d'un rire 67 %
4. Ça va si toutes les enquêtes incluent l'option "ne m'importe-t-il {-elle} pas ? (Dans la vignette) : Ici les résultats de l'enquête sont votaciónCandidato A : 30%Candidato B : 26%Lo qui est : 44 %
Signé : quelqu'un qui a donné un cours basique de statistique

Qui sonne tout si familier dans un cómic qui s'écrit aux États-Unis, il nous fait voir que, comme une amie dit, "everywhere boil beans".

Obama a jeté la serviette

Comme savent mes amis, je suis un lecteur avide de nouvelles de la politique nord-américaine. C'est pourquoi quand aujourd'hui j'ai vu la couverture Du Pays, je suis resté d'une pierre, quand avait vu ce titulaire à quatre colonnes :
Obama abandonne son programme de réformes après avoir perdu le Massachusetts
Conio: qu'est-ce qui a passé ? quand ? où ? Comment consiste-t-il en ce que je n'ai rien lu aux pages américaines que je suis ? Tant d'heures mène-je sans lire la presse américaine ?
Quand je suis revenu à une maison et je m'ai connecté à Internet j'ai vu qu'effectivement, Tu ni Escroques le New York, ni le Washington Post, l'Huffington Post ils semblent avoir appris le primeur Du Pays. En fait, le contenu de la nouvelle révèle que le président maintient ses compromis, mais le correspondant a interprété qui bien qu'il dise une chose, pense l'autre :

Le président a admis dans son discours d'hier que la réforme sanitaire avait souffert d'un revers sérieux dans la dernière semaine pour bonheur des compagnies d'assurance et des coalitions d'intérêts. Bien qu'il dît que cela continuait d'être son objectif, la création d'un nouveau système de santé est déjà clairement en dehors des priorités de l'Administration.
...
Impossible dans ce climat essayer maintenant, comment il était prévu, la discussion des autres de grands projets de la Maison Blanche, comme la réforme énergétique, la protection de l'environnement ou de la réforme éducative. Bien que le renoncement ne soit pas officiellement accepté aux promesses électorales, un porte-parole de la Maison Blanche a reconnu que dans ces moments il était nécessaire "se tranquilliser et prendre une bouffée d'air". [des caractères gras additifs]

Pendant ce temps, les moyens locaux n'ont pas encore développé la capacité du journaliste espagnol et de fait, le New York Escroque il obtient un titre "Obama, avec un ton provocant, promet pousser ses plans" (Obama, With Defiant Tone, Vows to Push Agenda) et il commence ainsi sa nouvelle :

President Obama, striking à non - retreat, non - surrender posture in the wake of his party's humiliating defeat in the Massachusetts Senate race this week, vowed Friday to press on with his expansive domestic un agenda — including à health care overhaul and tough new restrictions on banks — even if it meant ai had to “take my lumps” from political critics.
[Plus ou moins : Le président Obama, en adoptant de position de retraite ni reddition après l'échec humiliant de son parti dans l'élection au sénat dans Massachusetts de cette semaine, il a promis vendredi continuer avec ses vastes plans de politique nationale - en incluant une réforme du système de santé et de nouvelles restrictions dures aux banques - même si cela impliquait emporter quelques coups de ses critiques politiques]

Quels amateurs.

Un Untel et un Untel

Il m'envoie, Eduardo (mille merci) cette photo amusante de l'Abc d'aujourd'hui. Il est de la chronique du parti entre le Depor et l'Athletic. Comme le dit Eduardo : ces semelles que le diable charge!

Chávez et le tremblement de terre

Je lis dans Magonia que la nouvelle de l'Abc qui a dit que Chávez accuse des EU de provoquer le séisme de l'Haïti, c'est une distorsion considérable de la réalité. Comme il a passé à Luis Alfonso, et je suppose qu'à des autres beaucoup de gens, j'eusse vu de passée la nouvelle et je me suis cru que ce pouvait être certain, en connaissant le personnage.
Mais en réalité, la propre nouvelle se séparait déjà du titulaire, puisque celui-ci attribue personnellement Chávez quelque chose qui selon la nouvelle avait dit "un communiqué de presse de l'exécutif" qui était apparu dans le web d'un canal de télévision étatique. Cependant, comme il est facile de vérifier, le texte a été publié sans signature dans la section d'Opinion sur la page Web de la télévision, bien qu'il soit rédigé par format plutôt d'une nouvelle. Par aucune partie on ne dit que c'est un communiqué de presse du gouvernement.
Naturellement, une télévision publique en actuelle Venezuela n'est pas l'une un milieu ni moyennement indépendant. Mais cependant, attribuer directement à Chávez le contenu de tout ce qui est dit dans elle est évidemment une exagération.
Que je sache le journal il n'a pas rectifié. Je trouve seulement une nouvelle version de la nouvelle, qui a éliminé l'attribution à Chávez du titulaire, mais il la maintient dans le sous-titre.
Pendant ce temps, quelques moyens de tout le monde ont recueilli la nouvelle d'Abc, avec différent degré de finesse et de nuance au sujet de l'attribution à Chávez ou à la télévision publique. Un grand succès du journalisme espagnol.

Subidón du crédit hypothécaire

Il dit aujourd'hui Le Pays que La banque reouvre le robinet du crédit aux acheteurs de logement. Le texte, comme vous pouvez voir, ne contient pas réellement de données "dures". Seulement des impressions, des opinions d'experts (souvent anonymes)...
Mais à l'édition dans un papier apparaît un graphique spectaculaire, qui lui fait à dire l'un : "ça alors, oui qu'ils changent les choses". Il est ce :

Avant que vous n'excitiez de plus de compte, jetiez un coup d'oeil aux nombres d'axe vertical : la valeur minimale est 1.049.000 (des millions d'euros) et du maximum 1.063.000. C'est-à-dire que le subidón du graphique, depuis la valeur minimale de février au maximum d'un novembre est de... un peu plus de 1,3 %.
Un exemple de livre de comment l'usage des axes tronqués sert à transmettre une impression visuelle qui a peu à voir avec les nombres qui existent derrière. D'autre part, la variable choisie, qui est le solde des actifs hypothécaires vifs (il devrait avoir été spécifié dans le graphique), peut-être n'est pas plus adaptée pour illustrer, précisément, le rythme de concession de crédits, puisque le changement mensuel est petit, par rapport au total accumulateur existant. Cela se trouve meilleur dans un graphique qui représente justement le changement mensuel de ce solde d'actifs hypothécaires, comme cela du dernier rapport de l'AHE (pdf) :

Le graphique est discutable par d'autres raisons, et c'est trop compliqué, je suppose, pour un journal (peut-être avec lignes au lieu des barres il serait publicable). Mais au moins il permet de voir comment 2009 a commencé très mal (les nouveaux prêts étaient plus petits que les amortissements en janvier et février) et tout de suite est allé un peu mieux (le solde d'actifs a grandi dans tous les mois de moins je pais qui a toujours été flemmard). Mais il permet de voir aussi que la récupération a été très faible : le solde grandit à peine en septembre, octobre et novembre, et tous les chiffres sont pires que celles qui existaient même au début de 2008 (ne disons pas déjà les années précédentes). Franchement, hors de danger dont il a passé depuis un novembre, parler de que les banques "ouvrent le robinet" semble risqué.

Subidón du crédit hypothécaire (2)

La courbe d'hier Du Pays avait pas seulement des problèmes d'échelle. De plus, comme j'ai signalé de passée, la variable à laquelle il se référait était le solde vif total des prêts hypothécaires existants en Espagne, qui ne peut pas être liée directement aux prêts pour l'achat de logement accordés chaque mois, déjà quea) il inclut tant des prêts pour logement comme d'autres prêts hypothécaires (des promoteurs, tu t'ingénies, agraires, commerciaux). b) à l'être le solde net des actifs, est le résultat de la différence entre des actifs des nouveaux prêts et d'actifs réduits par amortissement et annulation. Ainsi, une augmentation de 2.000 millions des actifs peut être le résultat de la concession de 4.000 millions et de l'amortissement de 2.000, et de la concession de 10.000 millions et de l'annulation de 8.000.
Par conséquent, si ce que nous voulons savoir est comment va la concession de crédit sur un logement, les données de l'AHE ne sont pas trop de renseignements. En lui tournant le sujet je me suis souvenu de ce qu'il y ait une fontaine beaucoup plus directe pour nous informer de cela, à laquelle aussi se réfèrent souvent les journaux : l'INE publie chaque mois la statistique d'hypothèques enregistrées, en désagrégeant par des types (urbaine, rurale, un logement, des terrains vagues...), et en informant du nombre d'hypothèques, le montant moyen, et le montant total. C'est pourquoi, on peut parfaitement voir l'évolution de la concession mensuelle d'hypothèques pour logement, sans le mélange de données de l'AHE.
La nuance unique consiste en ce que, après être fréquenté des hypothèques enregistrées, il est possible qu'il y ait un certain retard au sujet des dates dans celles qui signent les écritures notariales que ce seront quand les banques les comptabiliseront, et peut-être quand l'AHE les compte aussi. Mais cependant, elle me semble une statistique nettement supérieure si que nous voulons savoir c'est comment va la concession de crédits sur le logement en Espagne.
Et c'est ce que nous trouvons. D'abord, le graphique de 2003 à 2009 (un novembre) (click pour agrandir).

Et tout de suite le graphique pour les douze derniers mois avec données (dic08-nov09) (click pour agrandir) :

Je dirais que ces graphiques, qui sont assez plus éminents pour le sujet de la nouvelle (qu'il parlait des prêts pour l'achat du logement), comptent une histoire bien différente de celle du graphique d'hier. Hors de danger dont les statistiques de décembre et de janvier disent une autre chose, je crois que le robinet suit plus ou moins comme il était il y a un an.

Un bruit et un signe

Quand j'ai mis avant-hier ma courbe sur le volume de crédit accordé pour les hypothèques sur un logement enregistrées jusqu'à un novembre, je n'étais pas le conscient que la donnée de ce mois avait publié cela le même matin, accompagné du communiqué de presse correspondant de l'INE (c'est ce qu'il a demander aux amis de t'envoyer le dernier fichier actualisé).
Dès que par la nuit j'ai emporté une surprise après avoir vu que précisément les nouvelles parlaient de cette statistique, et ils soulignaient qu'en novembre, pour la première fois dès 2007, s'étaient constituées plus d'hypothèques sur un logement que dans le même mois de l'année précédente (encore 1,8 % pour être précis).
Comme j'étais rassemblé dans le sujet du volume du crédit, il n'avait pas prêté beaucoup d'attention au nombre de prêts, mais en effet, en novembre, pour la première fois depuis un avril 2007, ils ont été accordés plus qu'un an avant.
La question intéressante qui se pose ici est celle de la difficulté pour détecter des changements de tendance et pour les distinguer des dents simples de scie (que j'ai nommés d'autres fois anecdatos). Je m'explique : dans la majorité des phénomènes sociaux que nous observons à travers du temps, et que nous comptons (par des jours, des semaines, des mois, des années...) il y aura des tendances de fond (une stabilité, une croissance, un décroissement) et les dents de scie (d'une manière errante la donnée de chaque période concrète ne suit pas exactement la tendance, mais c'est quelque chose de plus haut ou quelque chose plus en bas que l'on pourrait attendre). Si les dents de scie sont prononcés, et nous observons beaucoup sur eux, nous courons le danger de passer chaque mois (ou une semaine, ou la période qui est) dès la panique jusqu'à l'optimisme, et vice versa, d'une manière errante, selon la déviation de la tendance qui frappe cette fois, sans nous rendre de compte de ce que nous réagissons devant des oscillations autour de la tendance, et nous ne voyons pas la tendance même.
Comment savoir si la dernière donnée d'une série est un dent de scie ou un changement de tendance ? Strictement en parlant, nous ne pourrons pas le savoir jusqu'à ce que nous voyions ceux qui viennent après. Mais ce que oui nous pouvons facilement vérifier est si les données avec le niveau de désagrégation temporelle que nous utilisons sont données ou non aux dents de scie. Par exemple, la donnée qui vient d'être publiée consiste en ce qu'en novembre encore 1,8 % d'hypothèques a été enregistrée sur un logement qu'en novembre 2008. Voyons la trajectoire de cet indicateur dans les dernières années (click pour agrandir) :

Nous pouvons voir que oui, il y a des dents de scie, et ils sont dans quelques cas considérables (même en oubliant les plus criards, en mars et l'avril, qui est vu affectés par les danses de la semaine sainte). Nous pouvons simplement l'illustrer avec les valeurs des sept derniers mois (arrondis à l'unité) :-25,-10,-19,-6,-6,-18, +2.
Avec ce degré d'oscillation autour de la tendance, il est difficile de savoir si la donnée de novembre est plus un dent de scie, ou un vrai changement faisait des niveaux positifs. Mais oui nous pouvons savoir que cette statistique, quand il s'ajoute par des mois, est laissée produire des dents de scie. Un remède pour ces situations est d'"aplanir" le virage, pour que les becs vers le haut et vers le bas ils soient compensés, et voyons la tendance de fond. Comment faire cela ? Très simple, au lieu de regarder la donnée par des mois, nous pouvons le voir par de plus grandes périodes. Que nous analysions les données temporelles par des jours, par des semaines, par des mois ou par des années c'est une convention relativement arbitraire. Mais l'une des bonnes raisons pour modifier la convention consiste précisément en ce que si le degré de l'agrégation que j'utilise produit une statistique avec beaucoup de dents de scie, peut-être il consiste en ce que je désagrège trop, que je mets la loupe trop près des données, et les oscillations autour de la tendance me déroutent.
Nous pouvons voir, donc, l'évolution de cet indicateur par perodos, par exemple, de trois mois. Au lieu d'utiliser des trimestres complets et successifs, des trimestres peuvent être utilisés deslizantes, que se superposent les uns avec les autres (comme nous faisons, par exemple, avec l'inflation, quand nous donnons la valeur des douze derniers mois, et nous le révisons chaque mois). Ainsi, chaque donnée de la série serait ene+feb+mar, feb+mar+abr, mar+abr+may, abr+may+jun...
Dans le graphique suivant nous voyons le résultat pour les dernières années (dans un bleu) superposé à la donnée mensuelle (dans rouge) que nous avons vu avant (click pour agrandir) :

La nouvelle statistique a à peine des dents de scie, ce qui est un bon indice de ce qu'il s'agit d'un niveau d'agrégation plus adapté pour distinguer la tendance des oscillations au sujet de la même. J'habille ainsi, la dernière donnée (un septembre - oct-nov) n'est pas un changement trop important, mais il confirme simplement le processus de freinage doux à la chute qui se rendait le long de 2009 : depuis une chute maximale de-41 % (dans le trimestre terminé dans ene-09), les baisses étaient adoucies d'une manière assez uniforme pendant toute l'année, et dans la dernière période la diminution est déjà "seulement" de-8 %. Une chose logique, d'autre part : après être tombé pendant un an 30-40 % sont difficiles que recommence à tomber autant.
J'imagine qu'il est de demander beaucoup qu'un journal décide que ce qu'il importe n'est pas la donnée mensuelle, mais la donnée trimestrielle, qui requiert une propre élaboration, s'écarter du communiqué de presse de l'INE, et l'expliquer aux lecteurs. Mais : ne serait-il pas ce, le type de choses que nous demanderions à quelques moyens auxquels il leur plaît penser qu'ils nous servent pour distinguer la vraie information sur les données simples, pour séparer le signe du bruit ?.