Mise à jour de la base de données, veuillez patienter...

Passage en revue de deux fonctions bien pratiques pour automatiser la saisie d'informations sur Libre Calc, avec cas concret.

Hier, c'était le rush à partir de 23h pour bricoler le plus rapidement possible des cartes de Strasbourg par bureau de vote et du Bas-Rhin par commune.

J'avais déjà les tracés géographiques de toutes les zones, et le squelette des fichiers de résultats qui allaient être envoyés. La seule difficulté allait être de déterminer rapidement le vainqueur de chaque entité, pour lui rattacher ensuite une couleur hexadécimale.

Concrètement, si dans la commune X le parti Y est arrivé en tête, il faut que dans la colonne "couleur" corresponde à la teinte prévue pour lui.

Y a-t-il une fonction qui peut nous aider dans cette tâche ? Il y en a en fait deux : RECHERCHE() et RECHERCHEV().

Afficher le nom du vainqueur avec RECHERCHE()

Prenons le cas concret ci-dessous. J'ai séparé mes résultats en brut d'un côté et en pourcentage de l'autre, et décidé d'insérer entre les deux une colonne "Vainqueur" et une colonne "Code couleur" :

Cliquez pour agrandir l'image

Pour afficher convenablement le nom du vainqueur, il faut bien décomposer les trois facteurs de la fonction RECHERCHE() :

• d'abord, le terme recherché. Cela peut être un nombre, chaîne de caractères, etc... Mais également une formule, ce qui nous intéresse franchement dans ce cas. Par exemple MAX(B2:I2) nous renverra le maximum de la ligne 2 entre les colonnes B et I. On l'applique donc sur les cellules correspondant aux résultats bruts des candidats. On pourrait aussi le faire pour des pourcentages, la logique est la même
• ensuite, la zone de recherche. Dans notre cas, on sélectionne la zone scrutée avant
• enfin, la zone de résultat. Là, il faut survoler les noms des candidats concernés sur la première ligne.

Dans notre cas,on écrirait donc dans la première cellule vide de la colonne "Vainqueur" :

=RECHERCHE(MAX(J2:AF2),J2:AF2,J1:AF1)

On peut alors vérifier que le nom renvoyé est bien celui de la ligne J1:AF1 correspondant au maximum de la ligne J2:AF2.

L'homme pressé ne manquera alors pas de saisir le coin inférieur droit de sa cellule remplir pour dupliquer la formule à la ligne suivante, sauf que s'il fait ça il se retrouvera avec un chiffre, et non un nom.

Cliquez pour agrandir l'image

Ceci parce que Calc pensera que la colonne de référence des noms J1:AF1 est maintenant J2:AF2. Il faut donc lui expliquer que cette ligne ne bouge jamais, grâce au symbole $.

Notre formule finale sera donc :

=RECHERCHE(MAX(J2:AF2),J2:AF2,J$1:AF$1)

Elle renverra exactement le même résultat pour la première cellule, en revanche on n'aura plus un nombre mais bien un nom sur la deuxième :

Cliquez pour agrandir l'image

Etonnant, non ?

Une table de correspondance avec RECHERCHEV()

Bien, la première étape est réglée. Nous allons maintenant tenter d'utiliser cette table de correspondance, placée juste en-dessous de nos données :

Cliquez pour agrandir l'image

Première sécurité : transformer le résultat de la formule en vrai texte. Pour cela, le plus simple est de copier la colonne "Vainqueur" dans une nouvelle colonne, en faisant un clic droit et en sélectionnant "Collage spécial" :

Cliquez pour agrandir l'image

De là, on va simplement décocher "Tout insérer", ne laisser que "Texte" coché, et cliquer sur OK :

Cliquez pour agrandir l'image

On peut alors vérifier dans la nouvelle colonne qu'on a bien du texte et plus une formule, ce qui va nous permettre de supprimer l'autre :

Cliquez pour agrandir l'image

On peut maintenant utiliser la formule RECHERCHEV(), dont la syntaxe est la suivante :

• d'abord, le terme recherché. Dans ce cas, il va correspondre au nom du vainqueur
• la matrice de référence. Dans notre cas, il va s'agir de la table de correspondance décrite avant
• troisièmement, l'indice de tri. Il correspond à la colonne de référence pour le résultat que l'on souhaite. Dans notre cas, on va choisir 2, puisque c'est dans la seconde colonne de la matrice que se trouvent les codes couleur
• enfin l'ordre de tri. On le paramètre à 0 pour bien stipuler qu'il faut que la valeur recherchée corresponde précisément à l'exact premier terme rencontré

Appliquée à notre cas, cette formule donne :

=RECHERCHEV(AG2,A$150:B$155,2,0)

On a placé des $ sur les bords de la matrice pour les mêmes raisons que les précédentes. Un cliqué-glissé après, voilà le résultat :

Cliquez pour agrandir l'image

Emballé, c'est pesé !

Remerciements

Merci à Joël Matriche, véritable "excpert", qui m'a aiguillé vers ces formules bien pratiques !

Les Nono's Songs n'ont pas de but particulier si ce n'est de publier des musiques que j'apprécie.

Je ne donne aucune appréciation, je poste que des musiques, trouvées au détour du Net, ou d'un son/bruit que j'ai pu entendre quelques part ou avec quelqu'un. Ce n'est en aucun cas un signe de "nouveauté" ou un effet de mode quelconque.

Voici le clip officiel de Nena qui nous propose 99 Luft Balons

Passage en revue de quelques bonnes pratiques pour se mettre efficacement au datajournalisme en presse locale.

1. Maîtriser les statistiques

Les statistiques sont un langage à part, un autre code à ajouter aux codes informatiques avec lesquels les datajournalistes jonglent quotidiennement, mais qui ne doit en aucun cas être négligé.

Pourquoi cette insistance sur les statistiques ? Parce que la maîtrise du code, aussi léchée soit-elle, n'empêchera jamais des erreurs qui donneront une image faussée d'un très beau travail.

Connaître les différences entre médiane et moyenne, analyser un échantillon en déciles, comparer les variances, être tatillon sur la manière dont les données ont été collectées, se rappeler que les données traitées ne sont pas objectives, sont autant de connaissances qui empêcheront de faire de belles erreurs et donneront un résultat de meilleure qualité, aussi irréprochable sur le fond que sur la forme.

Plus concrètement

Pour s'y mettre en français, il y a comme bonnes ressources :

• les volumes 21 et 26 de la collection "Le monde est mathématique" (environ 10€ l'unité), consacrés respectivement aux probabilités et aux statistiques
• l'ouvrage de Nicolas Gauvrit, Statistiques : méfiez-vous !

Pour ceux qui préfèrent le gratuit et maîtrisent l'anglais, il y a également :

• le bouquin Learning Statistics With R, qui a une approche très pointue des stats et assez originale puisque l'apprentissage se faire grâce à l'incontournable logiciel open source R
• plus court, le guide Statistic Gone Wrong

2. Plus près vaut mieux que trop loin

La presse locale a souvent une image de grande proximité de son lectorat, contrairement à la presse nationale qui insiste sur des enjeux beaucoup plus globaux.

La même chose se vérifie sur Internet, où il est assez évident que les internautes marseillais (hormis diaspora de l'Est) ne se connecteront pas en masse sur le site du Républicain Lorrain. Un des intérêts du datajournalisme en presse locale est évidemment d'éclairer des problématiques proches de son lectorat.

Plutôt que d'exploiter le même nouveau jeu de données de datagouv sur lequel vont se ruer quelques géants de Paris, il vaut mieux donc trouver quelque chose qui parle plus à ses lecteurs, quitte à changer son angle d'attaque.

Plus concrètement

Ce qui nous amène directement au point suivant

3. Varier ses sources de données

C'est le défi perpétuel du journaliste de données de presse locale :  trouver des fichiers exploitables à la bonne échelle.

Certains gros stocks comme ceux de datagouv peuvent convenir, à partir du moment où ils sont plus précis que l'échelle départementale. On peut par exemple citer les résultats d'une élection par commune, idéaux pour filtrer uniquement celles qui nous intéressent.

Mais sinon ? Il y a, mais c'est loin d'être le cas partout, les portaux Open Data. Ces derniers peuvent mettre à disposition des données pas forcément trouvables sur les stocks nationaux, mais ils perdent très vite de leur intérêt s'ils ne sont pas mis à jour régulièrement.

On peut également citer des organisations officielles qui ne chargent pas forcément leurs données sur datagouv. Même si ce dernier s'étoffe de plus en plus, il en reste un paquet !

Plus concrètement

Voir le point suivant (promis, c'est la dernière fois ;-)).

4. Contacter dès qu'on le peut des spécialistes

Les spécialistes ont une connaissance très poussée de données exploitables, même s'ils ne les ont pas produites eux-mêmes. Il peut donc être intéressant de les interroger dessus avant toute publication, notamment pour :

• trouver des données complémentaires
• avoir un éclairage sur la manière dont les données ont été collectées
• préciser un maximum ce qu'elles reflètent

Plus concrètement

J'ai deux anecdotes pour illustrer ce conseil :

• je me suis un jour lancé dans des cartes centrées sur la sauvegarde du grand hamster d'Alsace. J'avais trouvé un paquet de matière à exploiter sur le site de la DREAL Alsace, et je me suis dit qu'il pourrait être intéressant de demander son avis à un responsable d'une association écologiste. Ce dernier a commencé par relativiser le nombre de terriers répertoriés, en expliquant que les zones de recherche était très limitées, et qu'on ne fouillait pas certains sentiers où pouvaient potentiellement se trouver l'un ou l'autre de ces petits animaux. Autrement dit, on pouvait dire qu'il y avait au moins tant de terriers, sans être catégorique. Aussi officielles qu'étaient les données citées, elles avaient donc leurs propres limites !
• bien plus récemment, j'ai écrit sur le patrimoine périphérique de Strasbourg. J'ai interrogé le président d'une association spécialisée sur l'ensemble du patrimoine de la ville à propos de ma carte faite à partir d'un jeu de données régional. Il a alors rappelé que les lieux cités étaient des monuments classés, et qu'on ne pouvait du coup pas en parler comme d'un patrimoine "global". Une précision très utile qui m'a permis de corriger mon papier avant publication. Et cerise sur le gâteau, j'ai même eu un lien vers des sources complémentaires

5. Adapter des exemples

C'est une option incontournable des grandes librairies de cartographie et traitement de données : proposer un tour d'horizon avec des exemples et le code qui va avec.

Il est beaucoup plus facile d'essayer d'adapter ces exemples que de digérer une doc épaisse en espérant ensuite que l'inspiration fasse le reste.

Après tout, regarder des exemples, c'est déjà chercher l'inspiration !

Plus concrètement

Cette carte que j'ai réalisée pour Rue89S est en fait un mix de cet exemple, de celui-ci, de celui-ci et de celui-ci.

6. Discuter des projets en cours avec des confrères

Avoir régulièrement le nez dans les données peut faire prendre de bonnes habitudes, mais demander leur avis à des confrères avant publication ne coûte rien et peut rapporter beaucoup, notamment en :

• proposant des améliorations esthétiques ou fonctionnelles
• réfléchissant à comment mieux "angler" ses illustrations

Plus concrètement

Là encore, j'ai deux anecdotes qui me reviennent :

• lorsque je me suis lancé dans la cartographie de l'abstention aux européennes dans la circonscription Est, j'avais d'abord appliqué un coloriage séquentiel pour illustrer tout ça. J'ai demandé son avis à un ami et ancien collègue qui m'a dit de but en blanc qu'il trouvait ce résultat "baveux", et qu'il valait mieux tenter la chose avec un coloriage divergent. Ce qui a rendu le tout effectivement bien plus lisible.
• c'est en discutant d'une première mouture de carte avec la rédaction en chef de Rue89S que j'ai eu l'idée d'y ajouter les tracés des deux balades, balades qui constituaient précisément l'angle de mon papier

7. La forme suit la fonction

Ce principe, particulièrement appliqué dans l'industrie, est décrit sous l'angle des infographies dans l'excellent The Functional Art. Alberto Cairo y explique que la forme que prend une infographie suit assez naturellement sa fonction explicative.

De la même façon, je crois qu'il faut considérer une visualisation de données, aussi poussée techniquement soit-elle, que comme une illustration augmentée. Elle doit servir l'angle que l'on a choisi éventuellement en analysant des données, pas l'inverse.

Plus concrètement

Il n'y a rien de pire, dès lors que l'on a passé du temps et de la sueur à produire une dataviz, que de la balancer seule dans un article, sans autre explication, en se disant que les lecteurs comprendront d'eux-mêmes les secrets qu'elle renferme.

Ça ne marche que dans des cas bien précis, et il ne faut jamais s'affranchir d'une bonne analyse qui viendra compléter la performance technique.

En bon exemple d'une thématique que l'on peut avoir dans une rédaction, le journal canadien La Presse a livré un super boulot sur les accidents de la route au Québec. Le truc en plus ? L'option "Faits saillants", qui montre un vrai travail d'analyse.

8. Appliquer le rasoir d'Ockham

Le principe du rasoir d'Ockham peut se résumer ainsi : si on peut faire simple, il faut éviter autant que possible de faire compliqué.

Ça paraît assez évident dit comme ça, mais dans la pratique, la tentation de compliquer, surtout quand on découvre un nouveau jeu de données qu'on ne maîtrise pas encore, est souvent présente.

Plus concrètement

Pour illustrer une évolution d'un indice dans le temps, qu'est-ce qui est le plus optimal ? Un diagramme en barres décrivant cet indice à des années précises, ou une carte choroplèthe ultra soignée ?

Le rasoir d'Ockham vous dira de préférer la première option, et à mon avis à raison. Après tout, il arrive que les cartes ne soient pas la meilleure manière d'illustrer !

9. Le diable est dans les détails

Plus concrètement

En termes de dataviz, les détails peuvent faire toute la différence.

Couleurs, légendes, échelle, zoom, fenêtres interactives, affichage sur support mobile (trop souvent négligé), tout doit être testé et interrogé pour d'éventuels changements.

Si toi aussi tu écris tes courses sur un bout de papier, que tu le perds ou qu'il se fait manger par ton chien Scruffy (Matt, si tu me lis..), sache que tu n'es pas le seul et que j'ai LA solution pour toi !

Organizy permet en effet de noter sa liste de course dans son smartphone afin de ne plus jamais perdre cette maudite liste de courses !

Oui mais bon, c'est quand même plus simple un bout de papier et un stylo, ça va plus vite...

Dans l'absolu, je suis d'accord, mais pas là ! Il suffit en effet de taper les trois premières lettres du produit qu'on souhaite acheter pour que l'appli liste les produits qu'on achète VRAIMENT !

Autres options sympa :

• la possibilité de rayer sa liste a une seule main
• rien n'est définitif si vous appuyez sur l'écran par mégarde, les aliments non achetés passent automatiquement en tête de liste
• le partage de la liste de course

Et d'avance, de rien

Les Nono's Songs n'ont pas de but particulier si ce n'est de publier des musiques que j'apprécie.

Je ne donne aucune appréciation, je poste que des musiques, trouvées au détour du Net, ou d'un son/bruit que j'ai pu entendre quelques part ou avec quelqu'un. Ce n'est en aucun cas un signe de "nouveauté" ou un effet de mode quelconque.

Voici le clip de Scott McKenzie qui nous propose San Francisco