Examen des Métriques

Si vous voyez des placeholders non familiers ou si vous devez vérifier quels outils sont connectés, voir CONNECTORS.md.

Examinez et analysez les métriques produit, identifiez les tendances et exposez des insights actionnables.

Utilisation

/metrics-review $ARGUMENTS

Workflow

1. Collecter les Données de Métriques

Si ~~product analytics est connecté :

• Récupérez les métriques produit clés pour la période pertinente
• Obtenez les données de comparaison (période précédente, même période l'année dernière, objectifs)
• Récupérez les ventilations par segment si disponibles

Si aucun outil analytics n'est connecté, demandez à l'utilisateur de fournir :

• Les métriques et leurs valeurs (collez un tableau, une capture d'écran ou décrivez)
• Les données de comparaison (période précédente, objectifs)
• Tout contexte sur les changements récents (lancements, incidents, saisonnalité)

Demandez à l'utilisateur :

• Quelle période examiner ? (la semaine dernière, le mois dernier, le trimestre dernier)
• Sur quelles métriques vous concentrer ? Ou devons-nous examiner l'ensemble complet des métriques produit ?
• Y a-t-il des objectifs ou des buts spécifiques pour la comparaison ?
• Des événements connus qui pourraient expliquer les changements (lancements, pannes, campagnes marketing, saisonnalité) ?

2. Organiser les Métriques

Structurez l'examen en utilisant une hiérarchie de métriques : métrique North Star au sommet, indicateurs de santé L1 (acquisition, activation, engagement, rétention, revenu, satisfaction), et métriques de diagnostic L2 pour l'investigation approfondie. Voir Hiérarchie des Métriques Produit ci-dessous pour les définitions complètes.

Si l'utilisateur n'a pas défini sa hiérarchie de métriques, aidez-le à identifier sa North Star et ses métriques L1 clés avant de continuer.

3. Analyser les Tendances

Pour chaque métrique clé :

• Valeur actuelle : Quelle est la métrique aujourd'hui ?
• Tendance : En hausse, en baisse ou stable par rapport à la période précédente ? Sur quel laps de temps ?
• vs Objectif : Comment se compare-t-elle à l'objectif ou à la cible ?
• Taux de changement : La tendance s'accélère-t-elle ou se décélère-t-elle ?
• Anomalies : Des changements soudains, pics ou creux ?

Identifiez les corrélations :

• Les changements d'une métrique ont-ils une corrélation avec les changements d'une autre ?
• Y a-t-il des indicateurs avancés qui prédisent les changements de métriques décalées ?
• Les ventilations par segment révèlent-elles qu'une tendance agrégée est entraînée par une cohorte spécifique ?

4. Générer l'Examen

Résumé

2-3 phrases : santé globale du produit, changements les plus notables, points clés à souligner.

Tableau de Bord des Métriques

Format tableau pour un scan rapide :

Analyse des Tendances

Pour chaque métrique méritant discussion :

• Que s'est-il passé et quelle est l'ampleur du changement
• Pourquoi cela a probablement eu lieu (attribution basée sur les événements connus, métriques corrélées, analyse par segment)
• Si c'est un événement ponctuel ou une tendance soutenue

Points Positifs

Ce qui fonctionne bien :

• Métriques qui dépassent les objectifs
• Tendances positives à maintenir
• Segments ou fonctionnalités montrant une performance forte

Domaines de Préoccupation

Ce qui nécessite de l'attention :

• Métriques manquant les objectifs ou tendant négativement
• Signaux d'alerte avant qu'ils ne deviennent des problèmes
• Métriques sur lesquelles nous manquons de visibilité ou de compréhension

Actions Recommandées

Prochaines étapes spécifiques basées sur l'analyse :

• Investigations à mener (approfondir une tendance préoccupante)
• Expériences à lancer (tester des hypothèses sur ce qui pourrait améliorer une métrique)
• Investissements à faire (doubler la mise sur ce qui fonctionne)
• Alertes à configurer (surveiller une métrique plus étroitement)

Contexte et Avertissements

• Problèmes de qualité des données connus
• Événements qui affectent la comparabilité (pannes, jours fériés, lancements)
• Métriques que nous devrions suivre mais pas encore

5. Suivi

Après avoir généré l'examen :

• Demandez si une métrique a besoin d'une investigation approfondie
• Proposez de créer une spécification de tableau de bord pour le suivi continu
• Proposez de rédiger des propositions d'expériences pour les domaines de préoccupation
• Proposez de mettre en place un modèle d'examen des métriques pour une utilisation récurrente

Hiérarchie des Métriques Produit

Métrique North Star

La métrique unique qui capture le mieux la valeur fondamentale que votre produit livre aux utilisateurs. Elle devrait être :

• Alignée sur la valeur : Change quand les utilisateurs tirent plus de valeur du produit
• Avancée : Prédit le succès à long terme de l'entreprise (revenu, rétention)
• Actionnable : L'équipe produit peut l'influencer par son travail
• Compréhensible : Tout le monde dans l'entreprise comprend ce qu'elle signifie et pourquoi cela importe

Exemples par type de produit :

• Outil de collaboration : Équipes actives hebdomadaires avec 3+ membres contribuant
• Marketplace : Transactions hebdomadaires complétées
• Plateforme SaaS : Utilisateurs actifs hebdomadaires complétant le workflow principal
• Plateforme de contenu : Temps de lecture/visionnage engagé hebdomadaire
• Outil pour développeurs : Déploiements hebdomadaires utilisant l'outil

Métriques L1 (Indicateurs de Santé)

Les 5-7 métriques qui ensemble dressent un tableau complet de la santé du produit. Elles correspondent aux étapes clés du cycle de vie des utilisateurs :

Acquisition : Les nouveaux utilisateurs trouvent-ils le produit ?

• Nouveaux inscriptions ou démarrages d'essai (volume et tendance)
• Taux de conversion des inscriptions (visiteurs vers inscriptions)
• Mix de canaux (d'où viennent les nouveaux utilisateurs)
• Coût par acquisition (pour les canaux payants)

Activation : Les nouveaux utilisateurs atteignent-ils le moment de la valeur ?

• Taux d'activation : % des nouveaux utilisateurs complétant l'action clé qui prédit la rétention
• Temps d'activation : combien de temps entre l'inscription et l'activation
• Taux de complétude de la configuration : % complétant les étapes d'intégration
• Premier moment de valeur : quand les utilisateurs expérimentent d'abord la valeur principale du produit

Engagement : Les utilisateurs actifs tirent-ils de la valeur ?

• DAU / WAU / MAU : utilisateurs actifs à différents intervalles de temps
• Ratio DAU/MAU (stickiness) : quelle fraction des utilisateurs mensuels reviennent quotidiennement
• Fréquence de l'action principale : à quelle fréquence les utilisateurs font ce qui compte le plus
• Profondeur de session : combien les utilisateurs font par session
• Adoption des fonctionnalités : % d'utilisateurs utilisant les fonctionnalités clés

Rétention : Les utilisateurs reviennent-ils ?

• Rétention D1, D7, D30 : % des utilisateurs revenant après 1 jour, 7 jours, 30 jours
• Courbes de rétention par cohorte : comment la rétention évolue pour chaque cohorte d'inscription
• Taux de churn : % des utilisateurs ou du revenu perdu par période
• Taux de résurrection : % des utilisateurs ayant churné qui reviennent

Monétisation : La valeur se traduit-elle en revenu ?

• Taux de conversion : gratuit vers payant (pour freemium)
• MRR / ARR : revenu récurrent mensuel ou annuel
• ARPU / ARPA : revenu moyen par utilisateur ou compte
• Revenu d'expansion : croissance du revenu provenant des clients existants
• Rétention nette du revenu : rétention du revenu incluant l'expansion et la contraction

Satisfaction : Que pensent les utilisateurs du produit ?

• NPS : Net Promoter Score
• CSAT : Customer Satisfaction Score
• Volume des tickets de support et délai de résolution
• Évaluations en app store et sentiment des avis

Métriques L2 (Diagnostic)

Métriques détaillées utilisées pour investiguer les changements dans les métriques L1 :

• Conversion d'entonnoir à chaque étape
• Utilisation au niveau des fonctionnalités et adoption
• Ventilations spécifiques par segment (par plan, taille d'entreprise, géographie, rôle utilisateur)
• Métriques de performance (temps de chargement de page, taux d'erreur, latence API)
• Engagement spécifique au contenu (quelles fonctionnalités, pages ou types de contenu entraînent l'engagement)

Métriques Produit Courantes

DAU / WAU / MAU

Ce qu'elles mesurent : Utilisateurs uniques qui effectuent une action qualifiante en un jour, une semaine ou un mois.

Décisions clés :

• Qu'est-ce qui compte comme « actif » ? Une connexion ? Une page vue ? Une action principale ? Définissez cela soigneusement — différentes définitions racontent des histoires différentes.
• Quel intervalle de temps est le plus important ? DAU pour les produits d'usage quotidien (messagerie, email). WAU pour les produits d'usage hebdomadaire (gestion de projet). MAU pour les produits moins fréquents (logiciel fiscal, réservation de voyage).

Comment les utiliser :

• Ratio DAU/MAU (stickiness) : des valeurs au-dessus de 0,5 indiquent une habitude quotidienne. En dessous de 0,2 suggère un usage peu fréquent.
• La tendance importe plus que le nombre absolu. L'usage actif augmente-t-il, est-il stable ou décline-t-il ?
• Segmentez par type d'utilisateur. Les utilisateurs puissants et les utilisateurs occasionnels se comportent très différemment.

Rétention

Ce qu'elle mesure : Des utilisateurs qui ont commencé dans la période X, quel % reste actif dans la période Y ?

Périodes de rétention courantes :

• D1 (jour suivant) : La première expérience était-elle suffisamment bonne pour revenir ?
• D7 (une semaine) : L'utilisateur a-t-il établi une habitude ?
• D30 (un mois) : L'utilisateur est-il conservé à long terme ?
• D90 (trois mois) : C'est un utilisateur durable ?

Comment utiliser la rétention :

• Tracez les courbes de rétention par cohorte. Recherchez : abandon initial (problème d'activation), déclin régulier (problème d'engagement), ou aplatissement (bon — vous avez une base conservée stable).
• Comparez les cohortes au fil du temps. Les cohortes plus récentes se conservent-elles mieux que les anciennes ? Cela signifie que les améliorations du produit fonctionnent.
• Segmentez la rétention par comportement d'activation. Utilisateurs qui ont complété l'intégration vs ceux qui ne l'ont pas fait. Utilisateurs qui ont utilisé la fonctionnalité X vs ceux qui ne l'ont pas fait.

Conversion

Ce qu'elle mesure : % d'utilisateurs qui passent d'une étape à l'autre.

Entonnoirs de conversion courants :

• Visiteur vers inscription
• Inscription vers activation (moment de valeur clé)
• Gratuit vers payant (conversion d'essai)
• Essai vers abonnement payant
• Plan mensuel vers plan annuel

Comment utiliser la conversion :

• Cartographiez l'entonnoir complet et mesurez la conversion à chaque étape
• Identifiez les points de chute les plus importants — ce sont vos opportunités d'amélioration avec le plus grand effet de levier
• Segmentez la conversion par source, plan, type d'utilisateur. Les différents segments se convertissent très différemment.
• Suivez la conversion au fil du temps. S'améliore-t-elle à mesure que vous itérez sur l'expérience ?

Activation

Ce qu'elle mesure : % des nouveaux utilisateurs qui atteignent le moment où ils expérimentent d'abord la valeur principale du produit.

Définir l'activation :

• Regardez les utilisateurs conservés vs les utilisateurs qui ont churné. Quelles actions les utilisateurs conservés ont-ils fait que les utilisateurs qui ont churné n'ont pas fait ?
• L'événement d'activation devrait être fortement prédictif de la rétention à long terme
• Il devrait être réalisable dans la première session ou les premiers jours
• Exemples : a créé le premier projet, a invité un coéquipier, a complété le premier workflow, a connecté une intégration

Comment utiliser l'activation :

• Suivez le taux d'activation pour chaque cohorte d'inscription
• Mesurez le temps d'activation — plus rapide est presque toujours mieux
• Construisez des flux d'intégration qui guident les utilisateurs vers le moment d'activation
• Testez A/B les flux d'activation et mesurez l'impact sur la rétention, pas seulement sur le taux d'activation

Frameworks de Définition d'Objectifs

OKRs (Objectives and Key Results)

Objectifs : Buts qualitatifs et aspirants qui décrivent ce que vous voulez atteindre.

• Inspirants et mémorables
• Limités dans le temps (trimestriellement ou annuellement)
• Directionnels, non spécifiques à une métrique

Résultats Clés : Mesures quantitatives qui vous indiquent si vous avez atteint l'objectif.

• Spécifiques et mesurables
• Limités dans le temps avec une cible claire
• Basés sur les résultats, non sur les livrables
• 2-4 Résultats Clés par Objectif

Exemple :

Objectif : Rendre notre produit indispensable pour les workflows quotidiens

Résultats Clés :
- Augmenter le ratio DAU/MAU de 0,35 à 0,50
- Augmenter la rétention D30 pour les nouveaux utilisateurs de 40% à 55%
- 3 workflows principaux avec taux de complétude de tâche >80%

Meilleures Pratiques pour les OKRs

• Définissez des OKRs ambitieux mais réalisables. 70% de complétude est la cible pour les OKRs stretch.
• Les Résultats Clés devraient mesurer les résultats (comportement utilisateur, résultats commerciaux), pas les livrables (fonctionnalités déployées, tâches complétées).
• N'ayez pas trop d'OKRs. 2-3 objectifs avec 2-4 KRs chacun c'est suffisant.
• Les OKRs devraient être inconfortables. Si vous êtes sûr de les atteindre tous, ils ne sont pas assez ambitieux.
• Examinez les OKRs à mi-parcours. Ajustez l'allocation des efforts si certains KRs sont clairement hors piste.
• Classez les OKRs honnêtement en fin de période. 0,0-0,3 = manqué, 0,4-0,6 = progression, 0,7-1,0 = atteint.

Définir les Cibles de Métriques

• Baseline : Quelle est la valeur actuelle ? Vous avez besoin d'une baseline fiable avant de fixer une cible.
• Benchmark : Que réalisent les produits comparables ? Les benchmarks sectoriels fournissent un contexte.
• Trajectoire : Quelle est la tendance actuelle ? Si la métrique s'améliore déjà de 5% par mois, une cible de 6% n'est pas ambitieuse.
• Effort : Combien d'investissement mettez-vous derrière cela ? Les paris plus importants justifient des cibles plus ambitieuses.
• Confiance : Avec quel degré de confiance pensez-vous atteindre la cible ? Définissez un « engagement » (haute confiance) et une « stretch » (ambitieuse).

Cadences d'Examen des Métriques

Vérification Hebdomadaire des Métriques

Objectif : Détecter les problèmes rapidement, monitorer les expériences, rester en contact avec la santé du produit. Durée : 15-30 minutes. Participants : Chef de produit, peut-être responsable de l'ingénierie.

Ce à examiner :

• Métrique North Star : valeur actuelle, changement hebdomadaire
• Métriques L1 clés : mouvements notables
• Expériences actives : résultats et significativité statistique
• Anomalies : pics ou creux inattendus
• Alertes : tout ce qui a déclenché une alerte de suivi

Action : Si quelque chose semble anormal, investiguer. Sinon, noter et continuer.

Examen Mensuel des Métriques

Objectif : Analyse approfondie des tendances, progression par rapport aux objectifs, implications stratégiques. Durée : 30-60 minutes. Participants : Équipe produit, parties prenantes clés.

Ce à examiner :

• Tableau de bord complet des métriques L1 avec tendances mois sur mois
• Progression par rapport aux cibles OKR trimestriels
• Analyse par cohorte : les cohortes plus récentes performent-elles mieux ?
• Adoption des fonctionnalités : comment se comportent les lancements récents ?
• Analyse par segment : divergence entre les segments d'utilisateurs ?

Action : Identifier 1-3 domaines à investiguer ou dans lesquels investir. Mettre à jour les priorités si les métriques révèlent de nouvelles informations.

Examen Trimestriel des Affaires

Objectif : Évaluation stratégique de la performance du produit, définition d'objectifs pour le trimestre suivant. Durée : 60-90 minutes. Participants : Produit, ingénierie, design, leadership.

Ce à examiner :

• Scoring OKR pour le trimestre
• Analyse des tendances pour toutes les métriques L1 au cours du trimestre
• Comparaisons année sur année
• Contexte compétitif : changements du marché et mouvements des concurrents
• Ce qui a marché et ce qui n'a pas marché

Action : Définir les OKRs pour le trimestre suivant. Ajuster la stratégie produit en fonction de ce que les données montrent.

Principes de Conception de Tableau de Bord

Tableaux de Bord Produit Efficaces

Un bon tableau de bord répond à la question « Comment se porte le produit ? » en un coup d'œil.

Principes :

1. Commencez par la question, non par les données. Quelles décisions ce tableau de bord supporte-t-il ? Concevez en inverse à partir de la décision.

2. Hiérarchie de l'information. La métrique la plus importante devrait être la plus proéminente visuellement. North Star au sommet, métriques L1 ensuite, métriques L2 disponibles en drill-down.

3. Contexte plutôt que nombres. Un nombre sans contexte est dénué de sens. Montrez toujours : valeur actuelle, comparaison (période précédente, objectif, benchmark), direction de la tendance.

4. Moins de métriques, plus d'insight. Un tableau de bord avec 50 métriques n'aide personne. Concentrez-vous sur 5-10 qui importent. Mettez tout le reste dans un rapport détaillé.

5. Périodes de temps cohérentes. Utilisez la même période pour toutes les métriques sur un tableau de bord. Mélanger des métriques quotidiennes et mensuelles crée de la confusion.

6. Indicateurs de statut visuels. Utilisez les couleurs pour indiquer la santé en un coup d'œil :

   • Vert : sur la bonne voie ou en amélioration
   • Jaune : nécessite attention ou stable
   • Rouge : hors piste ou en déclin

7. Actionnabilité. Chaque métrique sur le tableau de bord devrait être quelque chose que l'équipe peut influencer. Si vous ne pouvez pas agir dessus, elle n'a pas sa place sur le tableau de bord produit.

Disposition du Tableau de Bord

Première rangée : Métrique North Star avec ligne de tendance et objectif.

Deuxième rangée : Tableau de bord des métriques L1 — valeur actuelle, changement, objectif, statut pour chaque métrique clé.

Troisième rangée : Entonnoirs clés ou métriques de conversion — entonnoir visuel montrant la chute à chaque étape.

Quatrième rangée : Expériences récentes et lancements — tests A/B actifs, lancements de fonctionnalités récents avec métriques précoces.

Bas / drill-down : Métriques L2, ventilations par segment, et séries chronologiques détaillées pour investigation.

Anti-patterns de Tableau de Bord

• Métriques de vanité : Métriques qui augmentent toujours mais n'indiquent pas la santé (inscriptions totales à jamais, vues de page totales)
• Trop de métriques : Tableaux de bord qui nécessitent de scroller pour voir. Si ce n'est pas sur un écran, coupez les métriques.
• Aucune comparaison : Nombres bruts sans contexte (valeur actuelle sans période précédente ou objectif)
• Tableaux de bord obsolètes : Métriques qui n'ont pas été mises à jour ou examinées depuis des mois
• Tableaux de bord de livrables : Mesurer l'activité d'équipe (tickets fermés, PRs fusionnés) au lieu des résultats utilisateurs et commerciaux
• Un tableau de bord pour tous les publics : Les cadres, les chefs de produit et les ingénieurs ont besoin de vues différentes. Une solution unique ne convient pas à tous.

Alertes

Définissez des alertes pour les métriques qui nécessitent une attention immédiate :

• Alertes de seuil : La métrique tombe en dessous ou dépasse un seuil critique (taux d'erreur > 1%, conversion < 5%)
• Alertes de tendance : La métrique montre un déclin soutenu sur plusieurs jours/semaines
• Alertes d'anomalie : La métrique s'écarte significativement de la plage attendue

Hygiène des alertes :

• Chaque alerte devrait être actionnable. Si vous ne pouvez rien faire à ce sujet, n'alertez pas.
• Examinez et affinez les alertes régulièrement. Trop de faux positifs et les gens ignorent toutes les alertes.
• Définissez un propriétaire pour chaque alerte. Qui répond quand elle se déclenche ?
• Définissez des niveaux de sévérité appropriés. Tout n'est pas P0.

Format de Sortie

Utilisez des tableaux pour le tableau de bord. Utilisez des indicateurs de statut clairs. Gardez le résumé serré — le lecteur devrait obtenir l'histoire essentielle en 30 secondes.

Conseils

• Commencez par le « Et alors » — quelle est la chose la plus importante dans cet examen des métriques ? Commencez par cela.
• Les nombres absolus sans contexte sont inutiles. Montrez toujours des comparaisons (vs période précédente, vs objectif, vs benchmark).
• Faites attention à l'attribution. La corrélation n'est pas la causalité. Si une métrique a bougé, reconnaissez l'incertitude sur le pourquoi.
• L'analyse par segment révèle souvent qu'une métrique agrégée masque des différences importantes. Un nombre plat globalement pourrait cacher un segment en croissance et un autre en déclin.
• Tous les mouvements de métriques n'importent pas. Les petites fluctuations sont du bruit. Concentrez l'attention sur les changements significatifs.
• Si une métrique manque son objectif, ne rapportez pas seulement l'échec — recommandez quoi faire à ce sujet.
• Les examens de métriques devraient entraîner des décisions. Si l'examen ne mène pas à au moins une action, ce n'était pas utile.