Product Inbox đŹ Focus #23 - Comment exploiter la data dans les dĂ©cisions Produit ?
Par des Product Leaders de Yousign, Mirakl, Criteo, Malt.
Hello đ, bienvenue dans cette 23Ăšme Ă©dition Focus de Product Inbox ! On est dĂ©sormais 11,851 sur cette newsletter. Merci pour ta lecture et ton soutien đ.
Je mâappelle TimothĂ© et si ce nâest pas dĂ©jĂ fait, tu peux :
Faire dĂ©coller ton produit grĂące Ă âïž notre collectif de top CPOs âïž
Ăcouter mon podcast Clef de voĂ»te
Me suivre sur Linkedin
Product Inbox + Agora = đ
Dans Product Inbox, je te partage réguliÚrement de nouveaux outils pour maximiser ton impact au quotidien.
Et il y a un petit français qui pourrait bien tâaider.Â
Son petit nom ? Agora Software.
Agora a une mission : simplifier lâexpĂ©rience des utilisateurs en leur permettant de discuter avec leur produit. Pour faire ça, Agora intĂšgre Ă ton Produit toutes les techno IA conversationnelles dont il a besoin : IA transactionnelle, LLM, accĂšs aux bases de connaissances.
Et la force dâAgora, câest de connecter simplement ton Produit avec lâensemble des logiciels de collaboration (Slack, Teams, Gmeet, WhatsappâŠ) afin dâoffrir Ă tes utilisateurs un accĂšs conversationnel Ă toutes tes fonctionnalitĂ©s. Pour tes utilisateurs, plus besoin de changer d'interface pour rĂ©aliser une tĂąche !
GrĂące Ă Agora, tes clients peuvent par exemple :
Demander quand un contrat client se termine
CrĂ©er une commande dâachat
Lister les contrats Ă renouveler ce trimestre
Valider une demande de congés
+ et les options sont infinies.
La puissance dâAgora est dĂ©jĂ reconnue par de jolis noms comme Orange Business, Talentia ou la Gendarmerie Nationale. Â
Cette Ă©dition vous est offerte par Agora Software. Et pour lâoccasion, Je tâai mĂȘme nĂ©gociĂ© un discount de 20% sur la 1Ăšre annĂ©e avec le code PRODUCT INBOX. Il te suffit de tâinscrire ci-dessous Ă la version dâessai gratuite :
Introduction
JâespĂšre que tout roule pour toi !
Je suis trĂšs heureux de tâenvoyer cette 2Ăšme Ă©dition Focus sur la data aprĂšs une 1Ăšre sur la collecte de la donnĂ©e.
Cette fois, on sâattaque âlâaprĂšs-collecteâ. ConcrĂštement, une fois quâon a rĂ©cupĂ©rĂ© la donnĂ©e, quâest-ce quâon fait avec pour prendre des dĂ©cisions Produit ?
La rĂ©ponse dans cette Ă©dition đ€.
Pour creuser ce sujet, jâai fait appel Ă 4 experts :
Alix Moggia, Product Consultant (ex. Meero, Criteo)
Luc Andriana, Director of Product Ops @Mirakl
Solenne Bruneau, Product Director @Malt
Christopher Parola, CPO @Yousign
Merci Ă eux 4 pour leur participation Ă cette Ă©dition đ.
Pour rĂ©aliser cette Ă©dition, jâai posĂ© 6 questions Ă mes invitĂ©s :
Quelles sont les metrics data principales et critiques au sein de votre équipe Produit ? Pourquoi ?
Peux-tu partager un exemple spĂ©cifique oĂč lâanalyse de data a influencĂ© une dĂ©cision produit en dĂ©roulant le process et le rĂ©sultat ?
Quels outils ou plateformes tu recommanderais aux PM qui souhaitent améliorer leurs capacités à analyser la donnée ? Pourquoi ces outils particuliÚrement ?
Quels Ă©cueils as-tu observĂ© dans lâanalyse de donnĂ©e liĂ©e au Product ? Comment peuvent-elles ĂȘtre Ă©vitĂ©es ?
Comment faire pour équilibrer entre donnée quanti et quali au moment des décisions Produit ? As-tu un exemple ?
Quelles stratĂ©gies utilisez-vous pour communiquer les dĂ©couvertes liĂ©es Ă la data Ă toute lâentreprise Ă©quipe (ou aux stakeholders) qui auraient une comprĂ©hension limitĂ©e de la donnĂ©e ?
Les points principaux Ă retenir đ§
Metrics clĂ©s dâune boĂźte : Company, Product, User Satisfaction et Product Health metrics.
La data peut influencer tout type de dĂ©cisions Produit : lancement de feature, acquisition dâune boite, pricing, positionnement, amĂ©lioration UX, rĂ©tention etc.
Les outils Ă choisir dĂ©pendent de ces tranches de taille dâĂ©quipe Produit : 0-3 personnes ; 3 Ă 10 pers. ; plus de 10 pers.
PiĂšges Ă Ă©viter : tout baser sur la donnĂ©e, mal dĂ©finir les metrics clĂ©s, ne pas Ă©valuer le coĂ»ts dâaccĂšs Ă la data, ne pas regarder sa finalitĂ©, trop se concentrer sur les moyennes, ne pas documenter la data.
Ăquilibrer entre quanti & quali dĂ©pend de : degrĂ© dâurgence, donnĂ©e de dĂ©part, story telling, dark patterns, vision et stratĂ©gie Produit.
Stratégie de communication de la data : communiquer dans un contexte large, créer un référentiel commun, la partager fréquemment, utiliser le story-telling.
1) Quelles sont les metrics data principales et critiques au sein de votre équipe Produit ? Pourquoi ?
Dans toutes les boßtes tech qui ont commencé à tracker de la donnée, on trouve 4 niveaux de metrics :
Les âCompany metricsâ
Les âProduct metricsâ
Les âUser Satisfaction metricsâ
Les âProduct Health metricsâ
Les Company Metrics
Objectif : Mesurer la santé financiÚre et la trajectoire de croissance de l'entreprise.
On y trouve toute les metrics au niveau de lâentreprise :
Les metrics financiĂšres : CA, ARR, MRR, EBIT, EBITDA, GMV
Les metrics dâusage : churn, upgrade, growth new
Les Product metrics
Objectif : Suivre l'impact du produit sur les objectifs stratégiques de l'entreprise. Ces metrics Produit aident à prioriser les fonctionnalités.
On y trouve les metrics qui concernent lâĂ©quipe Produit & Tech. Elles est souvent reprĂ©sentĂ©e par la North Star Metric qui est elle-mĂȘme divisĂ©e en âsous North Star metricsâ en fonction de lâorganisation. Plus lâorganisation est dĂ©veloppĂ©e, plus il y a de sous North Star Metrics associĂ©es. On y trouve aussi les KR des diffĂ©rents projets suivis pendant un quadrimestre.
Exemples de North Star Metrics (ou sous-NSM) :
Meero â Nombre dâimages processĂ©es par IA
Yousign â Nombre de documents Ă©mis et rĂ©pondus
Mirakl â Nombre de commandes expĂ©diĂ©es avec succĂšs
Malt â Taux de conversion des opportunitĂ©s
Selon la taille de lâorganisation, chaque Product Metrics peut ĂȘtre dĂ©clinĂ©e en par Ă©quipe, persona, pĂ©rimĂštre Produit.
Exemple chez Yousign :
âA partir de cette metric, chez Yousign nous avons 1 type de flow par persona : le flow Ă©metteur du contrat et le flow signataire. Pour chacun de ces flows, nous y associons des metrics dĂ©rivĂ©es. Par exemple : - Combien de temps lâĂ©metteur met Ă obtenir une rĂ©ponse Ă son document (flow Ă©metteur) - % de succĂšs du funnel de signature et dâĂ©mission (flow Ă©metteur) - Combien de temps la signataire met Ă signer (flow signataire)â. - Christopher Parola, Yousign
Ou chez Malt :
âOn est organisĂ© en plusieurs tribes. La tribe âclientâ de Malt va suivre le nombre dâutilisateurs actifs, l'expansion dans les grands comptes via le produit, le nombre d'opportunitĂ©s qui sont gĂ©nĂ©rĂ©es sur la plateforme. La tribe âfreelanceâ va regarder le taux de complĂ©tion des profils qui sont créés sur la plateforme ainsi que l'activitĂ© et la rĂ©tention de ces profils sur Maltâ. - Solenne Bruneau, Malt
Les User Satisfaction metrics
Objectif : Ăvaluer la satisfaction des utilisateurs pour orienter les amĂ©liorations produit.
On y trouve les metrics cÎté utilisateur comme :
Le NPS ou le CSAT
Le Customer effort Score
Le taux de contact des équipes customer support
Le Customer churn
Les Product Health metrics
Objectif : Surveiller la performance technique et l'usage du produit.
Exemples de Product Health Metrics :
Fatal errors per month
Load time per end point
Time to process a given operation
âLes Product Health metrics indiquent comment va votre produit techniquement. Est-ce que j'ai des crash dans l'application ? Est-ce que j'ai des erreurs techniques rĂ©currentes ? VoilĂ . En gĂ©nĂ©ral, ce sont data trĂšs observĂ©es par l'engineering. C'est important d'avoir cette source de vĂ©ritĂ© sur ces diffĂ©rentes donnĂ©esâ. - Alix Moggia
Chaque niveau de donnĂ©es est extrait diffĂ©remment et engage diffĂ©rents profils dans lâentreprise.
2) Peux tu partager un exemple spĂ©cifique oĂč lâanalyse de data a influencĂ© une dĂ©cision produit en dĂ©roulant le process et le rĂ©sultat ?
On peut faire appel Ă lâanalyse de data Produit pour Ă peu prĂšs nâimporte quelle dĂ©cision Produit :
Lancement de fonctionnalité
Acquisition et intĂ©gration dâun nouveau produit
âOn a rachetĂ© une boĂźte pour en faire un produit de diversification chez Yousign. AprĂšs lâavoir lancĂ©, on est trĂšs loin de nos attentes. AprĂšs avoir fait une nouvelle campagne de tests et une nouvelle version, les rĂ©sultats sont Ă peine mieux. Alors on a lancĂ© une enquĂȘtes auprĂšs de nos clients. GrĂące Ă celle-ci, on sâest rendu compte que le problĂšme dâadoption ne venait pas du produit, mais de son prix (mĂȘme sâil nâĂ©tait pas trĂšs Ă©levĂ©). Nos clients le percevaient comme un produit âde luxeâ, qui ne leur Ă©tait pas indispensable. Pourtant, quand on avait fait lâĂ©tude 1 an avant, les retours de nos clients Ă©taient diffĂ©rents. Donc il y a eu un effet de marchĂ© que lâon a pu mesurer grĂące Ă la data. On a dĂ©cidĂ© de lâoffrir gratuitement Ă nos clients pendant 6 mois et lâadoption a finalement dĂ©collĂ©. GrĂące Ă cette analyse, ce produit nâa plus dâobjectif de croissance de MRR. Il nous aide Ă lutter contre le churnâ. - Christopher Parola, Yousign
Analyse de pricing
cf. lâexemple de Christopher Parola ci-dessus.
Positionnement Produit
Rétention utilisateurs
Adoption utilisateurs
âQuand je suis arrivĂ©e chez Malt, on s'est demandĂ© quelles sont les KPIs les plus importantes pour nous en tant que Tribe Freelance de lâĂ©quipe Produit. On s'est rendu compte que le taux de complĂ©tion du profil Ă©tait important important, car c'est un proxy de de l'activation grĂące auquel le freelance va trouver une mission sur Malt. On a dĂ©fini des critĂšres pour dĂ©finir un profil qu'on estime complet. Ă partir de lĂ , on s'est rendu compte qu'on n'Ă©tait pas bons sur le nombre d'expĂ©riences remplies sur les profils de nos freelances. Et donc on a dĂ©cidĂ© de mettre en place un import LinkedIn oĂč il Ă©tait possible d'uploader un CV pendant le sign-up. En monitorant l'impact du taux d'adoption de cet outil, on a mesurĂ© un impact significatif de 15 points sur le taux de complĂ©tion des expĂ©riences*.â* - Solenne Bruneau, Malt
AmĂ©lioration de lâUX
AmĂ©lioration dâun algorithme
âChez Criteo, il fallait (en quelques millisecondes) trouver la meilleur association (utilisateurs, annonceur, publicitĂ©). Ă chaque fois, il fallait sĂ©lectionner : lâutilisateur Ă qui on allait afficher la publicitĂ©, choisir lâannonceur parmi lâensemble des clients et dĂ©terminer le produit & le format de la publicitĂ© Ă afficher. Pour modifier les variables ou leur poids dans lâalgorithme, on passait obligatoirement par des tests qui dĂ©finissaient complĂštement le Produit. Dans le B2C, Chez Airbnb ou Booking de la mĂȘme maniĂšre, lâalgorithme de Search est un Ă©lement central de leur stratĂ©gie. Eux aussi ont dĂ©vĂ©loppĂ© des outils internes pour tester chacune des Ă©volutions de lâalgorithme & cela se fait de pair entre le PM & les Ă©quipes de data sciences. - Alix Moggia.
Booking est transparent envers ses partenaires sur certaines variables utilisĂ©es dans son algorithme *(ici). Ă titre dâexemple, celles-ci sont :
le taux de conversion (page views / booking)
Le prix moyen (calculé par Booking)
Le taux dâannulation
La qualitĂ© de lâannonce dâhĂ©bergement
Et le score donné par les clients de booking à cet hébergement
3) Quels outils ou plateformes tu recommanderais aux PM qui souhaitent améliorer leurs capacités à analyser la donnée ? Pourquoi ces outils particuliÚrement ?
Google Analytics est adaptĂ© Ă lâearly-stage :
âChez Meilleur Agents, on avait tout fait avec Google Analytics. Câest gratuit donc on lâa exploitĂ© jusquâĂ ses limites. On avait mis des plans de tags partout. On faisait mĂȘme nos A/B tests avec. Cependant Google Analytics est assez compliquĂ© Ă maintenir dans le temps. Câest difficile de scaler avec. Mais jusquâĂ 3-4 Product Managers dans lâentreprise, ça suffitâ. - Christopher Parola, Yousign
Mixpanel est adapté aux équipes Produit de taille moyenne :
âĂ partir de 15 dĂ©veloppeurs et 5 Product Managers, Mixpanel devient intĂ©ressant car il sâadapte Ă la bande passante des Ă©quipes. Son coĂ»t peut ĂȘtre dissuasif pour une structure plus petiteâ. - Christopher Parola, Yousign
Metabase pour la simplicitĂ© dâusage :
âChez Mirakl, certains de nos PMs ne sont pas trĂšs SQL. Ces derniers dĂ©pendaient Ă©normĂ©ment de dĂ©veloppeurs pour mener les requĂȘtes Ă leur place. L'avantage de Metabase, câest sa simplicitĂ© dâutilisation. C'est du drag and drop et tu changes la restitution visuelle (c'est-Ă -dire le graphe) comme tu le souhaites. Tu peux le mettre en histogramme, en line ou en double entrĂ©e par exemple. Lâoutil permet une visualisation simple et accessibleâ. - Luc Andriana, Mirakl
Looker, adapté au reporting et à la visualisation de data :
âLooker est plutĂŽt un outil data visualisation/reporting qui est utilisĂ© par toute lâentreprise. Il est moins facile Ă prendre en main quâAmplitude. Mais il couvre un pĂ©rimĂštre de donnĂ©es plus large en englobant les KPI du produit, mais aussi les KPI business. Looker demande plus d'implication de la part des Ă©quipes data quâAmplitude pour construire des dashboards clĂ©s en main. GrĂące Ă Looker, on a des dashboards âhigh levelâ destinĂ©s au Comex, aux Ă©quipes produits et Ă©quipes opĂ©rationnelles. C'est notre outil de centralisation des KPIs. Nous ne lâutilisons pas pour de lâexplorationâ. - Solenne Bruneau, Malt
Segment, un outil âconnecteurâ puissant mais onĂ©reux :
âSegment, comme son nom lâindique, permet de segmenter la population de lâutilisateur. Lâutiliser dans le B2B est vraiment chouette. Dans le B2B, tu as moins d'utilisateurs que dans le B2C, donc ça te coĂ»te moins cher. En B2C oĂč les populations sont plus importantes, lâutiliser peut devenir vraiment onĂ©reux. Quelle que soit la cible de lâentreprise, Segment est un investissement. Tu peux substituer Segment par Amplitude ou Mixpanel. Mais avec Segment, tu peux brancher plein de choses comme les marketing automations par exemple. C'est un petit peu ton connecteur de data et de population. Et ça fait gagner beaucoup de tempsâ. - Alix Moggia
Amplitude, un outil complet et construit pour les PM :
âOn lâa mis rĂ©cemment en place chez Malt. Lâobjectif : avoir un outil self-service pour l'Ă©quipe Produit. C'est vraiment gĂ©nial parce que c'est relativement simple Ă prendre en main. Ăa reste un outil puissant, donc tout nâest pas hyper simple mais c'est trĂšs user-friendly. Tu peux gĂ©nĂ©rer plein de vues diffĂ©rentes trĂšs facilement. Soit des vues en mode âfunnelâ oĂč tu peux switcher entre les vues. Tu peux aussi Ă©tablir des parcours utilisateurs pour identifier les chemins que ces derniers prennent sur la plateforme. C'est un outil qui a Ă©tĂ© conçu pour que des gens non initiĂ©s en data puissent creuser, explorer et gĂ©nĂ©rer des insights. Câest un super outil pour les PMs. Pour moi, câest aussi adaptĂ© aux startups quâaux scaleups. Ils ont des plans gratuits pour les plus petites entreprisesâ. - Solenne Bruneau, Malt
ChatGPT pour aider Ă mener des requĂȘtes SQL :
âQuand tu nâes pas Ă lâaise avec SQL, tu peux faire appel Ă ChatGPT pour modifier tes requĂȘtes. Chez Mirakl, de plus en plus de PM utilisent ChatGPT pour affiner leurs requĂȘtes SQL. Ăa te permet de faire des jointures entre des tables. En fait, tu peux lui dire au travers d'un prompt (donc en langage naturel) ce que tu souhaitesâ. - Luc Andriana, Mirakl
Exemple de prompt utilisé par Luc :
âDonne moi la requĂȘte SQL pour calculer lâĂ©volution du taux dâadoption de la feature XYZ par les focus accountâ
4) Quels Ă©cueils as-tu observĂ© dans lâanalyse de donnĂ©e liĂ©e au Product ? Comment peuvent-elles ĂȘtre Ă©vitĂ©es ?
PiÚge 1 : Tout baser sur la donnée
âL'Ă©cueil principal est de se dire âje prends aucune dĂ©cision sans Data, je les base toutes sur la Data aveuglĂ©mentâ. Ăa ne veut pas dire de dĂ©cider Ă 100% sur lâintuition. Câest juste que parfois, tu nâauras pas la data. De plus, la donnĂ©e est soumise Ă l'interprĂ©tationâ. - Christopher Parola, Yousign
PiÚge 2 : Des metrics clés mal définies
âPrenons lâexemple du taux de conversion. A partir de quand dĂ©marre-t-on dans le funnel pour mesurer la conversion ? Ă partir de quand on termine ? Qu'est-ce que la conversion ? Ce sont des termes gĂ©nĂ©riques que tout le monde utilise Ă toutes les sauces. En fonction des rĂ©ponses, le taux peut beaucoup varier. Et câest le cas de toutes les metrics mesurĂ©es sur un produit. Il est impossible de faire des analyses cohĂ©rentes sans avoir prĂ©alablement dĂ©fini les metrics suiviesâ. - Alix Moggia
Voici un exemple (historique) dâAirbnb qui illustre le risque de mauvaise interprĂ©tation dâune metric. Ici la metric mise en avant est le âSearch to Bookâ. On y voit plein de variantes possibles qui auraient, elles aussi, pu ĂȘtre appelĂ©es âsearch to bookâ. Source ici.
PiĂšge 3 : Ne pas Ă©valuer le coĂ»t dâaccĂšs Ă la data
âIl faut tout le temps se poser la question du temps passĂ© Ă la collecter et analyser la data. Exemple : si ça prend 1 mois de collecter la data mais seulement 2 semaines pour mettre en production la fonctionnalitĂ© Ă©tudiĂ©e, mieux vaut produire quâanalyser. Tout est question dâarbitrageâ. - Christopher Parola, Yousign
Idem pour les A/B tests :
âJâai souvent vu des investissements en temps trĂšs lourds dans des A/B tests. Pour, au final, sâapercevoir qu'il y a trop de bruit dans le test et qu'on ne peut pas en tirer grand-chose. Je pense que les A/B tests doivent ĂȘtre utilisĂ©s Ă bon escient quand il y a assez de donnĂ©es, avec une stabilitĂ© des Ă©vĂ©nements sur le produit pour Ă©viter que ce soit complĂštement illisibleâ. - Alix Moggia
PiÚge 4 : Ne pas regarder la finalité de la data
âExemple : tu as 1000 visites par mois sur ton site â tu es content. Si demain tu nâen a plus que 100, est-ce si grave ?â - Christopher Parola, Yousign
PiĂšge 5 : Ne pas se mĂ©fier de la âbonne dataâ
âJâai dĂ©couvert dans ma carriĂšre que quand la data est mauvaise, on creuse Ă fond. Quand elle est bonne, on ne creuse jamais. Pourtant cette data, bonne en apparence, peut cacher un bug ou une erreur de sourceâ. - Christopher Parola, Yousign
PiÚge 6 : Se précipiter quand on utilise la data
âIl faut prendre le temps de comprendre les KPIs, la source de la donnĂ©e et les filtres utilisĂ©s avant de tirer des apprentissages. Et tout ça prend du temps. Dâautant plus que les PMs ne sont gĂ©nĂ©ralement pas experts en data, ce qui amĂšne du risque dans les analyses. Si possible, se faire aider par un analyste est un bon rĂ©flexe. Câest aussi important de rĂ©aliser des âsanity checkâ autant que possibleâ. - Solenne Bruneau, Malt
âSi on interroge les mauvaises tables (ou trop de tables Ă la fois), les requĂȘtes mettent beaucoup de temps Ă tourner. Il est parfois prĂ©fĂ©rable de crĂ©er des tables optimisĂ©es, avec un nombre restreint de champs. Pour cela, il est important dâobtenir lâavis dâun Data Analyst pour optimiser lâanalyseâ. - Luc Andriana, Mirakl
PiĂšge 7 : Trop regarder les moyennes
âChez Malt, on a 2 types de missions trĂšs diffĂ©rentes sur la plateforme. Des missions de freelances courtes et bien dĂ©finies. Puis des missions longues chez des clients sur plusieurs mois. Ces 2 types de missions ont des dynamiques des KPIs complĂštement diffĂ©rentes. Par exemple : la conversion sur une mission longue va ĂȘtre moins forte que sur une mission courte. Comme la mission est longue, lâentreprise va prendre le temps de voir plein de candidats freelances. Il nâaura pas la mĂȘme urgence que sur une mission courte. Si on ne prend pas ça en compte, on passe vraiment Ă cĂŽtĂ© des bons patternsâ. - Solenne Bruneau, Malt
PiĂšge 8 : Ne pas documenter la data
âSans documenter la data, les PMs sont perdus dans lâutilisation dâun outil dâAnalytics, ne sachant pas oĂč chercher lâinformation. Ne pas documenter la data peut aussi aboutir Ă de mauvais calculs car les concepts et metrics clĂ©s sont mal compris. Il y a aussi risque de mener des requĂȘtes en doublon quand les PMs nâont pas vu que des analyses ont dĂ©jĂ Ă©tĂ© menĂ©es et validĂ©es. Ainsi le manque de documentation accroit le nombre de tickets de demande dâaide ou de rĂ©solution de bugs de la part de PMs pour les Ă©quipes BI et Data Analystsâ. - Luc Andriana, Mirakl
5) Comment faire pour équilibrer entre donnée quanti et quali au moment des décisions Produit ? As-tu un exemple ?
LâĂ©quilibre dans lâutilisation de la donnĂ©e qualitative et quantitative dĂ©pend de plusieurs paramĂštres :
Le degrĂ© dâurgence
âDâun point de vue collecte de donnĂ©es, la data qualitative est plus rapide. Ce qui permet de rapidement se poser des questions sur le pourquoi de la donnĂ©e. Versus si tu fais du quantitatif en lançant par exemple des heatmaps, il faut le laisser tourner longtemps. Par contre en terme de temps homme, une fois les outils de donnĂ©e quantitative en place, t'as rien Ă faire Ă part attendre. Alors que pour le qualitatif, tu es toujours obligĂ© d'aller prĂ©parer une trame, recruter des testeurs, leur parler, faire la synthĂšse, vĂ©rifier les biais. Il y a beaucoup plus de temps homme Ă passer sur la data qualitativeâ. - Christopher Parola, Yousign
La donnée de départ
âLa gestion de la data, c'est un flux circulaire. Tu pars dâun point de dĂ©part qui va ĂȘtre soit la donnĂ©e quantitative, soit la donnĂ©e qualitative. En gros, tu vas avoir soit une interview utilisateurs, soit un retour utilisateurs Ă creuser. C'est typiquement le cas de bugs dans ton produitâ. - Alix Moggia
Le story telling
âCe qui est trĂšs important, c'est lâutilisation de la data dans un storytelling de priorisation produit. Quand tu vas pousser un projet spĂ©cifique ou un KR dans ta roadmap, il faudra que tu aies ce fameux rationnel pour Ă©viter que ce soit le HiPPo (ndlr : Highest Paid Person's Opinion), qui remporte la mise. Pour avoir des faits Ă©tayĂ©s, tu dois avoir de la data. Mais tu peux potentiellement aussi âtordreâ la data seule pour lui faire dire des choses parce que tu as oubliĂ© une partie du contexte. Pour te faire ton propre jugement sur les items Ă pousser dans ta roadmap, tu disposes de deux armes : lâanalyse quali et lâanalyse quantiâ. - Alix Moggia
Sâassurer du problĂšme client
âCe qui va marcher Ă long terme, c'est ta satisfaction client. Et tu ne peux pas forcĂ©ment la mesurer. Un exemple que j'ai observĂ© dans les produits avec modĂšles d'abonnement, câest le fait de rendre difficile dâaccĂšs le âcall to actionâ dâannulation. Cette manipulation va augmenter ton KPI de rĂ©tention. Mais sur le long terme (sur un an ou deux ans par exemple), tu verras moins de rĂ©inscriptions. Car ce parcours dâannulation va gĂ©nĂ©rer du bouche Ă oreille nĂ©gatif impossible Ă le mesurer. Cet exemple montre quâil faut faire trĂšs attention Ă ne pas juste regarder la data, qui montre une image partielle et court-termiste. Je pense qu'une maniĂšre de l'Ă©viter c'est de s'assurer de toujours rĂ©soudre un problĂšme clientâ. - Solenne Bruneau, Malt
Voici un post de Jordan Chenevier qui illustre bien ce propos.
La vision & la stratégie Produit
âUne deuxiĂšme façon de t'assurer que tu utilises bien la donnĂ©e, c'est de suivre sa vision et sa stratĂ©gie produit. Ăa te permet de replacer chaque feature dans une logique de long-terme. Parce que parfois, tu fais quelque chose qui n'a pas forcĂ©ment dâimpact direct mais qui est peut-ĂȘtre un facilitateur pour plus tardâ. - Solenne Bruneau, Malt
Quelles stratĂ©gies utilisez-vous pour communiquer les dĂ©couvertes liĂ©es Ă la data Ă toute lâentreprise Ă©quipe (ou aux stakeholders) qui auraient une comprĂ©hension limitĂ©e de la donnĂ©e ?
Pour communiquer la donnĂ©e aux personnes de lâentreprise qui ont une comprĂ©hension limitĂ©e de la donnĂ©e, on peut sâappuyer sur ces principes :
La communiquer dans un contexte large
âQuand je communique les donnĂ©es, c'est toujours dans un chapeau plus gros. On ne communique pas la granularitĂ©. Typiquement sur la viralitĂ© de notre produit, on amĂšne du contexte en expliquant quâon fait des tests car en France, on est au maximum en attribution payante. Dans le cadre de ces tests, on essaie de voir si des gens ont envie de nous rejoindre aprĂšs avoir signĂ©. On dĂ©tecte qu'ils ont envie. Donc on a fait des A/B tests qui donnent des rĂ©sultats. On communique assez peu la data en fait. La data nous permet juste de couvrir nos communications. Câest illustratifâ. - Christopher Parola, Yousign
âIl faut vraiment le mettre dans le contexte de l'entreprise, dans le contexte du quarter, dans le contexte de la discovery qu'on fait, par exemple. J'aime bien aussi passer dans les meetings regroupant toute lâentreprise (all-hands). Je trouve que c'est la façon dont tout le monde peut voir l'output de l'Ă©quipe data qui vient de prĂ©senter une partie de leurs analysesâ. - Alix Moggia
Créer un référentiel commun
âOn doit s'assurer que tout le monde comprenne chacune des mĂ©triques en ayant une dĂ©finition commune. Pour ça, on peut crĂ©er un dashboard dit âsource of truthâ pour que tout le monde soit alignĂ©â. - Alix Moggia
âChez Malt, on a mis en place un arbre de KPI avec des KPIs clairs, des dashboards bien structurĂ©s. Ă chaque all-hands, on explique les datas clĂ©s de ces artefactsâ. - Solenne Bruneau, Malt
La partager fréquemment
âJ'aime beaucoup communiquer la data dans Slack chaque semaine sur ce que chaque Ă©quipe (ou squad) a pu dĂ©livrer. Et dans ce cadre, j'aime pousser les analyses donnĂ©es qui ont Ă©tĂ© effectuĂ©es. Typiquement, si un Data Analyst a rencontrĂ© des problĂšmes dans ses analyses, il/elle va les regrouper dans une page Notion. Cette page doit ĂȘtre partagĂ©e sur Slack aux Ă©quipes Produit. GrĂące à ça, les PMs vont pouvoir se poser des questions sur les analyses restituĂ©es par lâĂ©quipe Data : Pourquoi on fait ça ? OĂč est-ce que ça nous amĂšne ? Quelles dĂ©cisions ça va nous amener Ă prendre ? Pour moi, c'est trĂšs important de bien donner un contexte Ă cette analyse, et pas uniquement avoir le bloc avec les rĂ©sultats clĂ©sâ. - Alix Moggia
âChez Mirakl, on s'appuie sur nos Product Ambassadors pour communiquer de maniĂšre scalable des messages produits vers le terrain. On fait ça au travers d'un rendez-vous mensuel qui s'appelle le Product Committee. C'est le principal moyen synchrone de communiquer des informations comprenant de la data. On va y prĂ©senter des captures de Metabase, des graphes pour illustrer lâimpact de fonctionnalitĂ©s par exempleâ. - Luc Andriana, Mirakl
Utiliser le story telling
âSouvent, le PM va arriver dans ses meetings et il va dire : âce quarter, on a sorti ça, voilĂ la dĂ©mo du nouveau truc qui sortâ. Et la data est souvent oubliĂ©e. Je trouve bien dâintĂ©grer la data Ă ce moment lĂ . Tu fais une ou deux slides oĂč figurent des extraits des tableaux, des dashboards. Ăa apporte de la clartĂ©, de la crĂ©dibilitĂ© et de la prĂ©cision au story telling en all-handsâ. - Alix Moggia
âComme le produit, la data c'est du storytelling. Tu peux rendre n'importe quel insight intĂ©ressant et comprĂ©hensible si tu t'assures que tu utilises des visuels clairs. Et que tu expliques le problĂšme Ă rĂ©soudre, son importance et pourquoi cette analyse concerne ce problĂšme spĂ©cifique. Il faut aussi y joindre les conclusions. Je pense que c'est une compĂ©tence que les Ă©quipes Data sous-estiment. Pourtant la communication est clĂ© et tu peux faire du storytelling de dataâ. - Solenne Bruneau, Malt
âChez Mirakl, on pousse de plus en plus les PMs Ă faire du story telling lors de leurs prĂ©sentations, et ils ont dâailleurs reçu une formation pour ĂȘtre plus impactant Ă lâoral. Nous avons des rituels mensuels et trimestriels comme point dâĂ©tape pour partager notamment des KPIs Ă lâensemble des Ă©quipes, et rien de mieux que le story telling pour ĂȘtre plus impactantâ. Luc Andriana, Mirakl
đ« Qu'est-ce que Stellar ?
Jâai cofondĂ© Stellar pour accompagner les dirigeants de startups Ă faire de leur Produit un moteur de croissance inarrĂȘtable.
Et pour activer cette croissance, on a créé :
Un collectif de 12 CPO des meilleures boßtes tech (Zenly, Yousign, BlaBlaCar)
Des formats dâintervention rapides (moins dâune semaine)
Des solutions concrÚtes à actionner dans la foulée ****
RĂ©sultats : vous amĂ©liorez vos metrics business, votre vitesse dâexĂ©cution et la qualitĂ© de votre Produit.
Nous avons accompagnĂ© 40 clients depuis notre lancement (Zeliq, Edusign, Predict4health, Jaji,âŠ).
Notre ambition : vous faire atteindre vos objectifs business et positionner votre produit en leader de son marché.
Envie de travailler ensemble ?
Comment as-tu trouvé cette édition ?
Pour me soutenir :
Si lâĂ©dition tâa plu, ce serait super que tu la partages đ
Timothé