L’A/B testing arrive chez Apple – WWDC 2021
ASO - App Store Optimisation
octobre 13, 2022
L’A/B testing était déjà disponible sur le Google Play Store depuis 2015, 6 ans plus tard, il arrive enfin sur l’App Store. Début juin, Apple a lancé l’édition 2021 du WWDC, conférence durant laquelle ils ont annoncé leur version de l’A/B testing sous le nom product page optimization (qui a été annoncé en même temps que leur nouvelle fonctionnalité de customisation des pages produits).
Qu’est-ce que l’A/B testing version Apple ?
L’optimisation de la page produit (comme elle a été baptisée par Apple) est une nouvelle fonctionnalité d’A/B testing qui sera lancée avec l’arrivée d’iOS 15 cet automne. Depuis plusieurs années, les développeurs.ses ont dû s’appuyer sur un A/B testing externe pour l’App Store. Apple lance donc enfin un A/B testing natif, disponible directement sur leur plateforme.
Avec leur A/B testing, il sera possible de créer jusqu’à 3 traitements différents pour votre test. Ce test visera les utilisateurs.ices qui trouvent votre page produit de façon organique grâce à l’outil recherche ou en naviguant sur l’App Store. Sur chaque page test vous pourrez expérimenter avec une nouvelle icône, une nouvelle vidéo app preview et des captures d’écran différentes. De plus, votre test pourra avoir une durée allant jusqu’à 90 jours. Comme pour la personnalisation de page produit, chaque icône, vidéo preview et capture d’écran que vous souhaitez tester devra passer par l’App Review mais vous n’aurez pas besoin de soumettre une nouvelle version de votre application à chaque fois.
Il sera aussi possible de mettre en place des tests seulement dans des localisations spécifiques. Par exemple, si votre application est localisée dans différentes langues, vous pourrez choisir de lancer un test seulement dans l’une (ou plusieurs) de ces langues. Vous pourrez aussi choisir le pourcentage de votre audience qui verra votre page test. Si vous avez plusieurs pages tests dans le même A/B test, le pourcentage que vous dédierez à celles-ci sera partagé de façon égale entre chacune des pages alternatives.
App Analytics vous permettra de mesurer le nombre d’impressions, de téléchargements ainsi que le taux de conversion de chaque page, vous montrant ainsi quelle page test fonctionne le mieux et pourrait remplacer votre page actuelle. Si l’une des pages alternatives inclut une icône test, Apple a fait en sorte que, lorsqu’un.e utilisateur.ice télécharge votre application depuis cette page test, ce soit l’icône test (et non l’icône originale) qui apparaisse sur l’écran d’accueil. Le tout afin que l’expérience reste consistante même hors de l’App Store. Pour que ce soit possible, il faudra inclure les assets de l’icône alternative dans votre ABI (en incluant les différentes tailles pour les appareils compatibles et la version 1024×1024 pour l’App Store).
Cette analyse de performance sera basée sur des statistiques Bayésienne et aura pour objectif de montrer l’impact des alternatives testées. Même si votre test peut durer jusqu’à 90 jours, il vous sera possible de l’arrêter à n’importe quel moment si vous le souhaitez.
Une option de testing native très attendue pour l’App Store
Jusqu’à présent, les développeurs ont dû se reposer sur l’utilisation d’outils développés par des organismes externes afin de tester leurs vidéos et captures d’écran sur iOS. Cependant, même en utilisant des outils spécialisés, il était impossible d’inclure la totalité du trafic de l’App Store dans le test. Cette option native pourrait être la solution. Selon Apple, le test serait intégré de façon harmonieuse dans le trafic du store, et il sera possible de choisir le pourcentage d’utilisateurs.ices à rediriger vers la page test. Cette nouvelle fonctionnalité sera connectée à la nouvelle version d’App Analytics qui vous permettra d’analyser les résultats de votre test directement dans l’App Store.
Nous ne disposons actuellement que des informations partagées par Apple durant la WWDC 2021 pour comparer leur A/B testing aux outils déjà existants, notamment le testing natif de Google. Pour l’instant, Apple a annoncé le même nombre maximum de variants (3 variations possibles sur chacune des plateformes), la différence principale étant que le Google Play Store autorise les développeurs.ses à tester des versions alternatives des éléments textuels de leur page produit (en plus des éléments graphiques) là ou l’App Store n’autorise que des alternatives aux éléments graphiques (icône, captures d’écran, preview video).
On peut en déduire qu’Apple marque une distinction entre le trafic organique et le trafic externe en offrant des solutions différentes pour chacun : la personnalisation de page produit permettra de mieux cibler les audiences externes et l’optimisation de page produit (l’A/B testing) vous aidera à créer la meilleure landing page pour les utilisateurs.ices trouvant votre application de façon organique dans l’App Store.
Est-ce que cela vaudra réellement le coup ?
Si l’A/B testing d’Apple vous permettra de tester des icônes différentes, il n’y a aucune mention de tester les titres, sous-titres ou autre méta-données. Il semble qu’il ne sera donc pas possible de tester les éléments textuels de votre page produit. Par ailleurs, bien qu’Apple ait introduit l’A/B testing et la personnalisation de page produit dans la même vidéo, il ne sera pas possible d’utiliser leur outil de testing sur les pages personnalisées. Chaque landing page customisée que vous créerez ne pourra pas passer par l’A/B testing.
Bien qu’il soit clair qu’on puisse créer 3 traitements par test, il n’y a eu aucune information sur le nombre de tests qu’il sera possible de lancer au même moment. Par exemple, Google Play Experiments autorise un maximum de 5 tests locaux par listing (ou un seul test global). Même si Apple a annoncé qu’il serait possible de tester sur des localisations spécifiques, ils n’ont pas précisé s’il serait possible ou non de mettre en place plusieurs tests séparés sur des localisations différentes au même moment.
Il se pose aussi la question de la fiabilité. AppTweak note que Google Play Experiments est célèbre pour son intervalle de confiance de 90% qui est en dessous de la norme standard (pour l’A/B testing l’intervalle de confiance minimum est de 95%). Il ne reste plus qu’à attendre et voir comment la nouvelle fonctionnalité d’Apple se mesurera à celle de Google.
Avec l’annonce des pages produits personnalisables (pour améliorer le trafic externe) et de l’A/B testing (plutôt centré sur le trafic organique), Apple met l’accent sur le soutien à l’acquisition client sur leur plateforme.
Qu’avez-vous pensé des annonces d’Apple ? Allez-vous tester l’A/B testing natif d’Apple lorsqu’il sera disponible ? Dites-nous dans les commentaires !
- Les vidéos chocs, une nouvelle tendance marketing pour les jeux mobiles? - 28 novembre 2023
- Comment faire un bon script pour sa vidéo ad - 14 novembre 2023
- Mobile Video Monthly #37 – Octobre 2023 - 7 novembre 2023
