App Store A/B Testing: What to Test First
A practical guide to A/B testing on the App Store and Google Play. Learn which elements have the most impact and how to run valid experiments.
App Store siyahınıza dünyanın bütün trafikini yönləndirə bilərsiniz, lakin kreativ aktivləriniz ziyarətçiləri yükləməyə çevirmirsə, bu trafik boşa gedir. App store A/B testi, hansı elementlərin auditoriyanız üçün ən çox rezonans doğurduğunu tapmaq üçün siyahı elementlərinizin müxtəlif versiyalarını müqayisə etməyin sistematik prosesidir. Lakin sübut edilmiş təsirinə baxmayaraq, əksər tərtibatçılar heç bir test aparmır.
Bu bələdçi nəyi, necə və hansı ardıcıllıqla test etməyi əhatə edir. Həm iOS, həm də Google Play-də etibarlı eksperimentlər aparmağın mexanikasını, eləcə də test yol xəritənizi prioritetləşdirmək üçün praktik çərçivəni öyrənəcəksiniz.
ASO-da A/B Test Niyə Az İstifadə Olunur
ASO icması A/B testdən tez-tez danışır, lakin tətbiq aşağı qalır. SplitMetrics-in 2024-cü il araşdırması göstərdi ki, tətbiq tərtibatçılarının yalnız 23%-i son 12 ayda mağaza siyahısı testi aparmişdı.
23%
tərtibatçılar siyahılarını test edir
SplitMetrics, 2024
10.950
bir testdən ildə əlavə quraşdırma
gündə 10k göstərimdə
$21.900
ekvivalent ödənişli dəyər
$2 eCPI ilə
Aşağı tətbiqi gözlənilən səbəblər bunlardır:
- Qavranılan mürəkkəblik: Bir çox tərtibatçı testin baha alətlər və ya böyük trafik həcmləri tələb etdiyini düşünür. Əslində Apple Xüsusi Məhsul Səhifələri və Məhsul Səhifəsi Optimizasiyası vasitəsilə daxili test imkanı təqdim edir, Google Play isə yerli Mağaza Siyahısı Eksperimentləri təklif edir.
- Dizayn dar boğazı: Alternativ aktivlər (ikonlar, ekran görüntüləri, videolar) yaratmaq kiçik komandaların həmişə hazır olmaya biləcəyi dizayn resursları tələb edir.
- "Kifayət qədər yaxşıdır" düşüncəsi: Tətbiq böyüyəndə komandalar dönüşümü optimallışdırmaq əvəzinə xüsusiyyətlərə diqqət yetirirlr. Fürsət xərci görünməzdir, çünki almadığınız yükləmələri heç vaxt görmürsiniz.
Bir sadə testin arxasındakı riyaziyyat
Gündə 10.000 göstərim × 4% toxunma nisbəti × 30% quraşdırma nisbəti = gündə 120 quraşdırma.
İkona testi toxunma nisbətini 4%-dən 5%-ə artırır = gündə 150 quraşdırma, 25% artım. İl ərzində: 10.950 əlavə quraşdırma. $2 eCPI ilə = $21.900 ekvivalent ödənişli dəyər.
iOS və Google Play Test Seçimləri
İki böyük platforma fərqli test imkanları təklif edir. Hər birinin nəyi dəstəklədiyini başa düşmək vac ibdir.
Platforma test imkanları
| Qabiliyyət | iOS (PPO/CPP) | Google Play |
|---|---|---|
| İkona testi | Bəli (PPO) | Bəli |
| Ekran görüntüsü testi | Bəli (PPO) | Bəli |
| Video testi | Bəli (PPO) | Bəli |
| Təsvir testi | Xeyr | Bəli (qısa + uzun) |
| Lokalizasiya olunmuş testlər | Xeyr | Bəli |
| Maksimum variant | 3 müalicə | Çevik |
| Əhəmiyyətlilik hesablaması | Manual | Daxili |
| Xüsusi açılış səhifələri | Bəli (35-ə qədər CPP) | Xeyr |
Apple App Store
Apple 2021-ci ildə Product Page Optimization (PPO) və Custom Product Pages (CPP) təqdim etdi. Bunlar iki fərqli alətdir:
- Product Page Optimization (PPO): Əsl A/B test aləti. Məhsul səhifəniz üçün fərqli ikonlar, ekran görüntüləri və ya tətbiq önizləmələri ilə 3-ə qədər alternativ "müalicə" yaradırsınız. Apple üzvi trafiki orijinal və müalicələr arasında təsadüfi bölür. Testlər minimum 7 gün davam edir.
- Custom Product Pages (CPP): Ənənəvi A/B test deyil, lakin seqmentasiya üçün güclüdür. Hər biri unikal ekran görüntüləri, önizləmə videoları və promosyon mətni olan 35-ə qədər alternativ məhsul səhifəsi yarada bilərsiniz. Bu səhifələr Search Ads kampaniyaları və ya xarici marketinq üçün unikal URL-lər alır.
iOS məhdudiyyəti
PPO tətbiq adını, alt başlığı və ya təsviri test etməyə imkan vermir - yalnız vizual elementləri. Metadata testi üçün ardıcıl testdən istifadə edin: bir yeniləmədə metadatanı dəyişdirin, təsiri ölçün, əvvəlki dövrlə müqayisə edin.
Google Play Store
Google birbaşa Play Console-da Store Listing Experiments təklif edir. Bu testlər Apple-ın PPO-sundan daha çevik dir:
- Tətbiq ikonasını, xüsusiyyət qrafikasını, ekran görüntülərini, qısa təsviri və uzun təsviri test edə bilərsiniz.
- Testlər müəyyən lokalizasiyaları hədəfləyə bilər, beləliklə fərqli bazarlarda eyni vaxtda fərqli eksperimentlər apara bilərsiniz.
- Google statistik əhəmiyyətlilik hesablamaları təqdim edir ki, nəticənin etibarlı olduğunu biləsiniz.
Google Play testi iOS-dan daha çevikdir. Hər iki platformada dərc edirsinizsə, Google Play-də aqressiv testlər aparın və nəticələri iOS-a istiqamətləndirici olaraq tətbiq edin.
Təsir İerarxiyası: Hansı Elementlər Ən Çox Fərq Yaradır
Bütün siyahı elementlərinin dönüşümə təsiri eyni deyil. SplitMetrics və StoreMaven tərəfindən minlərlə testdən toplanan məlumatlara əsasən, ən yüksəkdən ən aşağıya təsir ierarxiyası belədir:
Bu ierarxiya test yol xəritənizə rəhbərlik etməlidir. Ən böyük dəyişikliklər yaradan elementlərdən başlayın: ikanonız və ilk ekran görüntüləriniz.
Tətbiq İkonanızın Testi
İkona tətbiqinizin üzüdür. İstifadəçilər onu axtarış nəticələrində, məhsul səhifəsində, ana ekranda və bildirişlərdə görür. Yaxşı dizayn edilmiş ikona tətbiqinizin kateqoriyasını və keyfiyyətini saniyənin bir hissəsində çatdırır.
Nəyi test etməli
- Rəng palitrasi: İsti və sütul, tək rəng və gradiyent, yüksək kontrast və incə. Məlumatlar göstərir ki, App Store-un ağ fonuna qarşı yüksək kontrasta malik ikonlar daha çox toxunuş alır. Məhsuldarlıq və sağlamlıq kateqoriyalarında mavi və yaşıl ikonlar həddindən artıq təmsil olunur, ona görə fərqlənmək gözlənilməz rəng istifadə etmək demək ola bilər.
- Qrafik üslubu: Düz dizayn və 3D, mücərrəd simvol və real illstrasiya, xarakter və obyekt. Üslub kateqoriyanız üçün istifadəçi gözləntilərinə uyğun olmalıdır.
- Mürəkkəblik: Sadə ikonlar (1-2 element) və ətraflı ikonlar (3 və daha çox element). Kiçik ölçülərdə (axtarış nəticələrindəki miniatür təxminən 60x60 nöqtədir) daha sadə ikonlar daha yaxşı performans göstərir, çünki onları tez başa düşmək daha asandır.
- İkonada mətn: Kiçik ölçülərdə mətn oxunmaz olduğu üçün ümumiyyətlə tövsiyə edilmir. Lakin brend adlı tətbiqlər üçün tək söz və ya hərf işləyə bilər.
Minimum test tələbləri
İkona testlərini ən az 14 gün aparın. Apple variant başına minimum 2000 göstərim tövsiyə edir, lakin daha kiçik dönüşüm fərqlərini etibarlı şəkildə aşkar etmək üçün 5000+ hədəfləyin.
Cari siyahınızı və kreativ aktivlərinizi BoostYourApp Mağaza Siyahısı görünüşündən test variantlarını dizayn etməzdən əvvəl baza göstəricilərinizi başa düşmək üçün istifadə edin.
Ekran Görüntüsü Optimizasiyası və Test
Ekran görüntüləri siyahınızın satış təqdimatıdır. Onlar tətbiqinizin interfeysini göstərmək deyil, dəyərini çatdırmalıdır. Ən effektiv App Store ekran görüntüləri bir nümunəyə əməl edir: faydanı bild irən qalın başlıq mətni, tətbiqi fəaliyyətdə göstərən cihaz çərçivəsi ilə cütləşdirilmiş.
Test etmək üçün əsas dəyişənlər
- Başlıq mesajlaşması: Xüsusiyyət yönümlü ("50+ məşqi izlə") ilə fayda yönümlü ("Gündə 15 dəqiqədə forma düşün") və sosial sübut ("2M+ idmançı tərəfindən istifadə olunur"). Fayda yönümlü başlıqlar adətən xüsusiyyət yönümlü başlıqları 10%-dən 20%-ə qədər üstələyir.
- Ekran görüntüsü sırası: İlk hansı ekranı göstərirsiniz? İlk ekran görüntüsü tətbiqinizin nə etdiyini və kimsənin niyə maraqlanmalı olduğunu dərhal çatdırmalıdır.
- Vizual üslub: Açıq fon ilə tünd fon, rəngarng gradiyentlər ilə təmiz ağ, cihaz çərçivəli ilə çərçivəsiz.
- Ekran görüntüsü sayı: Apple 10-a qədər icazə verir. Hamısını istifadə etmək məcburi deyil, lakin ilk 3-ü kritikdir.
- Panoramik və fərdi: Sürüşdürmə zamanı iki çərçivəni əhatə edən şəkillər məşğulluğu artıra bilər, lakin bu nümunə ilə tanış olmayan istifadəçiləri çaşdıra bilər.
Ekran görüntüsü test protokolu
Mərhələ 1
Başlıq mesajlaşmasını test edin
Vizual dizaynı sabit saxlayın, yalnız ilk 2 ekran görüntünüzdəki başlıq mətnini dəyişdirin. Bu, mesajlaşmanın təsirini təcrid edir.
Mərhələ 2
Vizual üslubu test edin
Qalib mesajlaşma təsbit edildikdən sonra, başlıqları sabit saxlayaraq fərqli fonlar, rənglər və ya tərtibatlarla variantlar yaradın.
Mərhələ 3
Ekran görüntüsü sırasını test edin
Qalib ekran görüntülərinizi götürün və hansı sıranın ən yaxşı dönüşüm verdiyini görmək üçün fərqli ardıcıllıqları sınayın.
iOS-da Xüsusi Məhsul Səhifələri
Xüsusi Məhsul Səhifələri (CPP-lər) iOS ASO alətlər dəstindəki ən güclü və az istifadə olunan vasitələrdən biridir. Üzvi trafiki bölən PPO-dan fərqli olaraq, CPP-lər sizə müəyyən marketinq kanallarına və ya Search Ads açar söz qruplarına təyin etdiyiniz unikal URL-lər verir.
Strateji istifadə halları
- Açar sözə uyğun açılış səhifələri: Ən yaxşı 3-5 açar söz mövzunuzun hər biri üçün CPP yaradın. Əgər kimsə "büdcə planlayıcısı" axtarırsa, planlama xüsusiyyətlərini vurğulayan ekran görüntülərini göstərin. Apple Search Ads sizə CPP-ləri müəyyən açar söz qruplarına təyin etməyə imkan verir.
- Kanala uyğun səhifələr: Sosial media trafiki, influencer kampaniyaları və veb yönləndirmələr üçün fərqli CPP-lər yaradın. TikTok reklamından gələn istifadəçinin gözləntiləri Google axtarışından gələn istifadəçidən fərqlidir.
- Mövsümi kampaniyalar: Bayram kampaniyaları, məktəbə qayıdış dövrləri və ya yeni il fitness məqsədləri üçün CPP-lər yaradın. Standart səhifənizə toxunmadan hədəflənmiş CPP URL-ini dəyişdirin.
- Xüsusiyyət buraxılışları: Böyük bir yeni xüsusiyyət buraxdığınız zaman, standart səhifəni üzvi trafik üçün sabit saxlayaraq, elan kampaniyanız üçün həmin xüsusiyyəti vurğulayan bir CPP yaradın.
Hər bir CPP-nin performansını App Store Connect analitikası vasitəsilə izləyin. Fərqli səhifələr arasında dönüşüm nisbətlərini, yükləmə həcmlərini və saxlama göstəricilərini müqayisə edin.
Etibarlı Testlərin Dizaynı
Etibarsız nəticələr verən test, heç test etməməkdən daha pisdir, çünki sizə yanlış inam verir. Mağaza siyahısı eksperimentlərinin etibarlılıq prinsipləri bunlardır.
Nümunə ölçüsü tələbləri (30% baza quraşdırma nisbəti)
| Aşkarlana bilən yaxşılaşma | Variant başına göstərimlər | Gündə 1k ilə gün sayı |
|---|---|---|
| 20% nisbi (30% → 36%) | ~1600 | ~7 gün |
| 10% nisbi (30% → 33%) | ~6400 | ~13 gün |
| 5% nisbi (30% → 31,5%) | ~25.000 | ~50 gün |
Əgər tətbiqiniz gündə 1000 göstərim alırsa və 2 variantlı test (orijinal üstəgəl bir müalicə) aparırsınızsa, hər variant gündə 500 göstərim alır. Test müddətinizi buna uyğun planlaşdırın.
Testi heç vaxt 7 gündən az müddətə aparmayin
App Store trafiki həftənin günlərinə görə dəyişir. Yalnız iş günü məlumatlarını əhatə edən test həftə sonu davranış nümunələrini qaçırır. Minimum: 14 gün (iki tam həftəlik dövr).
Hər dəfə bir dəyişən
Eksperimentin qızıl qaydası: hər dəfə yalnız bir şeyi dəyişdirin. İkonanızı və ilk ekran görüntünüzü eyni anda dəyişdirsəniz və dönüşüm yaxşılaşarsa, hansı dəyişikliyin yaxşılaşmaya səbəb olduğunu bilməyəcəksiniz. Əvvəlcə ikonanı test edin, qalib variantı tətbiq edin, sonra ekran görüntülərini ayrıca test edin.
İstisna, tam kreativ yenilənmə edərkən və iki tamamilə fərqli vizual istiqaməti müqayisə etmək istədiyinizdə yaranır. Bu halda, bunu bütöv bir test kimi qəbul edin və fərdi elementləri ayırmaq əvəzinə "A istiqaməti ilə B istiqaməti"ni test etdiyinizi qəbul edin.
Xarici amillər
Test nəticələrinizi poza biləcək hadisələrdən xəbərdar olun: mövsümi trafik dəyişiklikləri, eyni vaxtda davam edən marketinq kampaniyaları, tətbiq yeniləmələri, kateqoriya reytinqi dəyişiklikləri və ya rəqib hərəkətləri. Test müddətinizdə əhəmiyyətli bir hadisə baş verərsə, testi uzadın və ya yenidən başladın.
Nəticələrin Düzgün Oxunması
Testiniz başa çatdıqda, sadəcə daha yüksək dönüşüm nisbətinə malik variantı seçmək istəyinə qarşı durın. Bu təhlil prinsiplərini tətbiq edin:
Statistik əhəmiyyətlilik
Nəticə statistik olaraq əhəmiyyətlidir, əgər onu təsadüfi olaraq müşahidə etmə ehtimalı həddinizdən aşağıdırsa (adətən 5%, və ya 95% etibar səviyyəsi). Google Play əhəmiyyətliliyi eksperiment nəticələrində göstərir. Apple PPO üçün bunu özünüz hesablamanız və ya onlayn əhəmiyyətlilik kalkulyatorundan istifadə etməniz lazım ola bilər.
Testiniz 3% yaxşılaşma göstərir, lakin statistik olaraq əhəmiyyətli deyilsə, variantın həqiqətən daha yaxşı olduğu nəticəsinə gələ bilməzsiniz. Bu səs-küy ola bilər. Ya daha çox məlumat toplamaq üçün testi uzadın, ya da fərqin etibarlı şəkildə ölçülə bilməyəcək qədər kiçik olduğunu qəbul edin.
Nəticələri seqmentləşdirin
Mümkünsə, nəticələrə trafik mənbəyi (üzvi axtarış, gəzmə, yönləndirmə) və bazara görə bölünüşdə baxın. Ümumi qalib olan bir variant müəyyən seqmentlərdə uduzmuş ola bilər.
Sonrakı göstəriciləri nəzərə alın
Dönüşüm nisbəti (göstərimlərdən quraşdırmalara) mağaza siyahısı testləri üçün əsas göstəricidir, lakin əhəmiyyətli olan tək o deyil. Bir variant daha çox yükləmə cəlb edirsə, lakin həmin istifadəçilər pis saxlanılırsa və ya heç vaxt ödənişli istifadəçiyə çevrilmirsə, "qalib" variant əslində gəliri azalda bilər.
Quraşdırmalarda qalib gələn, lakin saxlama və ya gəlirdə uduzan variant əsl qalib deyil. Mümkün olduqda sonrakı göstəriciləri izləyin.
Rüblük Test Yol Xəritəsinin Qurulması
Sporadik test sporadik nəticələr verir. Ən uğurlu tətbiqlər strukturlaşdırılmış test təqviminə əməl edir:
1-ci ay
İkona və ilk təəssürat
2-3 ikona variantı dizayn edin (1-2-ci həftələr). PPO testini 14+ gün aparın (2-4-cü həftələr). Nəticələri təhlil edin və qalibi tətbiq edin.
2-ci ay
Ekran görüntüsü mesajlaşması və sırasi
Fərqli başlıq yanasmaları ilə 2-3 alternativ ekran görüntüsü dəsti yaradın (1-2-ci həftələr). PPO testini aparın (2-4-cü həftələr). Qalibi tətbiq edin.
3-cü ay
Təkmilləşdirilmiş optimallaşdırma
Ǝn yaxşı 3 açar söz mövzusu üçün Xüsusi Məhsul Səhifələri yaradın (1-2-ci həftələr). CPP-ləri Search Ads-də başladın (2-3-cü həftələr). Rüblük nəticələri nəzərdən keçirin və növbəti rübü planlayın.
Testlər arasında davamlı
Rəsmi PPO testləri arasında, Mağaza Siyahısı məlumatlarından dönüşüm tendensiyalarını izləmək üçün istifadə edin. Siyahınızda heç bir dəyişiklik olmadan dönüşüm nisbətində qəfildən düşüş müşahidə etsəniz, xarici amilləri araşdırın: yeni rəqib, mövsümi dəyişiklik və ya Apple-ın axtarış nəticələri tərtibatında dəyişiklik.
İstifadə edin BoostYourApp Metadata Redaktoru ilə metadata dəyişikliklərinizin versiya tarixçəsini test nəticələri ilə birgə saxlayın. Bu, müəyyən dəyişiklikləri performans nəticələri ilə əlaqələndirməyi asanlaşdırır.
Kumulyativ Təsirin Ölçülməsi
Fərdi testlər mütəvazihə qazanc gətirə bilər. Burada 5% yaxşılaşma, orada 10% yaxşılaşma. Lakin bu qazanclar toplanır.
İntizamlı testin mürəkkəb təsiri
Toxunma nisbəti 15% yaxşılaşır (ikona testi) × quraşdırma nisbəti 12% yaxşılaşır (ekran görüntüsü testi) = cəmi 29% quraşdırma artımı eyni trafikdən. Dörd rübəlik intizamlı testdən sonra bir çox tətbiq üzvi dönüşüm nisbətini ikiqat artırır.
Açar ardıcıllıqdır. Ayda ən azı bir test aparmaq üçün öhdəlik götürün. Açıq qalib çıxarmayan testlər belə dəyərli bilik verir - onlar sizə həmin elementin artıq yaxşı optimallaşdırıldığını və resurslarınızı başqa yerə yönəltməyin daha yaxşı olacağını göstərir.
App store A/B testi bir sehrli güllə tapmaqla bağlı deyil. Siyahınızın hər elementində zəif performansı sistematik olaraq aradan qaldırmaqla bağlıdır. İkonadan başlayın. Ekran görüntülərinə keçin. Xüsusi Məhsul Səhifələrini əlavə edin. Hər şeyi test jurnalınızda izləyin.
A/B testi bir dəfəlik hadisə deyil - kumulyativ qazancların sistematik prosesidir. Ayda bir test, ardıcıl tətbiq edildyinə, iki rüb ərzində siyahınızı dönüşdürür.
Siyahınızın hazırda necə performans göstərdiyini görməyə hazırsınız? Mağaza Siyahınızı nəzərdən keçirin və növbəti metadata yeniləmənizi planlayın BoostYourApp ilə.
BoostYourApp Team
ASO & Analytics
Bloqdan daha çox
App Store Keyword Optimization: A Complete Guide
Your app's keyword field is only 100 characters. Every character counts. Here is how to make them work harder for you.
ASO Competitor Analysis: How to Find Keywords Your Rivals Miss
The fastest way to improve your App Store rankings is to learn from apps already ranking above you.