Парады па тэсціраванні A / B на эксперыментах Google Play

Google Play

Для распрацоўшчыкаў прыкладанняў для Android, Эксперыменты Google Play можа даць каштоўную інфармацыю і дапамагчы павялічыць колькасць установак. Правядзенне добра распрацаванага і добра спланаванага тэсту A / B можа зрабіць розніцу паміж карыстальнікам, які ўсталёўвае ваша дадатак, альбо тэстам канкурэнта. Аднак ёсць шмат выпадкаў, калі тэсты праводзіліся неналежным чынам. Гэтыя памылкі могуць спрацаваць з дадаткам і пашкодзіць яго прадукцыйнасць.

Вось кіраўніцтва па выкарыстанні Эксперыменты Google Play для A / B тэставання.

Наладжванне эксперымента Google Play

Вы можаце атрымаць доступ да кансолі Experiment з прыборнай панэлі кансолі распрацоўшчыка Google Play. Перайсці да Прысутнасць крамы злева на экране і выберыце Эксперыменты ў спісах крам. Адтуль вы можаце выбраць "Новы эксперымент" і наладзіць тэст.

Можна правесці два тыпы эксперыментаў: Графічны эксперымент па змаўчанні і Лакалізаваны эксперымент. Графічны эксперымент па змаўчанні запускае тэсты толькі ў рэгіёнах, мова якіх вы абралі па змаўчанні. Лакалізаваны эксперымент, з іншага боку, правядзе тэст у любым рэгіёне, у якім даступна ваша прыкладанне.

Першы дазваляе праверыць такія творчыя элементы, як абразкі і скрыншоты, а другі дазваляе праверыць кароткія і доўгія апісанні.

Выбіраючы варыянты тэсту, майце на ўвазе, што чым больш варыянтаў вы тэстуеце, тым больш часу можа спатрэбіцца для атрымання эфектыўных вынікаў. Занадта шмат варыянтаў можа прывесці да таго, што тэсты патрабуюць больш часу і трафіку, каб усталяваць даверны інтэрвал, які вызначае магчымы ўплыў пераўтварэнняў.

Разуменне вынікаў эксперыменту

Падчас запуску тэстаў вы можаце вымераць вынікі на аснове першых усталяваных установак альбо ўтрыманых усталёўшчыкаў (адзін дзень). Першы раз усталёўшчыкі - гэта агульная колькасць пераўтварэнняў, прывязаных да варыянта, пры гэтым захаваныя ўсталёўшчыкі - гэта карыстальнікі, якія захоўвалі прыкладанне пасля першага дня.

Кансоль таксама прадастаўляе інфармацыю пра бягучы (карыстальнікі, у якіх усталявана прыкладанне) і маштабаваны (колькі ўсталёўкі вы б гіпатэтычна набралі, калі б варыянт атрымаў 100% трафіку на працягу тэставага перыяду).

Эксперыменты Google Play і тэсціраванне A / B

Даверны інтэрвал у 90% ствараецца пасля таго, як тэст прайшоў дастаткова доўга, каб атрымаць рэальнае разуменне. Ён паказвае чырвона-зялёную паласу, якая паказвае, як тэарэтычна карэктавацца пераўтварэнні, калі б варыянт быў разгорнуты ў рэжыме рэальнага часу. Калі паласа зялёная, гэта станоўчы зрух, чырвоны, калі адмоўны, і / або абодва колеры азначае, што ён можа хістацца ў любы бок.

Лепшыя практыкі для разбору A / B у Google Play

Калі вы праводзіце тэст A / B, вы хочаце пачакаць, пакуль не будзе ўсталяваны даверны інтэрвал, перш чым рабіць якія-небудзь высновы. Усталёўкі на адзін варыянт могуць змяняцца на працягу ўсяго працэсу тэставання, таму, не запускаючы тэст дастаткова доўга, каб усталяваць узровень упэўненасці, варыянты могуць дзейнічаць па-рознаму пры ўжыванні ў рэжыме рэальнага часу.

Калі для ўстанаўлення давернага інтэрвалу недастаткова трафіку, вы можаце параўноўваць тэндэнцыі пераўтварэння па тыднях, каб даведацца, ці ўзнікаюць якія-небудзь паслядоўнасці.

Вы таксама захочаце адсочваць наступствы пасля разгортвання. Нават калі ў даверным інтэрвале гаворыцца, што тэставы варыянт мог бы папрацаваць лепш, яго фактычныя паказчыкі ўсё роўна могуць адрознівацца, асабліва калі быў чырвона-зялёны інтэрвал.

Пасля разгортвання тэставага варыянту сочыце за ўражаннямі і назірайце, як яны паўплываюць. Сапраўдны ўплыў можа быць іншым, чым прагназавалася.

Пасля таго, як вы вызначыце, якія варыянты працуюць лепш за ўсё, вам захочацца зрабіць ітэрацыю і абнавіць. Частка мэт тэсціравання A / B - знайсці новыя спосабы ўдасканалення. Даведаўшыся, што працуе, вы можаце ствараць новыя варыянты, улічваючы вынікі.

Эксперыменты Google Play і вынікі тэсціравання A / B

Напрыклад, пры працы з AVIS Gummicube прайшоў некалькі раўндаў тэсціравання A / B. Гэта дапамагло вызначыць, якія крэатыўныя элементы і паведамленні лепш пераўтвараюць карыстальнікаў. Такі падыход дазволіў павялічыць пераўтварэнні на 28% толькі з дапамогай графічных тэстаў.

Ітэрацыя важная для росту вашага прыкладання. Гэта дапаможа вам пастаянна павялічваць цыферблат для пераўтварэнняў па меры росту вашых намаганняў.

заключэнне

Тэставанне A / B можа стаць выдатным спосабам палепшыць ваша прыкладанне і агульны ўзровень Аптымізацыя крам прыкладанняў. Наладжваючы тэст, пераканайцеся, што вы абмежавалі колькасць варыянтаў, якія вы тэстуеце адначасова, каб паскорыць вынікі тэсту.

Падчас тэсту кантралюйце, як гэта ўплывае на ўсталёўкі і што адлюстроўвае даверны інтэрвал. Чым больш карыстальнікаў бачыць ваша прыкладанне, тым больш шанцаў на ўсталяванне паслядоўнай тэндэнцыі, якая пацвярджае вынікі.

Нарэшце, вы хочаце пастаянна паўтарацца. Кожная ітэрацыя можа дапамагчы вам даведацца, што лепш за ўсё пераўтварае карыстальнікаў, каб вы маглі лепш зразумець, як аптымізаваць прыкладанне і маштаб. Прыняўшы метадычны падыход да тэсціравання A / B, распрацоўшчык можа працаваць над далейшым развіццём свайго прыкладання.

Што вы думаеце?

Гэты сайт выкарыстоўвае Akismet для барацьбы са спамам. Даведайцеся, як дадзеныя апрацоўваюцца каментар.