Қолданбаңызға бета-тест өткізу жолы
Бета-тест өткізу үшін не білу керектігіңізді шешіңіз, нақты пайдаланушыларыңызға сәйкес келетін шағын топты шақырыңыз, оларға нақты бірінші тапсырма беріңіз және пікірлерді бір орында, белгіленген кестемен жинаңыз. Оларды тоқтататын нәрселерді түзетіңіз, топты раундтармен кеңейтіңіз, ал бетаны алдын ала жазған шығу критерийлері орындалғанда аяқтаңыз — сабырыңыз таусылғанда емес.
Бета — жұмсақ іске қосу емес. Басы, соңы және жауап беретін сұрағы бар құрылымдалған эксперимент.
Бета қай жерге сәйкес келеді
Идеяны тексеру проблеманың шешуге тұрарлық-тұрмайтынын сұрайды. Бета тарырақ сұрақ қояды: бұл нұсқа проблеманы нақты адамдарға нақты жағдайда шеше ме? Іске қосу жауап көбіне иә болғанда, одан кейін келеді.
Кімді шақырмас бұрын өзіңіз сынаңыз — іске қосар алдында қолданбаны қалай сынау керек осыны қамтиды. Тестілеушілер тіркелудің бұзылғанын табуы керек емес.
1-қадам: Бета нені анықтауы керек, соны жазып қойыңыз
Екі-үш сұрақ таңдаңыз. Жоспардың қалғаны соған негізделеді.
| Мақсат | Мысал сұрақ | Нені өлшеу керек |
|---|---|---|
| Қолдану ыңғайлылығы | Жаңа пайдаланушылар негізгі тапсырманы көмексіз орындай ала ма? | Соны өз бетінше аяқтағандардың үлесі |
| Құндылық | Адамдар еске салусыз қайта келе ме? | Екінші және үшінші аптадағы қайта кірулер |
| Сенімділік | Нақты деректермен және құрылғыларда тұра ма? | Ауырлығы бойынша қателер, қате журналдары |
| Төлеуге дайындық | Адамдар жоспарланған бағаны төлей ма? | Соңында конверсиялар немесе алдын ала тапсырыстар |
| Онбординг | Адамдар алғашқы сеансында қай жерде тоқтайды? | Тастап кету нүктелері, қолдау сұрақтары |
Ойдан шығарылған мысал: шағын кафелерге арналған ауысым жоспарлау қолданбасы екі мақсат қояды: «Менеджер бірінші сеансында көмексіз апталық кестені жариялай ала ма?» және «Қызметкерлер екінші аптада қолданбаны өз бетінше аша ма?»
2-қадам: Бета түрін таңдаңыз
| Түрі | Кім | Қай кезде жақсы | Айырбас |
|---|---|---|---|
| Достар және alpha | Сіз білетін адамдар | Өте ерте, айқын бұзылуларды табу | Сыпайы пікір, өкілдік жоқ |
| Жабық бета | Шақырылған мақсатты пайдаланушылар | Көпшілік алғашқы өнімдер | Адам жинау күш талап етеді |
| Ашық бета | Тіркелген кез келген адам | Масштабты және әртүрлілікті тексеру | Көбірек қолдау, тестілеушіге тереңдік аз |
| Ақылы бета | Құрушылық баға төлейтін пайдаланушылар | Төлеуге дайындықты тексеру | Жоғары күтулер |
Алғашқы өнім үшін бірнеше раундты жабық бета әдетте дұрыс таңдау.
3-қадам: Дұрыс тестілеушілерді жинаңыз
Ең жақсы тестілеушілерде проблема қазір бар, мақсатты пайдаланушыңызға сәйкес келеді және бета терезесінде қолданбаны сынауға уақыты бар. Оларды табатын жерлер:
- Күту тізіміңіз немесе электрондық пошта тізімі — іске қосар алдында аудитория құру бетін қараңыз.
- Идеяны тексеріп жүргенде сұхбат алған адамдар.
- Пайдаланушыларыңыз жиналатын шағын қауымдастықтар, жарнама ережелерін сақтап.
- Профильге сәйкес келетін желіңіздегі адамдарға тікелей шақыру.
Аралас топ құру үшін бірнеше сүзгі сұрағын қойыңыз: рөлі, мәселені қазір қалай шешеді, қай құрылғыны пайдаланады және мәселе қаншалықты жиі туындайды. Жауаптары мақсатты пайдаланушыңызға сәйкес келетіндерді шақырыңыз, және бетаны әріптес құрушылармен толтырмаңыз, егер олар мақсатты пайдаланушы болмаса.
Шақыру үлгісі
Сәлем, [аты] — тіркелгенде [проблема] туралы айттыңыз. Мен [өнім] үшін шағын жеке бета ашып жатырмын, ол [нәтиже] береді. Ол [басталу] мен [аяқталу] аралығында жұмыс істейді. Тестілеушілерден [нақты тапсырма] үшін аптасына кемінде бір рет пайдалануды және әр жұма сайын қысқа тексеру жауабын беруді сұраймын. Қарсылық білдірмейтін сыйақы ретінде бета кезінде тегін қолжетімділік және [құрушылық баға / ұзартылған тегін кезең]. Қызықтыра ма?
Уақыт міндетін адал айтыңыз. Не үшін тіркелгенін білетін адамдар жақсырақ пікір береді.
4-қадам: Бета жиынтығын дайындаңыз
Алғашқы шақыру жіберілер алдында мыналарды дайындаңыз:
- Қош келдіңіз хабарламасы — сілтеме, кіру жолы, бірінші тапсырма және проблеманы қалай хабарлау керектігі.
- Белгілі мәселелер тізімі, сонда тестілеушілер бір нәрсені он рет хабарламайды.
- Бір пікір арнасы. Форма, ортақ чат тобы немесе электрондық пошта — бір орын, бес емес.
- Қате туралы хабарлама үлгісі. Олар не істегенін, не күткенін, не болғанын, құрылғы мен браузерді және скриншотты сұраңыз. Жақсы қате туралы хабарлау ортақ нұсқасы бар.
- Негізгі аналитика немесе журналдар, сонда жадқа сүйенбей не болғанын көре аласыз.
- Деректер туралы анық күту. Бета кезінде деректер қалпына келтірілуі мүмкін болса, тестілеушілерге айтыңыз, және бітпеген қолданбаға құпия ақпарат енгізуді сұрамаңыз.
- Шарт пен құпиялылық негіздері. Қысқа бета келісімі мен құпиялылық ескертпесі; жеке деректермен жұмыс істесеңіз, жергілікті ережелерді немесе кеңесшіні тексеріңіз.
5-қадам: Раундтармен өткізіңіз
Раундтар мәселелерді көбірек адам кездеспес бұрын түзетуге мүмкіндік береді.
| Раунд | Тестілеушілер | Назар |
|---|---|---|
| 1-раунд | Аз топ | Тіркеле ала ма және негізгі тапсырманы орындай ала ма? Кейбір сеанстарды тікелей бақылаңыз. |
| 2-раунд | Үлкенірек топ | Бірнеше апта бойы нақты пайдалану; раундтар арасында негізгі мәселелерді түзетіңіз. |
| 3-раунд (міндетті емес) | Кеңірек немесе ашық | Сіздің көмегіңізсіз онбординг, сенімділік, баға тесті. |
1-раундта екі-үш тестілеушіден қолданбаны бірінші рет сынап жатқанда экранын бөлісуін сұраңыз. Үнсіз болыңыз және олар қай жерде тоқтайтынын бақылаңыз. Бұл көбіне бүкіл бетадағы ең пайдалы сағат болады.
6-қадам: Пікірді белгілі ырғақпен жинаңыз
Құрылымсыз «пікіріңіз бар ма?» хабарламалары бұлыңғыр жауап береді. Оның орнына қысқа, тұрақты тексеруді қолданыңыз:
Апталық тексеру (ойдан шығарылған мысал сұрақтар)
- Осы аптада [өнімді] не үшін пайдаландыңыз?
- Қайсысы ыңғайсыз немесе түсініксіз болды?
- Тапсырманы аяқтауға кедергі болған нәрсе жоқ па?
- Енді оны қолдана алмасаңыз, қалай сезінер едіңіз? (Өте өкінер едім / біршама / мүлде)
- Басқа ешнәрсе?
Адамдар айтқанды олардың істегенімен салыстырыңыз. Тамаша деп айтатын, бірақ ешқашан кірмейтін адам да сізге бірдеңе айтып жатыр.
7-қадам: Келгенді сұрыптаңыз
Әр пікірді бір тізімге жинап, апта сайын сұрыптаңыз.
| Санат | Мысалдар | Әрекет |
|---|---|---|
| Тоқтатушы | Тіркеле алмайды, деректер жоғалады, төлем сәтсіз | Дереу түзетіңіз, әсер еткен тестілеушілерге хабарлаңыз |
| Негізгі қате | Жиі құрылғыда негізгі мүмкіндік бұзылған | Осы раундта түзетіңіз |
| Шатасу | Адамдар батырманы таппайды, белгіні дұрыс оқымайды | Мәтінді немесе орналасуды түзетіңіз; арзан және құнды |
| Кіші қате | Визуалды ақау, сирек жағдай | Кейінге топтаңыз |
| Функция сұрауы | «Бұл X-ті де істей ала ма?» | Тіркеңіз, қандай проблеманы шешетінін сұраңыз, үлгілерді іздеңіз |
Бетаның ортасында үлкен мүмкіндіктер қоспаңыз. Әр жаңа мүмкіндік негізгі өнімнің жұмыс істейтінін анықтауды қиындатады.
8-қадам: Байланысты жабыңыз
Тестілеушілер пікірлерінің қолданылғанын көрсе, пікір беруді жалғастырады.
- Әр раундтан кейін қысқа өзгерістер журналын жіберіңіз: «Сіз X туралы айттыңыз; ол түзетілді».
- Хабарлама түзетуге әкелген кезде адамдарға аты бойынша жеке алғыс айтыңыз.
- Бета аяқталғанда тестілеушілерге айтыңыз: олардың деректері мен аккаунтына не болады және құрушылық ұсынысы не.
9-қадам: Дайын екеніңізді шешіңіз
Шығу критерийлерін бета басталмас бұрын жазыңыз, содан кейін соңында адал тексеріңіз. Үлгі:
- Белгілі тоқтатушы немесе деректерді жоятын қателер жоқ
- Жаңа тестілеушілердің көпшілігі негізгі тапсырманы көмексіз орындайды
- Тестілеушілердің айтарлықтай бөлігі кейінгі аптада өз бетінше қайта келеді
- Негізгі шатасу нүктелері түзетіліп, қайта сыналды
- Тіркелу, құпиясөзді қалпына келтіру және кез келген төлем ағыны соңына дейін жұмыс істейді
- Өнім кімге арналғаны туралы тестілеушілердің өз сөзімен анық хабарыңыз бар
Көп ұяшық белгіленсе, онбординг жетілдіруіне және ашық іске қосуға өтіңіз. Егер қайта пайдалану төмен болса, бұл қателер тізімі емес, өнім мәселесі — іске қосар алдында сұхбаттарға оралыңыз.
Mythex-пен бета өткізу
Mythex-пен құрастырсаңыз, бірнеше мүмкіндік бетаға айқын сәйкес келеді:
- 1-раунд үшін алдын ала қарау сілтемелері. Share батырмасы Mythex аккаунты жоқ адамдар үшін жұмыс істейтін, тірі алдын ала қарауға сілтеме жасайды, сондықтан ерте тестілеуші аяқталмаған жұмысты жариялас бұрын сынай алады. Әр топқа бір сілтеме жасаңыз және аяқтаған соң жойыңыз — Preview құжаттары сілтемелердің жобаны қалай оятып, кредит жұмсайтынын түсіндіреді.
- Ұзағырақ раундтар үшін жариялау. Жарияланған қолданба өз мекенжайында жұмыс істейді, бұл бірнеше апта пайдаланатын тестілеушілерге ыңғайлы.
- Әр раундтан бұрын App Testing. Чатқа
/testдеп жазсаңыз, агент алдын ала қараудан өтіп, бұзылған ағындар туралы хабарлайды — кез келгенді шақырмас бұрын пайдалы тексеру (App Testing құжаттары). - Checkpoints. Бета кезінде түзету бір нәрсені бұзса, бұрынғы checkpoint-ке қайтыңыз.
Тестілеушінің қате туралы хабарламасын тікелей чатқа қойып, агенттен оны қайталап, түзетуін сұраңыз, содан кейін түзету шыққанын тестілеушіге айтыңыз.
Сұрақтар
Маған нешеше бета-тестілеуші керек?
Көпшілік ойлағаннан аз. Мақсатты пайдаланушыңызға сәйкес келетін және қолданбаны шынымен пайдаланатын шағын топ ірі проблемалардың көбін ашады. Бірнешеуінен бастаңыз, тапқандарын түзетіңіз, содан кейін үлкенірек топқа кеңейтіңіз.
Бета-тест қанша уақыт созылуы керек?
Тестілеушілер қолданбаны нақты өмірдегідей пайдалануына жеткілікті уақыт керек, бұл көбіне апта сайын пайдаланылатын нәрсе үшін бірнеше апта дегенді білдіреді. Бета шексіз созылып кетпеуі үшін алдын ала аяқталу күнін белгілеңіз.
Бета-тестілеушілер ақы төлеуі керек пе?
Бұл не білгіңіз келетініңізге байланысты. Тегін бетаға адам жинау оңай; ақылы немесе жеңілдікті бета адамдардың өнімге ақы төлеуге жеткілікті бағалайтынын көрсетеді. Көп құрушы алдымен тегін жабық бета өткізіп, ақыны кейінгі кезеңде сұрайды.
Жабық және ашық бетаның айырмашылығы неде?
Жабық бета тек шақыру арқылы болады, әдетте сіз таңдаған және тікелей сөйлесетін шағын топ. Ашық бетаға кез келген адам тіркеле алады, бұл көбірек көлем мен әртүрлілік береді, бірақ жеке байланыс азаяды және қолдау жұмысы артады.
Бета-тестілеушілердің функция сұрауларымен не істеу керек?
Оларды тізіңіз, әрқайсысы қандай проблеманы шешетінін сұраңыз және үлгілерді іздеңіз. Көп бета алдымен қателер мен шатасуларды түзетуі керек; бета кезінде мүмкіндіктер қосу негізгі өнімнің жұмыс істеуін анықтауды қиындатады.