Ako spustiť beta test vašej aplikácie

Ak chcete spustiť beta test, rozhodnite, čo sa potrebujete dozvedieť, pozvite malú skupinu ľudí, ktorí zodpovedajú vašim reálnym používateľom, dajte im jasnú prvú úlohu a spätnú väzbu zbierajte na jednom mieste podľa pevného plánu. Opravte, čo ich blokuje, skupinu rozširujte v kolách a betu ukončite vtedy, keď sa splnia kritériá ukončenia, ktoré ste vopred napísali — nie keď vám dôjde trpezlivosť.

Beta nie je mäkké spustenie. Je to štruktúrovaný experiment so začiatkom, koncom a otázkou, na ktorú treba odpovedať.

Kde beta zapadá

Validácia skúma, či problém stojí za riešenie. Beta kladie užšiu otázku: rieši táto verzia produktu problém pre skutočných ľudí v reálnych podmienkach? Spustenie príde neskôr, keď je odpoveď väčšinou áno.

Pred pozvaním ktoréhokoľvek človeka urobte najprv vlastné testovanie — ako otestovať aplikáciu pred spustením to pokrýva. Testeri by nemali byť tí, ktorí zistia, že registrácia nefunguje.

Krok 1: Zapíšte, na čo musí beta odpovedať

Vyberte dve alebo tri otázky. Všetko ostatné v pláne z nich vyplýva.

Vymyslený príklad: aplikácia na plánovanie zmien pre malé kaviarne si stanoví dva ciele: „Dokáže manažér zverejniť rozpis na týždeň pri prvej relácii bez pomoci?“ a „Otvárajú zamestnanci aplikáciu sami aj v druhom týždni?“

Krok 2: Vyberte typ bety

Pri prvom produkte je zvyčajne správnou voľbou uzavretá beta s niekoľkými kolami.

Krok 3: Získajte správnych testerov

Najlepší testeri majú problém práve teraz, zodpovedajú vašej cieľovej skupine a majú čas aplikáciu vyskúšať počas bety. Kde ich nájsť:

• Váš zoznam čakateľov alebo e-mailový zoznam — pozrite si ako vybudovať publikum pred spustením.
• Ľudia, ktorých ste vypočuli pri validácii.
• Úzke komunity, kde sa vaši používatelia stretávajú, s dodržaním ich pravidiel pre propagáciu.
• Priame pozvánky ľuďom vo vašej sieti, ktorí zodpovedajú profilu.

Položte niekoľko otázok na výber, aby ste zostavili zmiešanú skupinu: ich rolu, ako dnes riešia problém, akým zariadením by aplikáciu používali a ako často sa problém objavuje. Pozývajte ľudí, ktorých odpovede zodpovedajú vašej cieľovej skupine, a nenapĺňajte betu inými zakladateľmi, pokiaľ nie sú cieľovým používateľom.

Šablóna pozvánky

Ahoj [meno] — spomenul si [problém], keď si sa registroval. Otváram malú súkromnú betu [produkt], ktorá [výsledok]. Beží od [začiatok] do [koniec]. Žiadam testerov, aby ju použili na [reálna úloha] aspoň raz týždenne a každý piatok odpovedali na krátku kontrolu. Výmenou dostanete bezplatný prístup počas bety a [zakladateľská cena / predĺžené bezplatné obdobie]. Máš záujem?

Časovú náročnosť uveďte úprimne. Ľudia, ktorí vedia, na čo sa prihlasujú, dávajú lepšiu spätnú väzbu.

Krok 4: Pripravte si betasadu

Pred odoslaním prvej pozvánky mať pripravené tieto veci:

• Uvítaciu správu s odkazom, ako sa prihlásiť, prvou úlohou na vyskúšanie a ako nahlásiť problémy.
• Zoznam známych problémov, aby testeri nenahlasovali to isté desaťkrát.
• Jeden kanál na spätnú väzbu. Formulár, zdieľaná konverzačná skupina alebo e-mailová adresa — jedno miesto, nie päť.
• Šablónu na hlásenie chýb. Opýtajte sa, čo urobili, čo očakávali, čo sa stalo, zariadenie a prehliadač a snímku obrazovky. Ako napísať dobré hlásenie chyby obsahuje verziu, ktorú môžete zdieľať.
• Základnú analytiku alebo logy, aby ste videli, čo sa stalo, bez spoliehania sa na pamäť.
• Jasné očakávania ohľadom dát. Povedzte testerom, ak sa dáta počas bety môžu resetovať, a nežiadajte ich, aby do nedokončenej aplikácie vkladali citlivé informácie.
• Základy podmienok a ochrany súkromia. Krátka dohoda o beta teste a poznámka o súkromí; ak spracúvate osobné údaje, overte miestne pravidlá alebo sa poraďte s odborníkom.

Krok 5: Spustite to v kolách

Kolá vám umožnia opraviť problémy skôr, než na ne narazí viac ľudí.

V kole 1 požiadajte dvoch alebo troch testerov, aby zdieľali obrazovku, kým aplikáciu prvýkrát vyskúšajú. Buďte ticho a sledujte, kde zaváhajú. Toto je často najužitočnejšia hodina celej bety.

Krok 6: Zbierajte spätnú väzbu v pravidelnom rytme

Neštruktúrované správy typu „nejaká spätná väzba?“ dostávajú vágne odpovede. Namiesto toho použite krátku, pravidelnú kontrolu:

Týždenná kontrola (vymyslené príkladové otázky)

1. Na čo ste tento týždeň používali [produkt]?
2. Čo bolo frustrujúce alebo nejasné?
3. Chýbalo niečo, kvôli čomu ste nedokončili úlohu?
4. Ako by ste sa cítili, keby ste ho už nemohli používať? (Veľmi sklamaný / trochu / vôbec)
5. Čokoľvek iné?

Kombinujte to, čo ľudia hovoria, s tým, čo robia. Niekto, kto hovorí, že je to skvelé, ale nikdy sa neprihlási, vám tiež niečo hovorí.

Krok 7: Triedenie prichádzajúcej spätnej väzby

Každú spätnú väzbu zaraďte do jedného zoznamu a triedte ju týždenne.

Odolajte pridávaniu veľkých funkcií v polovici bety. Každá nová funkcia sťažuje zistiť, či základný produkt funguje.

Krok 8: Uzavrite cyklus

Testeri budú ďalej dávať spätnú väzbu, keď uvidia, že sa s ňou pracuje.

• Po každom kole pošlite krátky zoznam zmien: „Nahlásili ste X; je to opravené.“
• Poďakujte ľuďom menom, súkromne, keď ich hlásenie viedlo k oprave.
• Povedzte testerom, kedy beta skončí, čo sa stane s ich dátami a účtom a aká je ich zakladateľská ponuka.

Krok 9: Rozhodnite, či ste pripravení

Kritériá ukončenia napíšte pred začiatkom bety a potom ich na konci úprimne skontrolujte. Šablóna:

• Žiadne známe blokujúce chyby ani chyby so stratou dát
• Väčšina nových testerov dokončí základnú úlohu bez pomoci
• Značný podiel testerov sa vráti sám v neskorších týždňoch
• Najväčšie body zmätku boli opravené a znova otestované
• Registrácia, obnova hesla a každý platobný postup fungujú od začiatku do konca
• Máte jasnú správu o tom, pre koho produkt je, vo vyjadrení testerov

Ak je väčšina políčok zaškrtnutá, prejdite na doladenie zapracovania a verejné spustenie. Ak je návratnosť nízka, ide o produktovú otázku, nie o zoznam chýb — vráťte sa k rozhovorom pred spustením.

Beta s Mythex

Ak stavate s Mythex, niekoľko funkcií sa dobre hodí k bete:

• Odkazy na náhľad pre kolo 1. Tlačidlo Share vytvorí odkaz na váš živý náhľad, ktorý funguje aj pre ľudí bez účtu Mythex, takže skorý tester môže vyskúšať nedokončenú prácu skôr, než publikujete. Vytvorte jeden odkaz pre každú skupinu a po skončení ho zmažte — dokumentácia k náhľadu vysvetľuje, ako odkazy prebúdzajú projekt a spotrebúvajú kredity.
• Publikovanie pre dlhšie kolá. Publikovaná aplikácia beží na vlastnej adrese, čo vyhovuje testerom, ktorí ju používajú niekoľko týždňov.
• Testovanie v aplikácii pred každým kolom. Napíšte do chatu /test a agent prejde váš náhľad a nahlási pokazené postupy, čo je užitočná kontrola pred pozvaním kohokoľvek (dokumentácia App Testing).
• Checkpointy. Ak oprava v polovici bety niečo pokazí, vráťte sa k skoršiemu checkpointu.

Spätné hlásenie chyby od testera vložte priamo do chatu a požiadajte agenta, aby chybu reprodukoval a opravil, potom testerovi povedzte, kedy je oprava živá.

Otázky