Kā veikt lietotnes beta testu

Lai veiktu beta testu, nosakiet, ko vēlaties uzzināt, uzaiciniet nelielu grupu cilvēku, kas atbilst jūsu reālajiem lietotājiem, dodiet viņiem skaidru pirmo uzdevumu un savāciet atsauksmes vienā vietā pēc fiksēta grafika. Labojiet to, kas viņiem traucē, paplašiniet grupu kārtās un beidziet beta, kad ir izpildīti iepriekš uzrakstīti pabeigšanas kritēriji — nevis tad, kad jums beidzas pacietība.

Beta nav mīkstā palaišana. Tas ir strukturēts eksperiments ar sākumu, beigām un jautājumu, uz kuru jāatbild.

Kur iederas beta

Validācija jautā, vai problēma ir vērts risināt. Beta uzdod šaurāku jautājumu: vai šī produkta versija to risina reāliem cilvēkiem reālos apstākļos? Palaišana nāk pēc tam, kad atbilde lielākoties ir jā.

Pirms kāda uzaicināšanas veiciet pats savu testēšanu — kā pārbaudīt lietotni pirms palaišanas aptver to. Testētājiem nevajadzētu būt tiem, kas atklāj, ka reģistrācija nedarbojas.

1. solis: uzrakstiet, uz ko beta jāatbild

Izvēlieties divus vai trīs jautājumus. Viss pārējais plāns izriet no tiem.

Izdomāts piemērs: maiņu plānošanas lietotne mazām kafejnīcām nosaka divus mērķus: "Vai vadītājs var publicēt nedēļas grafiku savā pirmajā sesijā bez palīdzības?" un "Vai darbinieki paši atver lietotni otrajā nedēļā?"

2. solis: izvēlieties beta veidu

Pirmajam produktam parasti pareizs ir slēgts beta ar dažām kārtām.

3. solis: piesaistiet pareizos testētājus

Labākajiem testētājiem problēma ir tieši tagad, viņi atbilst jūsu mērķa lietotājam un viņiem ir laiks izmēģināt lietotni beta logā. Vietas, kur tos atrast:

• Jūsu gaidīšanas saraksts vai e-pasta saraksts — skatiet kā veidot auditoriju pirms palaišanas.
• Cilvēki, ar kuriem runājāt validācijas laikā.
• Nišas kopienas, kur jūsu lietotāji pulcējas, ievērojot to noteikumus par reklāmu.
• Tieši uzaicinājumi cilvēkiem jūsu tīklā, kas atbilst profilam.

Uzdodiet dažus atlases jautājumus, lai varētu izveidot sajaukumu: viņu loma, kā viņi šobrīd risina problēmu, kādu ierīci izmantotu un cik bieži problēma rodas. Uzaicniet cilvēkus, kuru atbildes atbilst jūsu mērķa lietotājam, un nepiepildiet beta ar kolēģiem uzņēmējiem, ja vien viņi nav mērķa lietotāji.

Uzaicinājuma veidne

Sveiks, [vārds] — pieminēji [problēmu], kad reģistrējies. Atveru nelielu privātu [produkta] beta, kas [rezultāts]. Tas darbosies no [sākums] līdz [beigas]. Lūdzu testētājiem to izmantot [reālam uzdevumam] vismaz reizi nedēļā un katru piektdienu atbildēt īsā atskaitē. Pretī: bezmaksas piekļuve beta laikā un [dibinātāju cena / pagarināts bezmaksas periods]. Interesē?

Godīgi norādiet laika apņemšanos. Cilvēki, kas zina, uz ko piekrīt, sniedz labākas atsauksmes.

4. solis: sagatavojiet beta komplektu

Pirms pirmā uzaicinājuma nosūtīšanas sagatavojiet:

• Sveiciena ziņu ar saiti, kā pieteikties, pirmo uzdevumu un kā ziņot par problēmām.
• Zināmo problēmu sarakstu, lai testētāji nebūtu spiesti desmit reizes ziņot par to pašu.
• Vienu atsauksmju kanālu. Forma, kopīga tērzēšanas grupa vai e-pasta adrese — viena vieta, nevis piecas.
• Kļūdas ziņojuma veidni. Lūdziet, ko viņi darīja, ko gaidīja, kas notika, ierīci un pārlūku, un ekrānuzņēmumu. Kā uzrakstīt labu kļūdas ziņojumu satur versiju, ko var kopīgot.
• Pamata analītiku vai žurnālus, lai redzētu, kas notika, nepaļaujoties uz atmiņu.
• Skaidras cerības par datiem. Pasakiet testētājiem, ja dati beta laikā var tikt atiestatīti, un nelūdziet ievadīt sensitīvu informāciju nepabeigtā lietotnē.
• Pamata noteikumus un privātumu. Īsa beta vienošanās un privātuma piezīme; pārbaudiet vietējos noteikumus vai konsultējieties, ja apstrādājat personas datus.

5. solis: veiciet to kārtās

Kārtas ļauj novērst problēmas, pirms ar tām saskaras vairāk cilvēku.

1. kārtā lūdziet divus vai trīs testētājus dalīties ekrānā, kamēr viņi pirmo reizi izmēģina lietotni. Paliekiet klusi un vērojiet, kur viņi vilcinās. Tā bieži ir visnoderīgākā stunda visā beta.

6. solis: savāciet atsauksmes pēc ritma

Nestrukturēti ziņojumi "vai ir kādas atsauksmes?" dod neskaidras atbildes. Izmantojiet īsu, regulāru atskaiti:

Iknedēļas atskaite (izdomāti piemēra jautājumi)

1. Kam jūs šonedēļ izmantojāt [produktu]?
2. Kas bija apgrūtinoši vai neskaidrs?
3. Vai kaut kas trūka, kas neļāva pabeigt uzdevumu?
4. Kā jūtaties, ja vairs nevarētu to lietot? (Ļoti vīlies / nedaudz / nemaz)
5. Vēl kas?

Apvienojiet to, ko cilvēki saka, ar to, ko viņi dara. Kāds, kas saka, ka tas ir lieliski, bet nekad neielogojas, arī kaut ko jums stāsta.

7. solis: sašķirojiet to, kas ienāk

Ievietojiet katru atsauksmi vienā sarakstā un katru nedēļu kārtojiet.

Pretojieties lielu funkciju pievienošanai beta vidū. Katra jauna funkcija apgrūtina to, vai pamatprodukts darbojas.

8. solis: aizveriet cilpu

Testētāji turpina sniegt atsauksmes, kad redz, ka tās tiek izmantotas.

• Pēc katras kārtas nosūtiet īsu izmaiņu žurnālu: "Jūs ziņojāt par X; tas ir labots."
• Pateicieties cilvēkiem vārdā, personīgi, kad viņu ziņojums noveda pie labojuma.
• Pasakiet testētājiem, kad beta beidzas, kas notiek ar viņu datiem un kontu un kāds ir viņu dibinātāju piedāvājums.

9. solis: izlemiet, vai esat gatavi

Uzrakstiet pabeigšanas kritērijus pirms beta sākuma un godīgi pārbaudiet tos beigās. Veidne:

• Nav zināmu bloķētāju vai datu zuduma kļūdu
• Lielākā daļa jauno testētāju izpilda galveno uzdevumu bez palīdzības
• Pietiekams skaits testētāju atgriežas paši vēlākajās nedēļās
• Galvenās neskaidrības ir labotas un pārbaudītas vēlreiz
• Reģistrācija, paroles atjaunošana un jebkura maksājumu plūsma darbojas no sākuma līdz beigām
• Jums ir skaidrs vēstījums par to, kam produkts paredzēts, testētāju vārdiem

Ja lielākā daļa rūtiņu ir atzīmēta, pārejiet uz ievades pulēšanu un publisku palaišanu. Ja atgriešanās lietošana ir zema, tā ir produkta, nevis kļūdu saraksta problēma — atgriezieties pie intervijām pirms palaišanas.

Beta ar Mythex

Ja veidojat ar Mythex, daži līdzekļi labi iederas beta:

• Priekšskatījuma saites 1. kārtai. Poga Share izveido saiti uz jūsu dzīvo priekšskatījumu, kas darbojas cilvēkiem bez Mythex konta, tāpēc agrīnais testētājs var izmēģināt nepabeigtu darbu, pirms publicējat. Veidojiet vienu saiti katrai grupai un dzēsiet to, kad esat pabeidzis — Priekšskatījuma dokumentācija izskaidro, kā saites pamodina projektu un izmanto kredītus.
• Publicējiet garākām kārtām. Publicēta lietotne darbojas savā adresē, kas der testētājiem, kuri to lieto vairāku nedēļu garumā.
• App Testing pirms katras kārtas. Ierakstiet /test tērzēšanā, un aģents noklikšķina caur jūsu priekšskatījumu un ziņo par bojātām plūsmām — noderīga pārbaude, pirms kādu uzaicināt (App Testing dokumentācija).
• Kontrolpunkti. Ja labojums beta vidū kaut ko salauž, atgriezieties pie iepriekšējā kontrolpunkta.

Ielīmējiet testētāja kļūdas ziņojumu tieši tērzēšanā un lūdziet aģentam to reproducēt un salabot, pēc tam paziņojiet testētājam, kad tas ir pieejams.

Jautājumi