Kako preizkusiti eksperimentalne funkcije Netflixa

Obstaja veliko razlogov, zakaj je Netflix ena najboljših storitev pretakanja, če ne celo najboljša. Ponuja obilo inventivnega programiranja, ima vmesnik, ki je enostaven za uporabo, in redko trpi zaradi tehničnih težav. Toda kako je Netflixu tako prav?

Odgovor je temeljito testiranje. Vsaka posamezna sprememba Netflixa, od majhnih popravkov aplikacij do večjih sprememb algoritma, gre skozi več krogov podrobnega testiranja. Raziskali bomo, kako in zakaj podjetje to počne in kako se lahko odločite za testiranje funkcij Netflixa.

Kako se prijaviti za Netflixove teste

Če želite zagotoviti, da boste vedno imeli najsodobnejšo različico Netflixa, se morate prijaviti za prejemanje testov in predogledov. Privzeto so v to vključeni vsi, vendar tukaj lahko preverite, ali se niste prej onemogočili:

1. Na spletnem mestu Netflix premaknite miškin kazalec tvoja profilna slika v zgornjem desnem kotu.
2. Kliknite račun.
3. Zraven Nastavitve, kliknite Udeležba na testu.
4. Obrat Vključi me v teste in predoglede na in kliknite Končano.

Netflix ugotavlja, da "nastavitev ne velja za teste glede varnosti, boja proti goljufijam ali uveljavljanja Netflixovih pogojev uporabe". V bistvu ne morete omogočiti ali onemogočiti sprememb teh elementov.

Pomembno je omeniti, da če se odjavite od tega programa udeležbe v testu, ne boste videli novih preizkusne funkcije, to ne pomeni, da ne boste izpostavljeni A/B testiranju obstoječih funkcij – več o tem kasneje.

Zakaj Netflix eksperimentira in kako deluje?

Netflix testira vse: registracijo, predvajanje, priporočila, iskanje... praviš, preizkušeno je. Razlog za to je, da želi Netflix preveriti svoje predpostavke. Ni pomembno, kako močno si zaposleni v Netflixu prizadeva za idejo – podatki so odgovorni za odločitve, ne mnenje. V nasprotnem primeru bi sprememba lahko drastično propadla, ker je temeljila na slutnji.

Podjetje to počne s testiranjem A/B. V svojem bistvu je A/B testiranje način primerjave dveh različic nečesa, da se ugotovi, katera je najuspešnejša. Merilo uspeha ni vedno enako; odvisno je od spremembe. Cilj poskusa je lahko ugotoviti, katera različica pridobi več ljudi, da se registrirajo ali v katero odkrijte nove Netflixove oddaje, ali pa da gledate čim dlje.

Netflix pa ne preizkuša le dveh različic. Ima tako obsežno bazo uporabnikov, ne le v smislu neobdelanih številk, temveč tudi glede demografije in vedenja. To pomeni, da lahko Netflix svoje uporabnike loči v številne eksperimentalne skupine, pri čemer preizkuša vedno tako rahlo prilagojene različice, da ugotovi, katera je resnično optimalna.

Kot je podrobno opisano na Blog o tehnologiji Netflix, Netflix svoje uporabnike dodeli tem skupinam s paketno dodelitvijo in dodelitvijo v realnem času. Paket preizkusu dodeli določen nabor članov, za katere je znano, da izpolnjujejo merila preskusa. Realni čas je bolj prilagodljiv, saj uporabnike prestavlja med teste in iz njih, ko bolj sodelujejo s platformo.

Kadarkoli ste lahko del številnih testov. Netflix ima interno orodje, ki oddelku omogoča spremljanje, katere poskuse izvajajo druge ekipe, da zagotovi uporabnik ni dodeljen več nasprotujočim si testom (npr. dvema testoma, ki spremenita umestitev istega gumb). Ti testi lahko trajajo dneve, tedne ali mesece.

V drugi objavi na Blog o tehnologiji Netflix, podjetje priznava, da vsako leto testira na stotine sprememb, a le majhen odstotek teh se uvede po vsem svetu. Razlog za to je, da A/B testi kažejo, da večina poskusov ne izboljša platforme.

Toda Netflix tega ne vidi kot neuspehe. Kot piše v blogu:

Ko naši člani s svojimi dejanji odklonijo nove izkušnje z izdelki, se še vedno veliko naučimo o njihovih preferencah, kaj deluje (in ne deluje!) za različne kohorte članov in kjer so priložnosti za inovacije ali pa tudi ne.

To vodi do novih hipotez in testov; nekateri od teh so lahko uspešni. Poleg tega, ko raste baza članov in se spreminjajo njegova pričakovanja in preference, Netflix ponovno pregleda stare poskuse, da bi ugotovil, ali zdaj zagotavljajo vrednost.

Navsezadnje, čeprav je splošna izkušnja enaka, to pomeni, da Netflix, ki ga uporabljate, ni nujno enak vašim prijateljem ali družini. Vaša domača stran lahko vsebuje različne vrstice, gumbi za predvajanje so lahko videti drugače, lahko nevede imate drugačen algoritem priporočil itd.

Katere funkcije je Netflix preizkusil?

Netflix vedno preizkuša spremembe in nove funkcije. Nekateri od teh nikoli ne pridejo na dan, drugi pa so zdaj priljubljeni sestavni deli platforme. Primeri preteklih poskusov Netflixa vključujejo:

• Spreminjanje velikosti ploščic na domači strani, da vidite, kaj je spodbudilo uporabnike k gledanju.
• Spreminjanje tona gumba za poziv k dejanju na domači strani, da bi videli, kaj je spodbudilo uporabnike, da kliknejo in se prijavijo.
• Predstavljamo zbirke vsebine, ki jih kurirajo Netflixovi kreativci, namesto algoritma, da bi ugotovili, ali je uporabnike spodbudil, da si ogledajo nekaj, kar ni v skladu z njihovimi običajnimi priporočili.
• Zaračunavanje naročnikom, ki si delijo svoj račun Netflix zunaj svojega gospodinjstva, da bi ugotovili, ali se je prihodek povečal prek obstoječih strank.
• Predstavljamo gumb, ki prikazuje nekaj psuedo-naključno, da si ga nekdo ogleda (na podlagi njihovega zgodovina ogledov in priporočila), da vidite, ali je podaljšal čas gledanja in zmanjšal porabljen čas pomikanje. To je kasneje postalo gumb Netflix "Predvajaj nekaj"..

Kot smo že omenili, imate možnost prejemati nekatere od teh večjih testov (nove funkcije, kot je gumb za naključno premeščanje), tako da se odločite za sodelovanje pri testiranju prek svojega računa Netflix. Vendar pa boste vedno prejeli A/B teste za manjše prilagoditve, ne glede na nastavitev.

Na primer, morda ste opazili, da se slikovna ploščica, ki se uporablja za predstavljanje filma ali oddaje na vaši domači strani, spremeni občasno ali je videti drugače od prijateljeve – to je zato, ker Netflix prikaže sliko, za katero meni, da je bolj verjetno zdi privlačna.

Vendar testi niso vedno usmerjeni v uporabnika. Netflix na primer nenehno prilagaja tehnologijo, ki jo uporablja za napajanje svojega pretakanja, da zagotovi popolno ravnovesje med kakovostjo in doslednostjo. Nič ni hujšega kot počasna storitev pretakanja.

Netflix se nenehno izboljšuje

Netflix je razvijajoča se platforma, ki se nenehno spreminja, da bi obstoječe naročnike zadovoljila in privabila nove stranke. To ne pomeni, da je Netflix popoln – daleč od tega, saj Netflixu manjka veliko koristnih funkcij –, vendar bi vaše vedenje sčasoma pripeljalo do izboljšav.

8 novih funkcij, ki bi jih radi videli Netflix

Preberite Naprej

O avtorju