Hvordan prøve eksperimentelle Netflix-funksjoner

Det er mange grunner til at Netflix er en av, om ikke den, beste strømmetjenestene som finnes. Den tilbyr et vell av oppfinnsom programmering, har et brukervennlig grensesnitt og lider sjelden av tekniske problemer. Men hvordan får Netflix det så riktig?

Svaret er grundig testing. Hver eneste endring av Netflix, fra små appjusteringer til store algoritmeendringer, går gjennom flere runder med detaljert testing. Vi skal utforske hvordan og hvorfor selskapet gjør dette, og hvordan du kan velge å teste Netflix-funksjoner.

Slik melder du deg på Netflix-tester

Hvis du vil sikre at du alltid opplever den banebrytende versjonen av Netflix, må du melde deg på for å motta tester og forhåndsvisninger. Som standard er alle inkludert i dette, men her er hvordan du sjekker at du ikke har meldt deg ut tidligere:

1. Hold musepekeren over fra Netflix-nettstedet ditt profilbilde øverst til høyre.
2. Klikk Regnskap.
3. Ved siden av Innstillinger, klikk Testdeltakelse.
4. Sving Inkluder meg i tester og forhåndsvisninger på og klikk Ferdig.

Netflix bemerker at "innstillingen gjelder ikke for tester angående sikkerhet, anti-svindel eller håndheving av Netflix-vilkårene for bruk". I hovedsak kan du ikke velge inn eller bort endringer som er gjort i disse elementene.

Det er viktig å merke seg at selv om du velger bort dette testdeltakelsesprogrammet, utelukker du fra å se nye prøvefunksjoner, betyr det ikke at du ikke vil bli utsatt for A/B-testing av eksisterende funksjoner – mer om det seinere.

Hvorfor eksperimenterer Netflix og hvordan fungerer det?

Netflix tester alt: registrering, avspilling, anbefalinger, søk... you name it, det er testet. Grunnen til dette er at Netflix ønsker å sjekke sine forutsetninger. Det spiller ingen rolle hvor hardt en Netflix-ansatt presser på for en idé – data informerer beslutninger, ikke mening. Ellers kan en endring mislykkes drastisk fordi den var basert på en anelse.

Selskapet gjør dette gjennom A/B-testing. I kjernen er A/B-testing en måte å sammenligne to versjoner av noe for å se hvilken som er mest vellykket. Målingen av suksess er ikke alltid den samme; det avhenger av endringen. Eksperimentet kan ha som mål å se hvilken versjon som får flere folk til å registrere seg, eller til oppdage nye Netflix-serier, eller å se på så lenge som mulig.

Netflix tester imidlertid ikke bare to versjoner. Den har en så ekspansiv brukerbase, ikke bare når det gjelder råtall, men også når det gjelder demografi og atferd. Det betyr at Netflix kan dele opp brukerne sine i mange eksperimentelle grupper, og prøve ut aldri så litt finjusterte versjoner for å se hvilken som virkelig er optimal.

Som detaljert på Netflix teknologiblogg, tildeler Netflix sine brukere til disse gruppene gjennom batch- og sanntidsallokering. Batch tilordner et fast sett med medlemmer til et eksperiment som er kjent for å oppfylle prøvens kriterier. Sanntid er mer fleksibel, og blander brukere inn og ut av tester etter hvert som de samhandler mer med plattformen.

Når som helst kan du være en del av mange tester. Netflix har et internt verktøy som lar en avdeling spore hvilke eksperimenter andre team utfører, for å sikre en bruker blir ikke tildelt flere motstridende tester (f.eks. to tester som endrer plasseringen av den samme knapp). Disse testene kan kjøre i dager, uker eller måneder.

I et annet innlegg på Netflix teknologiblogg, innrømmer selskapet at det tester hundrevis av endringer hvert år, men bare en liten prosentandel av disse ruller ut globalt. Grunnen til dette er at A/B-testene viser at de fleste eksperimentene ikke forbedrer plattformen.

Men Netflix ser ikke på disse som feil. Som bloggen lyder:

Når våre medlemmer stemmer ned nye produktopplevelser med sine handlinger, lærer vi fortsatt mye om deres preferanser, hva fungerer (og fungerer ikke!) for ulike medlemskull, og der det kan være, eller ikke finnes, muligheter for innovasjon.

Dette fører til nye hypoteser og tester; noen av disse kan være vellykkede. I tillegg, ettersom medlemsbasen vokser, og forventningene og preferansene endres, går Netflix tilbake til gamle eksperimenter for å se om de nå gir verdi.

Til syvende og sist, mens den generelle opplevelsen er den samme, betyr dette at Netflix du bruker ikke nødvendigvis er identisk med venner eller familie. Hjemmesiden din kan inneholde forskjellige rader, avspillingsknappene kan se annerledes ut, du kan uten å vite det ha en annen anbefalingsalgoritme, og så videre.

Hvilke funksjoner har Netflix testet?

Netflix tester alltid endringer og nye funksjoner. Noen av disse gjør aldri dagens lys, mens andre nå er elskede komponenter av plattformen. Eksempler på tidligere Netflix-eksperimenter inkluderer:

• Endre størrelsen på flisene på hjemmesiden for å se hvilke som oppmuntret brukere til å se.
• Endring av tonen i handlingsfremmende knapp på hjemmesiden for å se hvilke som oppmuntret brukere til å klikke seg gjennom for å registrere seg.
• Vi introduserer samlinger av innhold kuratert av Netflix-kreativer, i stedet for en algoritme, for å se om det oppmuntret brukere til å se noe utenfor deres vanlige anbefalinger.
• Belastning av abonnenter som deler Netflix-kontoen sin utenfor husholdningen, for å se om inntektene vokste gjennom eksisterende kunder.
• Vi introduserer en knapp som viser noe pseudo-tilfeldig for noen å se (basert på deres seerhistorikk og anbefalinger) for å se om det økte seertiden og reduserte tidsbruken rulling. Dette ble senere Netflix "Spill av noe"-knappen.

Som nevnt tidligere har du muligheten til å motta noen av disse større testene (nye funksjoner som shuffle-knappen) ved å velge å teste deltakelse via Netflix-kontoen din. Du vil imidlertid alltid motta A/B-tester for mindre justeringer, uansett innstillinger.

Som et eksempel kan du ha lagt merke til at bildeflisen som brukes til å representere en film eller et program på hjemmesiden din endres med jevne mellomrom, eller ser annerledes ut enn vennens – dette er fordi Netflix viser et bilde det tror du er mer sannsynlig finne tiltalende.

Tester er imidlertid ikke alltid brukervendte. For eksempel justerer Netflix hele tiden teknologien den bruker for å drive strømmingen, for å sikre den perfekte balansen mellom kvalitet og konsistens. Det er ikke noe verre enn en treg strømmetjeneste.

Netflix blir stadig bedre

Netflix er en plattform i utvikling som endrer seg hele tiden for å holde eksisterende abonnenter fornøyde og få nye kunder inn. Det betyr ikke at Netflix er perfekt – langt ifra, siden det mangler mange nyttige funksjoner på Netflix – men at oppførselen din til slutt bør føre til forbedringer.

8 nye funksjoner vi vil se Netflix legge til

Les Neste

Om forfatteren