Forskning og produktsystemer
Evalueringsspesialist
Rollen handler om å gjøre kvalitet målbar. Du lager rubrikker, review-flyter og kontroller som skiller nyttige signaler fra plausibelt støy.
Rolleoppsummering
Definer kvalitetsstandarder for AI-svar, sitater og synlighetssignaler, og bygg menneskelig review som holder resultatene ærlige.
Hvorfor rollen finnes
Når promptvolumet øker, vokser avstanden mellom rå output og pålitelig innsikt. Vi trenger reell evalueringsdisiplin, ikke en QA-avhuking.
Første 90 dager
Revidere eksisterende rubrikker og finne de viktigste hullene.
Hvorfor rollen finnes
Når promptvolumet øker, vokser avstanden mellom rå output og pålitelig innsikt. Vi trenger reell evalueringsdisiplin, ikke en QA-avhuking.
Dette vil du jobbe med
- Lage rubrikker for svarkvalitet, sitatpresisjon og posisjonering.
- Kjøre strukturert menneskelig review av AI-genererte resultater.
- Finne feilmønstre og gjøre dem om til produktforbedringer.
- Gjøre evalueringsstandarder operative sammen med research og produkt.
Hvordan en sterk match ser ut
- Erfaring med annoteringsguides, evalueringsrubrikker eller kvalitetsreview.
- Analytisk blikk for bias, inkonsistens og label-støy.
- Klar skriving om hvorfor en standard er riktig.
- Komfort med LLM-output og de vanligste måtene slike svar feiler på.
Hva som vil motivere deg her
- Definere kvalitet i en kategori uten modne benchmarks.
- Bygge prosesser som øker tilliten til hele produktet.
- Jobbe mellom menneskelig vurdering og automatisert analyse.
Første 90 dager
- 01Revidere eksisterende rubrikker og finne de viktigste hullene.
- 02Designe en review-flyt for én sentral analysetype.
- 03Forbedre konsistensen mellom reviewere på en målbar måte.
Ansettelsesprosess
Prosessen er bevisst kort, direkte og forankret i det faktiske arbeidet.
- 1
Søknad
Send oss bakgrunnen din, relevant arbeid og hvorfor denne rollen gir mening for deg.
- 2
Innledende samtale
En fokusert samtale om arbeidet ditt, vurderingsevnen din og selve rollen.
- 3
Rolle-spesifikk fordypning
En samtale eller oppgave som ligner mer på det faktiske arbeidet enn en generisk intervjurunde.
- 4
Samtale med founder
En siste samtale om standarder, ambisjon og hvordan suksess vil se ut her.
- 5
Beslutning
Vi avslutter tydelig og beveger oss raskt når overbevisningen er der.
Trenger du mer kontekst før du søker? [email protected]
Evalueringsspesialist
Send e-post til [email protected] med bakgrunnen din, relevant arbeid og rollen du er interessert i.
Send materialet ditt til [email protected] og inkluder rollen du er interessert i.
[email protected]