Ricerca e sistemi prodotto
Specialista valutazione
Deciderai che cosa significa qualità nella misurazione AI e renderai quel criterio ripetibile con rubriche, workflow di review e audit.
Sintesi del ruolo
Definisci standard di qualità per risposte AI, citazioni e segnali di visibilità, con review umana strutturata.
Perché questo ruolo esiste
Con più prompt, cresce anche il rischio di trasformare output plausibili in insight deboli. Serve disciplina di valutazione.
Primi 90 giorni
Auditare le rubriche esistenti.
Perché questo ruolo esiste
Con più prompt, cresce anche il rischio di trasformare output plausibili in insight deboli. Serve disciplina di valutazione.
Su cosa lavorerai
- Creare rubriche per qualità, accuratezza delle citazioni e posizionamento.
- Gestire review umane strutturate su output generati da AI.
- Individuare pattern di errore e convertirli in miglioramenti prodotto.
- Rendere operativi gli standard di valutazione con ricerca e prodotto.
Com'è un forte fit
- Esperienza con annotation guideline, rubriche o QA analitico.
- Capacità di riconoscere bias, incoerenze e rumore nei dati.
- Scrittura chiara e attenzione ai criteri di giudizio.
- Comfort con output LLM e con i loro errori più comuni.
Cosa ti entusiasmerà qui
- Definire qualità in una categoria ancora giovane.
- Migliorare la fiducia nell’intero prodotto.
- Lavorare tra giudizio umano e analisi automatizzata.
Primi 90 giorni
- 01Auditare le rubriche esistenti.
- 02Disegnare un workflow di review per un’analisi centrale.
- 03Migliorare la coerenza tra reviewer.
Processo di hiring
Il processo è volutamente corto, diretto e ancorato al lavoro reale.
- 1
Candidatura
Mandaci il tuo percorso, il lavoro rilevante e perché questo ruolo ha senso per te.
- 2
Conversazione iniziale
Una conversazione focalizzata sul tuo lavoro, sul tuo giudizio e sul ruolo.
- 3
Approfondimento specifico del ruolo
Una discussione o un esercizio che assomiglia più al lavoro reale che a un loop generico di colloqui.
- 4
Conversazione con il founder
Un confronto finale su standard, ambizione e su come apparirebbe il successo qui.
- 5
Decisione
Chiudiamo il loop con chiarezza e ci muoviamo velocemente quando c'è convinzione.
Hai bisogno di contesto prima di candidarti? [email protected]
Specialista valutazione
Scrivi a [email protected] con il tuo percorso, lavori rilevanti e il ruolo che ti interessa.
Invia i tuoi materiali a [email protected] e indica il ruolo che ti interessa.
[email protected]