Infrastruktura badawcza
Inżynier ds. badań
To stanowisko znajduje się na styku badań i infrastruktury. Będziesz tworzyć i utrzymywać systemy umożliwiające prowadzenie badań widoczności w AI na dużą skalę: mechanizmy uruchamiania promptów, procesy zapisywania odpowiedzi, warstwy normalizacji oraz narzędzia wewnętrzne utrzymujące wysoką jakość mimo zmian w systemach AI i asystentach.
Podsumowanie stanowiska
Twórz systemy, które na dużą skalę uruchamiają strategiczne prompty, niezawodnie zapisują surowe odpowiedzi AI i przekazują czyste dane do procesów oceny.
Dlaczego tworzymy to stanowisko
Proces badawczy jest podstawą całego produktu. Bez niezawodnego uruchamiania promptów i zapisywania wyników nie ma danych do oceny. Potrzebujemy osoby, która traktuje ten proces jak produkt, a nie wyłącznie instalację techniczną.
Zakres pracy
- Projektowanie i utrzymywanie systemów uruchamiania promptów na dużą skalę w wielu asystentach AI.
- Tworzenie warstw zapisywania, normalizacji i przechowywania wyników, które obsługują zmienność zachowania systemów AI.
- Odpowiedzialność za niezawodność i obserwowalność całego procesu danych badawczych.
- Ścisła współpraca z zespołem badawczym przy przekładaniu wymagań oceny na wydajne zachowanie systemu.
Oczekiwane dopasowanie
- Dobre wyczucie inżynierii systemów i backendu stosowane do procesów danych oraz obciążeń asynchronicznych.
- Doświadczenie w tworzeniu niezawodnych, obserwowalnych systemów, które sprawnie obsługują wysoką kardynalność i częściowe awarie.
- Swoboda analizowania formatów wyników LLM, limitów zapytań, wydajności i logistyki uruchamiania promptów.
- Podejście produktowe: traktowanie procesu jako systemu, od którego zależą użytkownicy, a nie tylko jako infrastruktury.
Co może być szczególnie interesujące
- Tworzenie infrastruktury umożliwiającej operacyjne prowadzenie rzetelnych badań nad AI.
- Odpowiedzialność za niezawodność warstwy danych, która bezpośrednio określa jakość produktu.
- Praca nad systemem obejmującym wszystkie obszary produktu.
Pierwsze 90 dni
- Opisanie i udokumentowanie całego bieżącego procesu uruchamiania promptów i zapisywania wyników.
- Wskazanie i usunięcie dwóch najważniejszych luk w niezawodności lub obserwowalności ścieżki danych badawczych.
- Dostarczenie co najmniej jednego ulepszenia, które istotnie obniża koszt lub zwiększa wydajność podstawowego procesu badawczego.
Proces rekrutacji
Proces jest celowo krótki, bezpośredni i oparty na rzeczywistej pracy.
Zgłoszenie
Prześlij informacje o swoim doświadczeniu, istotne przykłady pracy i uzasadnienie dopasowania do stanowiska.
Rozmowa wstępna
Rzeczowa rozmowa o Twojej pracy, sposobie podejmowania decyzji i samym stanowisku.
Rozmowa dotycząca stanowiska
Dyskusja lub zadanie odzwierciedlające rzeczywistą pracę bardziej niż standardowy cykl rozmów.
Rozmowa z założycielem
Ostatnia rozmowa o standardach, ambicjach i kryteriach powodzenia na tym stanowisku.
Decyzja
Przekazujemy jednoznaczną odpowiedź i sprawnie kończymy proces po podjęciu decyzji.
Inżynier ds. badań
Napisz na careers@chatobserver.com i prześlij informacje o swoim doświadczeniu, istotne przykłady pracy oraz nazwę stanowiska.
careers@chatobserver.com