Rekrutacja deweloperów agentów AI: na co patrzeć i jak sprawdzać
Nazwa stanowiska jest nowa, kompetencja nie. Ci, którzy budują agentów wytrzymujących produkcję, to zwykli mocni inżynierowie, którzy nauczyli się pracować z komponentem szybkim, zdolnym i czasem pewnym siebie w błędzie.
To przeformułowanie bardzo ułatwia rekrutację. Nie szukacie specjalistki od promptów. Szukacie kogoś, kto instynktownie pyta, co się dzieje, gdy narzędzie nic nie zwróci.
Co się liczy, po kolei#
- Inżynieria API i integracji: większość pracy to porządne rozmawianie z waszymi systemami.
- Instynkt testowy: pytają o ewaluację, zanim zapytają o model.
- Myślenie trybami awarii: puste wyniki, uprawnienia, przekroczenia czasu, częściowy sukces.
- Świadomość bezpieczeństwa: minimalne uprawnienia, injection, audyt, bramki.
- Świadomość kosztów: potrafią bez sprawdzania powiedzieć, dokąd idą tokeny.
- Znajomość modeli: przydatna, do nauczenia w tygodnie.
- Znajomość frameworków: najmniej istotna i najbardziej reklamowana.
Dziewięćdziesięciominutowe ćwiczenie, które działa#
Dajcie krótki brief: agent odpowiadający na pytania o zamówienia i mogący wystawić zwrot poniżej dwustu złotych. Poproście o listę narzędzi ze schematami, warunki zatrzymania, dziesięć przypadków ewaluacyjnych i to, co stoi za ludzką bramką. Nie szukacie kodu.
Mocni kandydaci pytają o uprawnienia i przypadki brzegowe w pierwszych pięciu minutach.
Pytania oddzielające doświadczenie od entuzjazmu#
| Pytanie | Słaba odpowiedź | Mocna odpowiedź |
|---|---|---|
| Skąd wiecie, że zmiana pomogła? | Testujemy ręcznie | Stały zestaw ewaluacyjny, przed i po |
| Co robicie, gdy narzędzie nic nie zwróci? | Ponawiamy | Jawna pustka, na której agent może działać |
| Jak powstrzymujecie injection? | Mówimy modelowi, żeby zignorował | Minimalne uprawnienia, izolacja, bramki |
| Dlaczego poprzedni agent był wolny? | Model był wolny | Sześć sekwencyjnych wywołań; dwa zrównolegliliśmy |
| Jak wybieracie model? | Najlepszy | Na krok, mierząc na naszych przypadkach |
Agencja, freelancer czy wewnętrznie#
Agencja pasuje do pierwszej budowy z terminem: kupujecie zespół, który popełnił już standardowe błędy, i musicie wymagać przekazania zestawu ewaluacyjnego oraz schematów narzędzi. Wewnętrznie jest właściwe, gdy agent staje się częścią produktu.
Najczęstsze pytania
Czy potrzebny jest inżynier uczenia maszynowego?
Zwykle nie. To inżynieria systemów wobec API modelu.
Jak duży ma być zespół?
Dwoje inżynierów i ekspertka dziedzinowa na część etatu pokrywają większość pierwszych projektów.
Co ma przekazać agencja?
Repozytorium, prompty, schematy narzędzi, zestaw ewaluacyjny z wynikami, ślady z ostatniego miesiąca i notatkę o znanych trybach awarii.
rekrutacja deweloperów agentówwybór agencji airozmowa z inżynierem llmzespół agentowyprzekazanie projektu ai
