Assumere sviluppatori di agenti AI: cosa cercare e come valutare
Il titolo è nuovo, la competenza no. Chi costruisce agenti che reggono in produzione sono normali bravi ingegneri che hanno imparato a lavorare con un componente veloce, capace e ogni tanto sicuro di sé e sbagliato.
Questa riformulazione rende l'assunzione molto più semplice. Non cercate una specialista di prompt. Cercate qualcuno che chieda d'istinto cosa succede quando lo strumento non restituisce nulla.
Cosa conta, in ordine#
- Ingegneria di API e integrazioni: gran parte del lavoro è parlare bene con i vostri sistemi.
- Istinto per i test: chiedono della valutazione prima che del modello.
- Pensare per modi di guasto: risultati vuoti, permessi, timeout, successo parziale.
- Consapevolezza di sicurezza: privilegio minimo, injection, audit, cancelli.
- Consapevolezza dei costi: sanno dire dove vanno i token senza cercarlo.
- Familiarità con i modelli: utile, si impara in settimane.
- Conoscenza dei framework: la voce meno importante e la più pubblicizzata.
Un esercizio di novanta minuti che funziona#
Date un brief breve: un agente che risponde alle domande sugli ordini e può emettere rimborsi sotto i cinquanta euro. Chiedete l'elenco degli strumenti con gli schemi, le condizioni di arresto, dieci casi di valutazione e cosa sta dietro un cancello umano. Non cercate codice.
I candidati forti fanno domande su permessi e casi limite nei primi cinque minuti. È il segnale più affidabile del processo.
Domande che separano l'esperienza dall'entusiasmo#
| Domanda | Risposta debole | Risposta forte |
|---|---|---|
| Come sapete se una modifica ha aiutato? | Proviamo a mano | Un set fisso, prima e dopo |
| Cosa fate se uno strumento non restituisce nulla? | Riproviamo | Un vuoto esplicito su cui l'agente può agire |
| Come fermate l'injection? | Diciamo al modello di ignorarla | Privilegio minimo, isolamento, cancelli |
| Perché il vostro ultimo agente era lento? | Il modello era lento | Sei chiamate seriali; ne ho parallelizzate due |
| Come scegliete il modello? | Il migliore | Per passo, misurato sui nostri casi |
Agenzia, freelance o interno#
Un'agenzia va bene per il primo progetto con una scadenza: comprate un team che ha già fatto gli errori standard, e dovete pretendere la consegna del set di valutazione e degli schemi. L'interno è giusto quando l'agente diventa parte del prodotto.
Domande frequenti
Serve un ingegnere di machine learning?
Di solito no. È ingegneria dei sistemi contro un'API di modello.
Quanto grande dev'essere il team?
Due ingegneri e un'esperta di dominio part-time coprono la maggior parte dei primi progetti.
Cosa deve consegnare un'agenzia?
Repository, prompt, schemi, set di valutazione con risultati, tracce dell'ultimo mese, un cruscotto e una nota sui guasti noti.
assumere sviluppatori agentiscegliere agenzia aicolloquio ingegnere llmteam agenticonsegna progetto ai
