In "The AI-native interview", Bret Taylor, co-fondatore e CEO di Sierra, descrive la revisione radicale del processo di selezione ingegneristica dell'azienda per adattarlo alle realtà dello sviluppo AI-native. L'osservazione di partenza è chiara: gli agenti di codifica come Codex e Claude Code stanno rivoluzionando l'ingegneria del software. Il ruolo dell'ingegnere non è più "costruire la macchina" ma "progettarla e perfezionarla". Quando un singolo ingegnere può costruire lungo l'intero stack grazie agli strumenti AI, il vantaggio competitivo deriva dalla combinazione di capacità tecnica, pensiero di prodotto e contesto di business — non dalla capacità di risolvere rompicapo algoritmici.
Il vecchio processo di Sierra era standard: due colloqui di coding, un colloquio di algoritmi, un colloquio di system design, un colloquio di culture-fit, poi verifica delle referenze. Il nuovo processo poggia su tre attributi: essere rappresentativo del lavoro quotidiano reale, produrre un segnale ricco sui punti di forza e di debolezza del candidato e offrire un'esperienza positiva e autentica.
Il cuore della revisione è il nuovo onsite AI-native in tre fasi. Durante la fase "Plan", il candidato guida una sessione di ideazione per definire un prodotto da costruire, mentre i valutatori pongono domande per arricchire la proposta. L'idea è centrata sull'area di competenza del candidato per osservare il suo pensiero di prodotto in azione. Durante la fase "Build", il valutatore lascia la stanza e il candidato ha due ore per dare vita alla propria idea, utilizzando gli strumenti e i framework AI di sua scelta, con la libertà di cambiare direzione o adattare il perimetro. Infine, durante la fase "Review", il candidato presenta ciò che ha costruito: i valutatori discutono le scelte di prodotto, esaminano il codice per valutare il giudizio tecnico, discutono il percorso verso la produzione ed esplorano come è stata utilizzata l'AI.
Oltre all'onsite, Sierra ha sostituito il phone screen di coding con un colloquio di system design, ritenuto più rilevante per valutare la capacità di portare codice in produzione su larga scala. L'azienda sta inoltre sperimentando un colloquio di debugging in cui il candidato riceve una codebase di medie dimensioni con la bozza di PR di un collega, e deve rivederla e migliorarla iterando con agenti di codifica.
I criteri di valutazione sono agnostici rispetto al prodotto costruito, e i colloqui sono condotti in coppie di valutatori per migliorare la calibrazione. Sierra assume esplicitamente in base ai punti di forza piuttosto che all'assenza di debolezze. Il riscontro dei candidati è stato entusiasta: diversi hanno dichiarato che è stato "il colloquio più divertente che abbiano mai fatto".