I ricercatori di Harvard scoprono che gli agenti AI spostano il collo di bottiglia sulla revisione
Fonte: complexdiscovery.com · · AI *
Un working paper dei dottorandi di Harvard Fiona Chen e James Stratton, non ancora sottoposto a revisione tra pari, su 718 aziende e 725.938 lavoratori mostra che l'adozione di agenti di codifica basati sull'intelligenza artificiale sposta il collo di bottiglia sulla revisione del codice. La ricerca, basata sui dati della piattaforma di analisi Jellyfish e sui record occupazionali di Revelio Labs in un periodo compreso tra gennaio 2021 e marzo 2026, evidenzia che le aziende che hanno adottato questi strumenti hanno aggiunto circa il 30% di codice in più (1.494 linee aggiuntive per lavoratore al mese), con un incremento del 20% dei commit (le modifiche salvate nel codice) e del 23% delle pull request (le richieste di unire il codice nuovo al progetto, da far controllare).
Nonostante l'aumento della scrittura di codice, il lavoro completato (misurato tramite i ticket Jira risolti e distribuiti in produzione) non ha registrato un incremento misurabile, muovendosi di soli 0,12 problemi per lavoratore al mese su una baseline di 3,67. Il vero collo di bottiglia è emerso nella fase di code review: il tempo necessario per far passare una pull request è aumentato del 49% (3,45 giorni in più su una baseline di 7,03 giorni), mentre le richieste di modifica formale sono quasi raddoppiate e i commenti per pull request sono cresciuti del 35%. Inoltre, gli strumenti di revisione basati sull'intelligenza artificiale non hanno risolto il problema, generando solo il 23,3% dei commenti di revisione, e solo il 10,8% delle pull request ha ricevuto almeno un commento dell'IA.
I dati indicano che la maggiore velocità di scrittura genera una mole di codice che satura il pool di revisori umani. Un intervistato riferisce che, dopo alcuni guasti causati da commit generati dall'IA, sono state introdotte regole che impongono l'approvazione di ingegneri senior per il codice generato dall'intelligenza artificiale. Lo studio offre spunti di misurazione anche per l'adozione di strumenti legali basati sull'intelligenza artificiale, come i flussi di lavoro annunciati da Harvey e Cooley (quest'ultimo in sviluppo con Google Cloud), e suggerisce che l'automazione della stesura iniziale può spostare parte del carico di lavoro sul controllo umano.
* Titolo e riassunto generati con l'intelligenza artificiale a partire dalla fonte originale. Non sono rivisti uno per uno da una persona: per i dettagli fa fede l'articolo originale, qui sotto.
Fonte originale: Leggi l'articolo completo su complexdiscovery.com
Titolo originale: Harvard researchers find AI coding agents shifted the bottleneck to code review