Notizie AI su Benchmark — Chatbot.it

Tutte le notizie e aggiornamenti su Benchmark dall'intelligenza artificiale

• I benchmark dell'IA sono superati. Ecco cosa serve invece.
• ChatGPT raggiunge il livello dei traduttori umani: lo studio IEEE sulle capacità degli LLM
• NousCoder-14B: il nuovo modello open-source di Nous Research che sfida i colossi del coding AI
• Misurare le capacità dell'AI nell'accelerare la ricerca biologica
• Come gli 'evals' guidano il prossimo capitolo dell'IA per le imprese
• Definire e valutare il bias politico nei modelli LLM
• OpenAI lancia GDPval: nuovo benchmark per misurare l'impatto economico dell'AI
• BrowseComp: un nuovo benchmark per la valutazione degli agenti di navigazione web
• Economia e ragionamento logico con OpenAI o1: l'analisi di Tyler Cowen
• Valutazione di modelli linguistici di grandi dimensioni addestrati sul codice
• Safety Gym: Nuovi strumenti per il Reinforcement Learning sicuro
• Quantificare la generalizzazione nel Reinforcement Learning con CoinRun
• Gotta Learn Fast: un nuovo benchmark per la generalizzazione nel Reinforcement Learning
• Analisi quantitativa dei modelli generativi basati su architettura decoder-only
• Lancio della Beta di OpenAI Gym: Toolkit per l'Apprendimento per Rinforzo