Vai al contenuto
Metodologia

GDPval

GDPval — Metodologia. definizione: Benchmark expert tasks — i modelli raggiungono il 40-49% del livello esperto umano, ma richiedono *extensive human framing* — la metrica stessa è sottospecificata · metodo: Esperti con 14 anni di esperienza, valutazione in cieco · portata: Finanza, diritto, retail, sviluppo software

Tipo
Metodologia
definizione
Benchmark expert tasks — i modelli raggiungono il 40-49% del livello esperto umano, ma richiedono *extensive human framing* — la metrica stessa è sottospecificata
metodo
Esperti con 14 anni di esperienza, valutazione in cieco
portata
Finanza, diritto, retail, sviluppo software
relazioni
5
Citata in
2 fiches

Metriche di adozione

Vicinato

44 occupations humai… Jagged Frontier des …

→ misura

44 occupations humaines CONCEPT affidabilità alta stabile Fonte ↗
Jagged Frontier des capacités IA CONCEPT affidabilità alta stabile Fonte ↗

Citata in (2)