My Instruments Lied to Me Six Times
Building and Testing LLM Systems in Production, and How to Find Out What Is Actually True
Impossibile aggiungere al carrello
Puoi avere soltanto 50 titoli nel carrello per il checkout.
Riprova più tardi
Riprova più tardi
Rimozione dalla Lista desideri non riuscita.
Riprova più tardi
Non è stato possibile aggiungere il titolo alla Libreria
Per favore riprova
Non è stato possibile seguire il Podcast
Per favore riprova
Esecuzione del comando Non seguire più non riuscita
0,00 € per i primi 30 giorni
Offerte di stagione
0,99 €/mese per i primi 3 mesi
L'offerta termina il 28 dicembre 2026.
Dopo 30 giorni (60 per i membri Prime), 9,99 €/mese. Puoi cancellare ogni mese
Risparmia più del 90% nei primi 3 mesi.
Ascolta quanto vuoi, scegliendo tra migliaia di audiolibri e serie originali inclusi.
Scarica il tuo audiolibro e ascolta offline, senza interruzioni
Rinnovo automatico a 9,99 €/mese dopo 3 mesi. Disdici mensilmente. L'offerta termina il 28 dicembre 2026.
Ascolta senza limiti migliaia di audiolibri, podcast e serie originali
Disponibile su ogni dispositivo, anche senza connessione
9,99 € al mese. Puoi cancellare ogni mese.
Acquista ora a 8,22 €
-
Letto da:
-
AI Voice A synthetic voice
-
Di:
-
Nikolaos Broikos
Questo titolo è stato narrato da una voce virtuale
La voce virtuale è generata da un computer, e viene utilizzata per la narrazione degli audiolibri.
One of them was the strongest finding in the entire project: a perfect result, every trial, in the direction the whole field expects. It was completely false, and the only thing that caught it was opening a file and reading what the model had actually said.
This is the instrument book. How to build a comparison that means something. How to find out what a wrong answer scores on your own tests, before you report a score at all. How to prove a grader can fail before you let it grade anything. Why an evaluator's error rate tells you almost nothing and its error direction tells you everything.
Every method in it is a few hundred lines of ordinary code with no dependencies, and every one of them exists because something went wrong first.
It is also, unusually, a book that documents its own failures at full length: the detector that looked for one set form of words and reported ninety-six fabrications where there were none, the check that compared a string against a pair of values and therefore could never fail, the average built from six outliers of ninety-six. Not as a confession, but because the pattern in how they were found is the most transferable thing here.
For anybody who has to decide something about an AI system and would rather decide it on evidence than on somebody's confidence.
adbl_web_anon_alc_button_suppression_t1
Ancora nessuna recensione