Fissare ambiente
Documentare host e runtime.
Ogni test include host, processore, memoria, acceleratore, runtime, revisione, quantizzazione, checksum, contesto, prompt, data e ripetizioni.
Il registro separa elaborazione e generazione.
Documentare host e runtime.
Una richiesta non pubblicata.
Stesso prompt versionato.
Conservare gli ID grezzi.
Host · CPU · accelerator
Memory · power mode
Model · revision · checksum
Runtime · quantisation
Context · prompt · output
Rates · latency · repetitions
Registro e runner sono pronti. I risultati appariranno solo dopo esecuzione e revisione.