Metode
Alle forsøg følger den samme mindste metode, fra opgaven til beslutningen om at gentage, ændre eller stoppe.
Alle aiMinds-forsøg følger den samme mindste metode.
1. Definér den virkelige opgave
Beskriv arbejdet i driftsnære termer. Angiv den tiltænkte bruger, input, output og hvornår opgaven er løst.
2. Fastlæg et sammenligningsgrundlag
Skriv ned hvordan opgaven udføres uden den AI-tilgang der afprøves. Findes der intet sammenligningsgrundlag, skal det stå tydeligt.
3. Definér arbejdsdelingen
Adskil:
- menneskets beslutninger og skøn;
- det AI genererer eller udfører;
- deterministisk automatisering;
- eksterne kilder og værktøjer.
4. Definér målene
Brug mål der passer til opgaven, for eksempel:
- kalendertid og aktiv menneskelig tid;
- fuldstændighed eller fejlrate;
- antal rettelser;
- omkostning;
- accept hos brugeren;
- gentagelighed.
Antyd ikke en årsagssammenhæng når der kun findes én observation.
5. Kør forsøget og bevar sporene
Gem de prompts, den konfiguration, de kildehenvisninger, den kode, det testoutput og de mellemresultater der kan offentliggøres forsvarligt.
6. Validér
Brug deterministiske kontroller hvor det kan lade sig gøre. Et menneske står stadig på mål for den endelige konklusion. Notér hvem eller hvad der validerede resultatet.
7. Rapportér ærligt
Skeln mellem:
- Målt: produceret af en defineret måling.
- Observeret: set direkte under forsøget.
- Rapporteret: oplyst af en anden kilde eller deltager.
- Hypotese: sandsynligt, men ikke vist.
- Ukendt: ikke fastslået.
Tag fejl, usikkerhed og begrænsninger med.
8. Beslut
Slut af med én af disse handlinger:
- gentag;
- justér;
- skalér;
- brug et standardværktøj;
- hold arbejdet menneskeledet;
- stop.