Vad är ett dataset för fine-tuning?
Vad är det?
Ett dataset är en uppsättning exempel i JSONL-format (en JSON-rad per exempel) som används för att träna eller utvärdera en modell.
När den ska användas
- Finjustera en modell för ditt område (med en LoRA-konfiguration).
- Utvärdera en modell på verkliga fall.
Sidans fält
| Format | Chatt (messages), instruktion, completion, preferenser (prompt / chosen / rejected, för DPO eller RLHF) eller råtext (text, för fortsatt förträning); känns igen automatiskt. |
|---|---|
| Innehåll | Inklistrat eller importerat; stora filer går till objektlagringen. |
| Förhandsvisning | De första raderna visas på sidan. |
Hur den används
Fliken ”Användning”: ladda ner JSONL-filen och läs in den med biblioteket datasets (exempel ingår) eller direkt i Axolotl.