Czym jest zbiór danych do fine-tuningu?
Co to jest?
Zbiór danych (dataset) to zestaw przykładów w formacie JSONL (jedna linia JSON na przykład), używany do trenowania lub oceny modelu.
Kiedy go używać
- Dostroić model do Twojej dziedziny (z konfiguracją LoRA).
- Ocenić model na prawdziwych przypadkach.
Pola strony
| Format | Czat (messages), instrukcja, completion, preferencje (prompt / chosen / rejected, do DPO lub RLHF) lub surowy tekst (text, do dalszego pretreningu); wykrywany automatycznie. |
|---|---|
| Zawartość | Wklejona lub zaimportowana; duże pliki trafiają do magazynu obiektów. |
| Podgląd | Pierwsze wiersze są pokazane na stronie. |
Jak go używać
Zakładka „Użycie”: pobierz JSONL i wczytaj go biblioteką datasets (przykład w zestawie) albo bezpośrednio w Axolotl.