Trasforma PDF in Dataset per LLM in pochi Minuti! (La guida che nessuno ti ha spiegato)
Simone Rizzo
0:00 / 0:00
Trasforma PDF in Dataset per LLM in pochi Minuti! (La guida che nessuno ti ha spiegato)
22 914 просмотров · 9 месяцев назад
Simone Rizzo
63 тыс. подписчиков
22 914 просмотров · 9 месяцев назад
Entra nella mia Accademia AI: https://www.rizzoaiacademy.com/
Vuoi sviluppare soluzioni AI avanzate: https://inferentia.xyz
IG: / simorizzo_ai
In questo video ti mostro come creare un dataset perfetto per il finetuning degli LLM partendo da PDF e documenti non strutturati, utilizzando Easy Dataset, uno degli strumenti più potenti e veloci per generare dataset di qualità professionale.
🔍 Cosa impari nel video:
Come importare PDF, DOCX, Markdown e testi grezzi
Come funziona lo smart text splitting e quando modificarlo
Come costruire dataset nei formati Alpaca, ShareGPT, JSON, JSONL
Come esportare tutto per il finetuning su OpenAI, LLaMA, LLaMA Factory e altri framework
Se vuoi trasformare documentazione tecnica, PDF aziendali o manuali in dataset pronti per il training… questo video è per te.
Repo: https://github.com/ConardLi/easy-data...
Video Di Finetuning: • Parto da Zero e Addestro un LLM (Nessuno t...
LLamaFactory: • Addestrare un LLM È PIÙ Facile di Quanto P...
00:00 RAG vs Fine-tuning: Perché caricare file non basta
01:00 L'importanza del Dataset Q&A per l'addestramento
02:02 Introduzione a Easy Dataset
03:23 Guida all'installazione del tool
05:18 Setup iniziale e configurazione API Key
06:17 Caricamento e splitting dei documenti
07:32 Generazione automatica di Domande e Risposte
09:45 Esportazione nei vari formati (Alpaca, ShareGPT)
10:31 Come utilizzare il dataset per il Fine-tuning
#intelligenzaartificiale #llm #finetuning