Vai al contenuto principale

Menu

Reperimento di dati per addestrare e valutare sistemi di IA

Lingua della pagina: Italiano

Descrivi il compito del modello, il materiale di cui hai bisogno e l’uso consentito. sapien1 può aiutarti a individuare possibili fonti e a definire un campione con criteri per decidere se procedere. Descrivi il tuo progetto a sapien1

Cerca dati adatti al compito che il tuo sistema di IA deve svolgere. sapien1 ti aiuta a definire i requisiti, individuare possibili fonti e valutare se un set di dati è utile per l’addestramento, la valutazione o il recupero di informazioni.

Parti dal comportamento che vuoi migliorare. Può trattarsi di capire un documento, portare a termine un flusso di lavoro, usare uno strumento o interpretare una scena. Da questa scelta dipendono gli esempi, il contesto e le verifiche di qualità dei dati.

Definisci a cosa servono i dati

La stessa raccolta può avere più usi. Gli esempi di addestramento insegnano un comportamento. Quelli di valutazione lo mettono alla prova. Un corpus per il recupero di informazioni fornisce al sistema contenuti da consultare quando risponde a una domanda.

Descrivi l’uso previsto prima di confrontare le fonti. Per un agente di assistenza, un esempio di addestramento potrebbe abbinare una richiesta alla regola pertinente e all’azione eseguita. Un compito di valutazione richiede anche un modo chiaro per verificare che la decisione fosse corretta. Un corpus per il recupero di informazioni deve contenere le regole stesse e un contesto sufficiente per capire quale versione si applichi.

Cosa inserire nelle specifiche per il reperimento dei dati

RequisitoCosa descrivere
CompitoCosa dovrebbe fare il modello o l’agente e dove incontra difficoltà
CoperturaAmbiti, lingue, regioni, periodi e casi difficili pertinenti
Formato dei datiDocumenti, codice, record, audio, immagini, video, tracce dell’uso di strumenti o una combinazione di questi elementi
ContestoEtichette, riferimenti temporali, relazioni, istruzioni o esiti necessari per interpretare un esempio
Uso previstoAddestramento, valutazione o recupero di informazioni, comprese le modalità di accesso ai dati
AccettazioneCosa deve dimostrare un campione utile prima di ampliare il progetto

Le specifiche iniziali possono lasciare alcune domande aperte. Un compito concreto e qualche esempio rappresentativo offrono in genere un punto di partenza migliore del solo numero di file desiderato.

Valuta un campione prima di ampliare il progetto

Esaminare un campione può far emergere contesto mancante, etichette incoerenti, duplicati e situazioni poco coperte. Il tuo team può anche provare il formato proposto nel proprio flusso di lavoro. Per un esempio pratico di verifica, consulta la nostra guida all’acquisto di dati di addestramento per l’IA.

Registra la fonte e gli usi consentiti insieme alla valutazione tecnica. La descrizione di un set di dati deve rendere chiari i contenuti e le limitazioni pertinenti. Le indicazioni di Hugging Face sulle schede dei set di dati sono un riferimento utile per documentarli.

Per sapere come il titolare può descrivere una raccolta e quali permessi deve verificare, consulta cosa preparare prima di concedere in licenza i dati aziendali.

Se possiedi una raccolta di cui vorresti discutere, descrivi i tuoi dati.

Per un progetto con sapien1, concorda l’ambito del reperimento, la verifica del campione, i risultati da consegnare e i criteri di accettazione. Il passo successivo può essere una raccolta mirata, una valutazione dei dati che possiedi già o un insieme di compiti per la valutazione di agenti.