Lewati ke konten utama

Menu

Mencari data untuk pelatihan dan evaluasi AI

Bahasa halaman: Bahasa Indonesia

Jelaskan tugas model, materi yang kamu butuhkan, dan penggunaan yang diizinkan. sapien1 dapat membantu mengidentifikasi sumber potensial dan menentukan cakupan sampel beserta kriteria untuk memutuskan apakah akan melanjutkan. Jelaskan proyekmu kepada sapien1

Cari data yang sesuai dengan tugas sistem AI Anda. sapien1 membantu Anda merumuskan kebutuhan, menemukan sumber yang mungkin tersedia, dan menilai apakah suatu set data cocok untuk pelatihan, evaluasi, atau penelusuran informasi.

Mulailah dari perilaku yang ingin Anda tingkatkan. Misalnya, memahami dokumen, menuntaskan alur kerja, memakai alat, atau menafsirkan suatu adegan. Pilihan ini menentukan contoh, konteks, dan pemeriksaan kualitas yang dibutuhkan.

Tentukan fungsi data

Kumpulan data yang sama dapat digunakan untuk berbagai tujuan. Contoh pelatihan mengajarkan suatu perilaku. Contoh evaluasi mengujinya. Konten penelusuran memberi sistem informasi yang dapat dirujuk saat menjawab pertanyaan.

Jelaskan tujuan penggunaan sebelum membandingkan sumber. Untuk agen dukungan pelanggan, contoh pelatihan yang berguna dapat memuat permintaan, kebijakan yang berlaku, dan tindakan yang diambil. Tugas evaluasi juga memerlukan cara yang jelas untuk memeriksa apakah keputusan itu benar. Kumpulan data untuk penelusuran perlu memuat kebijakan itu sendiri beserta konteks yang cukup untuk mengetahui versi mana yang berlaku.

Isi ringkasan kebutuhan pencarian data

KebutuhanYang perlu dijelaskan
TugasApa yang perlu dilakukan model atau agen dan bagian mana yang masih sulit
CakupanBidang, bahasa, wilayah, periode, dan kasus sulit yang relevan
Bentuk dataDokumen, kode, rekaman, audio, gambar, video, jejak penggunaan alat, atau gabungan beberapa bentuk
KonteksLabel, penanda waktu, hubungan, petunjuk, atau hasil yang diperlukan untuk memahami sebuah contoh
Tujuan penggunaanPelatihan, evaluasi, atau penelusuran informasi, termasuk cara data akan diakses
PenerimaanHal yang perlu ditunjukkan oleh sampel yang berguna sebelum proyek diperluas

Ringkasan awal boleh memuat pertanyaan yang belum terjawab. Tugas yang konkret dan beberapa contoh yang mewakili kebutuhan biasanya merupakan titik awal yang lebih baik daripada sekadar menetapkan jumlah berkas.

Nilai sampel sebelum memperluas proyek

Pemeriksaan sampel dapat mengungkap konteks yang hilang, label yang tidak konsisten, duplikasi, dan kekurangan cakupan di situasi yang perlu ditangani. Tim Anda juga dapat menguji bentuk data yang diusulkan dalam alur kerja sehari-hari. Lihat contoh pemeriksaan sampel di panduan membeli data pelatihan AI kami.

Catat sumber dan penggunaan yang diizinkan bersama hasil penilaian teknis. Deskripsi set data perlu menjelaskan isi dan batasannya yang relevan. Panduan kartu set data dari Hugging Face dapat dijadikan rujukan untuk dokumentasi.

Untuk memahami cara pemilik mendeskripsikan kumpulan data dan meninjau izinnya, baca hal yang perlu disiapkan sebelum melisensikan data perusahaan Anda.

Jika Anda memiliki kumpulan data yang ingin dibicarakan, jelaskan data Anda.

Dalam proyek bersama sapien1, sepakati lingkup pencarian, pemeriksaan sampel, hasil yang akan diserahkan, dan kriteria penerimaan. Langkah berikutnya dapat berupa pengumpulan terarah, penilaian data yang sudah Anda miliki, atau seperangkat tugas untuk evaluasi agen.