דילוג לתוכן הראשי

תפריט

איתור נתונים לאימון ולהערכה של מערכות בינה מלאכותית

שפת הדף: עברית

תארו את המשימה של המודל, את החומר הדרוש לכם ואת השימוש המותר בו. sapien1 יכולה לסייע בזיהוי מקורות אפשריים ובהגדרת היקף של מדגם, עם קריטריונים להחלטה אם להמשיך. תארו את הפרויקט שלכם ל-sapien1

חפשו נתונים שמתאימים למשימה שמערכת הבינה המלאכותית שלכם צריכה לבצע. sapien1 עוזרת להגדיר את הדרישות, לאתר מקורות אפשריים ולהעריך אם מערך נתונים מתאים לאימון, להערכה או לאחזור מידע.

התחילו בהתנהגות שתרצו לשפר. למשל, הבנה של מסמך, השלמת תהליך עבודה, שימוש בכלי או פירוש סצנה. הבחירה הזאת קובעת אילו דוגמאות, הקשר ובדיקות איכות דרושים.

הגדירו מה הנתונים צריכים לאפשר

אותו אוסף יכול לשמש מטרות שונות. דוגמאות אימון מלמדות את המערכת התנהגות מסוימת. דוגמאות הערכה בודקות אותה. תוכן לאחזור מספק מידע שהמערכת יכולה לעיין בו כשהיא עונה על שאלה.

תארו את השימוש המיועד לפני השוואת המקורות. דוגמת אימון לסוכן תמיכה יכולה לכלול פנייה, את המדיניות שחלה עליה ואת הפעולה שבוצעה. במשימת הערכה דרושה גם דרך ברורה לבדוק אם התקבלה ההחלטה הנכונה. אוסף לאחזור צריך לכלול את המדיניות עצמה והקשר מספיק לבחירת הגרסה שחלה במקרה נתון.

מה לכלול במסמך הדרישות לאיתור נתונים

דרישהמה לתאר
משימהמה המודל או הסוכן צריך לבצע והיכן הוא מתקשה כיום
כיסויתחומים, שפות, אזורים, תקופות ומקרים קשים שרלוונטיים למשימה
צורת הנתוניםמסמכים, קוד, רשומות, שמע, תמונות, וידאו, תיעוד שימוש בכלים או שילוב שלהם
הקשרתוויות, חותמות זמן, קשרים, הוראות או תוצאות הדרושים להבנת דוגמה
שימוש מיועדאימון, הערכה או אחזור מידע, כולל דרך הגישה לנתונים
קריטריונים לקבלהמה מדגם שימושי צריך להראות לפני הרחבת הפרויקט

אפשר להשאיר שאלות פתוחות במסמך הראשון. משימה מוגדרת וכמה דוגמאות מייצגות מספקות בדרך כלל נקודת פתיחה טובה יותר מקביעת מספר קבצים בלבד.

בדקו מדגם לפני הרחבת הפרויקט

בדיקת מדגם יכולה לחשוף הקשר חסר, תוויות לא עקביות, כפילויות ומצבים שחסרים בכיסוי. היא גם נותנת לצוות דרך לבדוק את הפורמט המוצע בתהליך העבודה שלו. לדוגמה מפורטת של בדיקת מדגם, עיינו במדריך לרכישת נתוני אימון לבינה מלאכותית.

תעדו את מקור הנתונים ואת השימושים המותרים לצד ההערכה הטכנית. התיאור של מערך הנתונים צריך להסביר את התוכן ואת המגבלות הרלוונטיות. ההנחיות של Hugging Face לכרטיסי מערכי נתונים יכולות לסייע בתיעוד.

כדי להבין איך בעלי נתונים יכולים לתאר אוסף ולבדוק הרשאות, קראו מה כדאי להכין לפני הענקת רישיון לנתוני החברה.

אם יש בבעלותכם אוסף שתרצו לדבר עליו, תארו את הנתונים שלכם.

בפרויקט עם sapien1, מגדירים יחד את היקף החיפוש, את בדיקת המדגם, את התוצרים ואת קריטריוני הקבלה. השלב הבא יכול להיות איסוף ממוקד, הערכה של נתונים שכבר נמצאים ברשותכם או הכנת מערך משימות להערכת סוכנים.