# วิธีตรวจคลาสให้ครบก่อนยอมรับการแบ่งชุดประเมินตามกลุ่ม

เก็บตัวอย่างที่เกี่ยวข้องไว้ในกลุ่มเดียวกันหากต้องอยู่ด้วยกันเมื่อแบ่งข้อมูลฝึกกับทดสอบ กลุ่มอาจเป็นบทสนทนา ลูกค้า หรือหน่วยอื่นที่การประเมินกำหนด ก่อนเลือกวิธีแบ่ง ให้จดคลาสที่ต้องมีในแต่ละส่วนทดสอบและจำนวนขั้นต่ำ การมีครบทุกคลาสกับจำนวนที่สมดุลพอดีเป็นคนละเงื่อนไข

## ตรวจผลการแบ่งที่ได้

บันทึกว่าแต่ละกลุ่มอยู่ส่วนใดและนับจำนวนแต่ละคลาสในทุกส่วนทดสอบ ตรวจแยกกันว่ากลุ่มไม่ถูกแบ่งและมีคลาสที่กำหนดครบ หากขาดคลาสที่จำเป็น ให้ชะลอการใช้ผลแบ่งและดูว่าการจัดกลุ่มทั้งกลุ่มแบบอื่นได้ตามเงื่อนไขหรือไม่

ในตัวอย่างสมมติ 24 แถว `StratifiedGroupKFold` ของ scikit-learn 1.7.2 แบ่งเป็นสามส่วนโดยไม่สับข้อมูล รหัสกลุ่มแบบตัวเลขชุดหนึ่งให้คู่จำนวน (4, 2), (4, 6) และ (4, 4) เมื่อกลับลำดับรหัส ได้ (4, 6), (4, 0) และ (4, 6) โดยแถว ป้ายกำกับ และสมาชิกของกลุ่มเหมือนเดิม ผลแรกมีครบทุกคลาสแต่ไม่สมดุลพอดี ผลที่สองไม่ผ่านทั้งสองข้อ ตัวอย่างนี้แบ่งให้ได้ (4, 4) พอดีได้

## ตรวจว่าทำตามเงื่อนไขได้หรือไม่

ถ้าทั้งสองส่วนต้องมีทุกคลาส แต่ละคลาสต้องอยู่ในอย่างน้อยสองกลุ่มที่เป็นอิสระกัน ดูว่าแต่ละคลาสอยู่กลุ่มใดเพื่อเช็กว่าทุกคลาสสามารถอยู่ในทั้งสองส่วนได้พร้อมกันหรือไม่

ในตัวอย่างแยกกันสองชุด ชุดละ 12 แถว แต่ละคลาสอยู่ในสองกลุ่มและแต่ละกลุ่มมีสองแถว กลุ่มทั้งสองของแต่ละคลาสจึงต้องอยู่คนละส่วน ถ้าคู่ทั้งหกต่อกันเป็นวง การสลับกลุ่มระหว่างสองส่วนใช้ได้ ถ้าเป็นสามเหลี่ยมสองรูป กลุ่มสามกลุ่มในแต่ละรูปจะต้องอยู่คนละส่วนทุกคู่ ซึ่งทำให้แต่ละสามเหลี่ยมขาดคลาสหนึ่ง เมื่อตรวจครบทั้ง 62 วิธีที่จัดลงสองส่วนที่มีชื่อและไม่ว่าง วงมีสองวิธีที่ครอบคลุมครบ ส่วนสามเหลี่ยมทั้งสองรูปไม่มีเลย

## เลือกวิธีแก้ที่เคารพข้อจำกัด

ในตัวอย่างสองสามเหลี่ยม ส่วนแรกที่ได้ขาดคลาส 5 และส่วนที่สองขาดคลาส 1 หากกลุ่มเดิมต้องอยู่ที่เดิม กลุ่มใหม่ที่เป็นอิสระกันสองกลุ่มจะเติมช่องว่างได้แยกกัน แต่ละกลุ่มที่ไม่ถูกแบ่งเข้าได้เพียงส่วนทดสอบเดียว

ถ้าย้ายกลุ่มเดิมได้ กลุ่มใหม่เพียงกลุ่มเดียวอาจพอ ตัวอย่างนี้ใช้ได้เก้าแบบจาก 15 แบบที่เป็นไปได้ของกลุ่มที่มีสองคลาส แต่ละแบบมีคลาสจากสามเหลี่ยมแต่ละรูปอย่างละหนึ่งคลาส สี่แบบต้องย้ายกลุ่มเดิมอย่างน้อยหนึ่งกลุ่ม ส่วนอีกห้าแบบต้องย้ายอย่างน้อยสามกลุ่ม ก่อนเก็บกลุ่มใหม่ ให้ตรวจว่ามีคลาสใดจริงและอนุญาตให้ย้ายกลุ่มใดได้บ้าง

บันทึกการจัดกลุ่มที่ยอมรับ จำนวนในแต่ละส่วน และวิธีตรวจว่ากลุ่มไม่ถูกแบ่ง หากรายชื่อกรณีเปลี่ยน ให้สร้างเวอร์ชันการประเมินใหม่ การตรวจความครอบคลุมยืนยันจำนวนและสมาชิกตามที่กำหนด ควรตรวจเงื่อนไขรับรองอื่นด้วย เช่น กรณีต่าง ๆ เป็นตัวแทนของการใช้งานที่ตั้งใจไว้หรือไม่

[การตรวจสอบไขว้ตามกลุ่มใน scikit-learn](https://scikit-learn.org/1.7/modules/cross_validation.html#cross-validation-iterators-for-grouped-data)

[ดาวน์โหลดสคริปต์และผลที่บันทึกไว้ (ZIP)](https://sapien1.com/research/check-grouped-evaluation-splits-evidence/grouped-evaluation-replay.zip)
