การตรวจจับและสกัดคุณลักษณะสำคัญของมือจากวีดิทัศน์สำหรับการสะกดนิ้วมือภาษามือไทย

Abstract

วิทยานิพนธ์ฉบับนี้ได้นำเสนอกรอบงานตลอดจนขั้นตอนวิธีการตรวจจับและสกัด คุณลักษณะสำคัญของมือ สำหรับระบบรู้จำภาษามือไทย โดยมีข้อมูลนำเข้าเป็นวีดิทัศน์ล่าม ภาษามือไทย ระบบต้นแบบที่ได้พัฒนาสามารถทำงานได้อย่างอัตโนมัติและมีประสิทธิภาพ เพียงพอต่อการนำไปประยุกต์ใช้แบบทันกาล กรอบงานที่นำเสนอประกอบไปด้วย 6 ขั้นตอน คือ การสกัดบริเวณส่วนที่เป็นสีของผิวหนัง การติดตามการเคลื่อนไหวของมือ การแยกสถานะของการแสดงท่ามือ การหาคีย์เฟรมของท่ามือ การสกัดคุณลักษณะสำคัญของรูปร่าง และการนำคุณลักษณะสำคัญของรูปร่างมือที่สกัดได้มาทำ การรู้จำท่ามือ ซึ่งขั้นตอนของการสกัดบริเวณส่วนที่เป็นสีของผิวหนังจะเป็นขั้นตอนในการค้นหา บริเวณส่วนที่เป็นมือและใบหน้าของล่ามผู้แสดงภาษามือเพื่อกำหนดเป็นค่าเริ่มต้นในการติดตาม ตำแหน่งของมือในขั้นตอนของการติดตามการเคลื่อนไหวของมือ หลังจากทำการติดตามตำแหน่ง ของมือแล้วจึงทำการแยกแยะสถานะของการแสดงท่ามือโดยพิจารณาความเร็วในการเคลื่อนที่ ของมือ และพิจารณาอัตราการเปลี่ยนแปลงของรูปร่างมือเพื่อใช้ในการสกัดคีย์เฟรมของท่ามือ และจากคีย์เฟรมที่สกัดได้จึงพิจารณารูปร่างของมือและสกัดคุณลักษณะสำคัญของมือ ได้แก่ จุดสำคัญของรูปร่าง ค่าฮูโมเมนต์ (Hu Moment) ของรูปร่างมือ ค่าความหนาแน่นของขอบภาพ (Edge density) และตำแหน่งของส่วนภาพมือ เพื่อใช้ในขั้น ตอนของการรู้จำท่ามือ ผลการทดลองพบว่ากรอบงานที่นำเสนอสำหรับตรวจจับและสกัดคุณลักษณะสำคัญของ มือสำหรับระบบรู้จำภาษามือไทยนั้น สามารถทำงานแบบทันกาล ภายใต้สภาวะแวดล้อมที่กำหนด โดยมีความแม่นยำอยู่ที่ 77.78 %