Research indexThesis
การเพมประสทธภาพของการประมวลผลภาษาธรรมชาตโดยการใชแบบจำลองขอมลในการเลอกตวแปรทงลำดบของขนตอนและกระบวนการ
อานทอง
NIDA Wisdom Repository1 Jan 2021Open access
การเพมประสทธภาพของการประมวลผลภาษาธรรมชาตโดยการใชแบบจำลองขอมลในการเลอกตวแปรทงลำดบของขนตอนและกระบวนการ
อานทอง · NIDA Wisdom Repository · 2021
Free to read at the publisher
You can read the abstract here, or the full text at the publisher.
Abstract
การประมวลผลภาษาธรรมชาติหรือ Natural language processing (NLP) มีวัตถุประสงค์ เพื่อวิเคราะห์ข้อมูลภาษามนุษย์ให้คอมพิวเตอร์สามารถเข้าใจความหมาย หรือบริบทของข้อความ ซึ่ง มีขนาดใหญ่และมีความซับซ้อนสูง ทั้งด้านรูปแบบหรือความหมายของคำไม่เหมือนกันในแต่ละภาษา รวมถึงไวยากรณ์ที่แตกต่างกันในแต่ละภาษาอีกด้วย ดังนั้นขั้นตอนในการประมวลผลภาษาธรรมชาติ จึงมีขั้นตอนและกระบวนการที่หลากหลาย และแตกต่างกันในแต่ละชุดข้อมูล โดยลำดับของขั้นตอน และกระบวนการ (Data pipeline) ของการประมวลผลภาษาธรรมชาตินอกจากจะส่งผลกับความ แม่นยำของแบบจำลองข้อมูลแล้ว การปรับแต่งตัวแปรในแต่ละขั้นตอนหรือกระบวนการ และ แบบจำลองข้อมูล ก็เป็นสิ่งจำเป็นที่จะทำให้ความแม่นยำของแบบจำลองข้อมูลเพิ่มสูงขึ้น แต่เนื่อง ด้วยขั้นตอนและกระบวนการมีจำนวนมาก ทำให้ตัวแปรที่จำเป็นจะต้องปรับแต่งมีมากเช่นเดียวกัน ดังนั้นการที่จะทดสอบการปรับตัวแปรโดยทดสอบทุกความเป็นไปได้ของตัวแปร (Grid Search) จึง เป็นไปได้ยาก เหตุผลเพราะว่าจำนวนความเป็นไปได้ของตัวแปรของทุกขั้นตอนและกระบวนการมี จำนวนมาก และการทดสอบแบบจำลองข้อมูลยังต้องใช้หน่วยประมวลผลของเครื่องคอมพิวเตอร์ และ เวลาจำนวนมากอีกด้วย ดังนั้น การศึกษาเรื่องการปรับแต่งตัวแปรจำนวนมาก พร้อมกันทั้ง ลำดับของขั้นตอนและกระบวนการจึงเป็นเรื่องที่น่าสนใจ โดยการศึกษานี้เสนอการเลือกตัวแปร สำหรับ ทั้งลำดับของขั้นตอนและกระบวนการ ของข้อมูลประเภทข้อความ เพื่อนำไปใช้ในแบบจำลอง ข้อมูลเพื่อประมวลผลภาษาธรรมชาติโดยใช้วิธีการเพิ่มประสิทธิภาพของตัวแปรทั้งลำดับของขั้นตอน และกระบวนการโดยใช้แบบจำลองข้อมูล หรือ Sequential Model-based Optimization (SMBO) โดยใช้ชุดคำสั่ง Hyperparameter Optimization (Hyperopt) โดยใช้กระบวนการ Tree of Parzen Estimators (TPE) และ Adaptive Tree of Parzen Estimators (A-TPE)