MITRA-MT: คะแนนแปลบอกอะไรแก่ผู้อ่านคัมภีร์พุทธ และบอกอะไรไม่ได้

เครื่องมือแปลที่ต้องตรวจทีละตอน

บทความ MITRA-MT ของ Sebastian Nehrdich และ Kurt Keutzer อยู่ในรายงานการประชุม WMT ที่ระบุวันที่ 28–29 ตุลาคม 2026 อธิบายโมเดลขนาด 9 พันล้านพารามิเตอร์ที่ปรับให้เหมาะกับภาษาวรรณกรรมพุทธ และการประเมินการแปล 17 ทิศทางในระดับประโยค โดยทดสอบระดับย่อหน้าด้วยในสิบทิศทาง บทความนี้เป็นการวิเคราะห์งานดังกล่าว ไม่ได้อ้างว่าโมเดลเพิ่งเปิดตัววันนี้ ต่างจาก MITRA-lexicon ซึ่งค้นหาคู่คำแปลที่ปรากฏจริงในเอกสาร MITRA-MT สร้างคำแปลของข้อความเป็นตอน ๆ ^{[1] [2]}

ตรวจสอบก่อนว่ากำลังพูดถึงคลังรุ่นใด

งานวิจัยอธิบาย MITRA-parallel v2 ซึ่งมีระเบียนที่จัดแนวอัตโนมัติ 1,693,730 ระเบียน แทนคู่ส่วนข้อความ 2,338,400 คู่ในภาษาสันสกฤต ทิเบต และจีนพุทธ ระเบียนหนึ่งอาจเชื่อมหลายส่วนเข้าด้วยกัน ตัวเลขเหล่านี้ไม่ใช่จำนวนหนังสือหรือคำแปลที่มนุษย์รับรอง เมื่อตรวจวันที่ 31 ตุลาคม ที่เก็บข้อมูลระบุ v3 เป็นรุ่นปัจจุบันแล้ว โดยมี 1,690,655 ระเบียน และใช้โมเดลที่ผ่านการฝึกตรวจและแก้ไขการจัดแนว การแก้ไขอัตโนมัติไม่เท่ากับการรับรองของผู้เชี่ยวชาญ จึงไม่ควรนำผลของ v2 ไปเปลี่ยนชื่อเป็นหลักฐานคุณภาพของ v3 โดยตรง ^{[3] [4]}

ยังมีข้อจำกัดด้านการทำซ้ำผลอีกประการหนึ่ง การ์ดโมเดลที่เชื่อมโยงอธิบายการฝึกแบบ CPO แต่หัวข้อ 4.3 ของงานวิจัยประเมินเช็กพอยต์แบบ GRPO เรายังยืนยันไม่ได้ว่ารุ่นที่ดาวน์โหลดได้ตรงกับเช็กพอยต์ที่ประเมินทุกประการ ^{[2] [5]}

คะแนนสูงไม่ใช่ร้อยละของความหมายที่ถูกต้อง

สำหรับการแปลสันสกฤตเป็นทิเบต ผู้เขียนรายงานค่า chrF ของ MITRA-MT ที่ 55.0 เทียบกับ 33.4 ของ Qwen3.5-122B ค่า chrF วัดความทับซ้อนของลำดับอักขระกับคำแปลอ้างอิง ค่า 55.0 จึงไม่ได้หมายถึงความถูกต้องทางความหมาย 55% ในการเปรียบเทียบขนาดเล็กกว่าในตาราง 4 โมเดลภาษาสองตัวที่ทำหน้าที่ผู้ประเมินกลับชอบระบบเชิงพาณิชย์มากกว่าโดยรวม งานยังระบุว่าไม่มีการตรวจการจัดแนว v2 ที่เผยแพร่ด้วยตัวอย่างที่เป็นตัวแทนโดยมนุษย์ นี่คือผลที่มีแนวโน้มดีภายใต้การทดสอบเฉพาะ ไม่ใช่ข้อพิสูจน์ว่าจะแปลความข้อความพุทธทุกตอนได้อย่างน่าเชื่อถือ ข้อความฝึกแบบภาษาเดียวไม่ได้ผ่านการกำจัดส่วนที่ซ้ำกับชุดประเมิน จึงยังไม่แน่ชัดว่าจะทำงานได้ดีเพียงใดกับข้อความที่ไม่เคยพบเลย ^[2]

บทความ น้ำหนักโมเดล และข้อความมีเงื่อนไขต่างกัน

ACL ระบุบทความภายใต้ CC BY 4.0 ส่วนการ์ดโมเดลแปลประกาศ Apache-2.0 ข้อความทั้งสองไม่ได้ให้สิทธิ์แก่ข้อความต้นทางทุกชิ้น README ของ v2 ให้ดูใบอนุญาตที่รากของที่เก็บข้อมูล แต่ README ที่รากและของ v3 ซึ่งตรวจเมื่อ 31 ตุลาคมไม่ได้ระบุใบอนุญาตรวมของคลัง README ของชุดประเมินให้ปฏิบัติตามเงื่อนไขแต่ละแหล่งต้นทาง และระบุเนื้อหาของ Lotsawa House เป็น CC BY-NC 4.0 ก่อนแจกจ่ายไฟล์ที่เลือกซ้ำหรือนำไปฝึกโมเดล ต้องยืนยันเงื่อนไขที่ใช้บังคับ การเข้าถึงได้สาธารณะเพียงอย่างเดียวไม่ได้ยืนยันสิทธิ์ในการใช้ซ้ำ ^{[1] [3] [4] [5] [6]}

แบบฝึกเล็ก ๆ ก่อนเชื่อถือคลังขนาดใหญ่

เราเสนอแบบฝึกอ่านดังนี้ เลือกข้อความสั้นหนึ่งตอนที่ได้รับอนุญาตให้ใช้และสามารถตรวจเทียบต้นฉบับได้ จดชื่อผลงาน ฉบับพิมพ์ รหัสตอน รุ่นคลัง และรุ่นแก้ไขของโมเดล วางต้นฉบับ คำแปลอ้างอิง และร่างจากเครื่องไว้ข้างกัน ทำเครื่องหมายคำปฏิเสธที่ตกหล่น ชื่อที่ไม่แน่ใจ อนุประโยคที่หายไป และศัพท์เฉพาะ การใช้ภาษาลื่นไหลไม่ใช่หลักฐานว่าองค์ประกอบเหล่านี้ยังอยู่ครบ

จากนั้นให้ผู้อ่านที่มีความรู้เหมาะสมตรวจจุดที่ทำเครื่องหมายในบริบท พร้อมเก็บทั้งคำแก้ไขและเหตุผล ความแตกต่างอาจเป็นทางเลือกในการแปลที่สมเหตุสมผล ไม่ใช่ข้อผิดพลาด แบบฝึกนี้ให้บันทึกการตรวจหนึ่งตอน แต่ไม่อาจกำหนดอัตราความถูกต้องของโมเดลทั้งหมด ร่างที่ยังไม่ได้ตรวจควรคงป้ายระบุสถานะนั้นไว้

ขอบเขตงานบรรณาธิการ

เราตรวจบทความและเอกสารที่เชื่อมโยง แต่ไม่ได้ฝึกโมเดลหรือทดสอบเกณฑ์มาตรฐานซ้ำ การค้นหัวข้อใช้ Perplexity Deep Research บทความและฉบับทั้ง 13 ภาษาได้รับการร่างและเทียบเคียงโดยมี AI ช่วย การตรวจภาษาจากผู้เชี่ยวชาญยังไม่เสร็จ ภาพใบคัมภีร์ใช้เป็นบริบททางประวัติศาสตร์ ไม่ใช่หลักฐานว่าใบที่เห็นอยู่ในข้อมูลฝึกโมเดล