AI model (LLM) ตัวไหนเก่งภาษาไทย?

Wiz
G-Able
Published in
2 min readJun 28, 2024

Blog นี้เขียนในวันที่ 28-June-2024 หลังจากที่ได้เห็นข่าวว่า Google ได้ปล่อย LLM ตัวใหม่ คือ Gemma2 ออกมา (https://blog.google/technology/developers/google-gemma-2) โดยโมเดลนี้มีให้เลือกใช้ทั้งแบบ 9b และ 27b

วันนี้จึงมาลองทดสอบความเข้าใจภาษาไทยของโมเดลต่าง ๆ กันดูหน่อยเพื่อเปรียบเทียบให้เห็นว่า LLM model ในปัจจุบันนั้น สามารถเข้าใจภาษาไทยไปถึงไหนกันแล้ว โดย model ที่เราจะทดสอบกับจะมีทั้ง model ขนาดใหญ่ที่มีจำนวน parameter สูงอย่าง GPT-4o, Llama3–70b-instruct, NVIDIA Nemotron4–340b-instruct เปรียบเทียบกับ model ที่มีขนาดเล็กลงมาที่มีจำนวนพารามิเตอร์อยู่ประมาณ 7b-9b (billion parameters)

LLM models ที่นำมาทดสอบ

  • GPT-4o (OpenAI)
  • Llama3–70b-instruct (Meta)
  • Llama3–8b-instruct (Meta)
  • Gemma2–27b-it (Google)
  • Gemma2–9b-it (Google)
  • Nemotron4–340b-instruct (NVIDIA)

ส่วนคำถามหรือ prompt ที่จะนำมาถาม เราจะทดสอบใช้ prompt เดียวกัน เพื่อดูความแตกต่างของคำตอบที่ได้ โดยจะถามเป็นคำถามแบบที่ต้องให้วิเคราะห์ ไม่ใช่การถามหา fact ธรรมดาอย่างคำถามประเภท ใครทำอะไร ที่ไหน เมื่อไหร่ ซึ่งคำถามพวกนั้น มาถึงวันนี้จะเห็นว่า LLM หลายตัวทำได้ดีมากแล้ว

ในที่นี้ คำถาม หรือ Prompt ของเราคือ

จงอธิบายความหมายของคำว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก”

มาดูคำตอบของ LLM แต่ละตัวกัน

เริ่มจากคำตอบของ GPT-4o:

คำพังเพย “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นสำนวนไทยที่ใช้สื่อถึงความสำคัญของพ่อแม่ในครอบครัว โดยมีความหมายดังนี้:

ขาดพ่อเหมือนถ่อหัก: เปรียบเสมือนการสูญเสียพ่อที่เป็นเสาหลักของครอบครัว ทำให้ครอบครัวขาดความมั่นคงและยากที่จะก้าวเดินต่อไปได้โดยไม่มีปัญหา เหมือนการถ่อที่ใช้ในการพายเรือหัก ทำให้ไม่สามารถพายเรือต่อไปได้อย่างมีประสิทธิภาพ

ขาดแม่เหมือนแพแตก: เปรียบเสมือนการสูญเสียแม่ที่เป็นหัวใจและศูนย์กลางของครอบครัว ทำให้ครอบครัวแตกแยกและไม่มีความอบอุ่น เหมือนแพที่แตกกระจายไป ทำให้ไม่สามารถลอยอยู่บนน้ำได้อีก

ทั้งสองส่วนของสำนวนนี้แสดงถึงความสำคัญของทั้งพ่อและแม่ในครอบครัว ซึ่งเป็นปัจจัยที่ทำให้ครอบครัวมีความสมบูรณ์และสามารถดำเนินชีวิตได้อย่างราบรื่นและมั่นคง

คำตอบของ Llama3–70b-instruct

คำพูดที่ว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นคำพูดที่สอนให้เราเห็นความสำคัญของพ่อแม่ในชีวิตของเรา

เมื่อเราขาดพ่อไป ก็เหมือนกับถ่อหัก คือ ถ่อเป็นเครื่องมือสำคัญในการพายเรือ ถ่อหักก็หมายความว่าเรือจะไม่สามารถเดินเรือได้เหมือนเดิม เราจะไม่มีทางที่จะเดินเรือไปสู่จุดหมายได้ ซึ่งพ่อเปรียบเสมือนถ่อที่ช่วยเรือเราให้เดินไปสู่จุดหมายได้

และเมื่อเราขาดแม่ไป ก็เหมือนกับแพแตก คือ แพเป็นเครื่องมือสำคัญในการข้ามแม่น้ำ ถ้าแพแตกก็หมายความว่าเราจะไม่สามารถข้ามแม่น้ำได้เหมือนเดิม เราจะไม่มีทางที่จะไปสู่ฝั่งตรงข้ามได้ ซึ่งแม่เปรียบเสมือนแพที่ช่วยเราให้ข้ามแม่น้ำได้

โดยรวมแล้ว คำพูดที่ว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” ก็หมายความว่า พ่อแม่เป็นคนสำคัญที่ช่วยเราให้เดินไปสู่จุดหมายได้ หากเราไม่มีพ่อแม่ ก็เหมือนกับไม่มีทางที่จะเดินไปสู่จุดหมายได้ เราควรจะให้คุณค่าและเอาใจใส่พ่อแม่ของเราให้มากที่สุด

คำตอบของ Llama3–8b-instruct

คำว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นสำนวนภาษาไทยที่ใช้เรียกความสัมพันธ์ระหว่างคุณพ่อและคุณแม่กับลูก โดยใช้รูปภาพของเรือและแพเปรียบเทียบความสัมพันธ์ดังกล่าว

“ขาดพ่อเหมือนถ่อหัก” หมายถึง ความสูญเสียคุณพ่อเหมือนเรือที่หักหาดได้ ถ้าเรือไม่ดูแลอย่างดี เรืออาจหักหาดได้เพราะแรงลมแรงน้ำ ความสูญเสียคุณพ่อจึงเปรียบเสมือนเรือที่หักหาดได้เพราะแรงความสูญเสีย

“ขาดแม่เหมือนแพแตก” หมายถึง ความสูญเสียคุณแม่เหมือนแพที่แตกหักได้ ถ้าแพไม่ดูแลอย่างดี แพอาจแตกหักได้เพราะแรงน้ำแรงลม ความสูญเสียคุณแม้จึงเปรียบเสมือนแพที่แตกหักได้เพราะแรงความสูญเสีย

โดยรวมแล้ว คำว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นสำนวนภาษาไทยที่ใช้เรียกความสัมพันธ์ระหว่างคุณพ่อและคุณแม่กับลูก โดยใช้รูปภาพของเรือและแพเปรียบเทียบความสัมพันธ์ดังกล่าว และแสดงความสูญเสียคุณพ่อและคุณแม่เหมือนเรือและแพที่หักหักแล้ว

คำตอบของ Gemma2–27b-it

คำว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นสำนวนไทยที่เปรียบเทียบถึงความสำคัญของพ่อและแม่ต่อครอบครัว

ขาดพ่อเหมือนถ่อหัก: ถ่อเป็นเครื่องมือที่ใช้ในการไถนา หากถ่อหักก็จะไม่สามารถไถนาได้อย่างมีประสิทธิภาพเช่นเดียวกัน การขาดพ่อก็เปรียบเสมือนเสาหลักของครอบครัวหักไป ทำให้ครอบครัวขาดที่พึ่งพิงทางด้านการปกครอง การให้คำปรึกษา และการอบรมสั่งสอน

ขาดแม่เหมือนแพแตก: แพเป็นเรือที่ใช้ในการเดินทาง หากแพแตกก็จะทำให้ผู้โดยสารตกน้ำและจมน้ำตายได้เช่นเดียวกัน การขาดแม่ก็เปรียบเสมือนเสาหลักทางด้านจิตใจและความอบอุ่นของครอบครัวหักไป ทำให้ครอบครัวขาดการดูแลเอาใจใส่ การเลี้ยงดู และความรัก

สรุป:

สำนวนนี้ต้องการสื่อถึงความสำคัญของพ่อและแม่ที่มีต่อครอบครัว ซึ่งเปรียบเสมือนเสาหลักที่ค้ำจุนครอบครัวให้มั่นคงและมีความสุข หากขาดไปข้างใดข้างหนึ่งก็จะทำให้ครอบครัวอ่อนแอและประสบปัญหาได้

หมายเหตุ:

สำนวนนี้เป็นมุมมองแบบดั้งเดิมที่เน้นความสำคัญของพ่อและแม่ในครอบครัวแบบดั้งเดิม ในปัจจุบันครอบครัวมีรูปแบบที่หลากหลายมากขึ้น และบทบาทของพ่อและแม่ก็อาจแตกต่างกันไป

คำตอบของ Gemma2–9b-it

คำกล่าว “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นคำเปรียบเทียบที่แสดงถึงความสำคัญของพ่อและแม่ต่อชีวิตของบุตรหลาน

ขาดพ่อเหมือนถ่อหัก:

ถ่อหัก หมายถึงเรือที่ขาดหักพังทลาย

เปรียบเสมือนพ่อที่เป็นเสาหลักของครอบครัว หากขาดพ่อไป ครอบครัวก็จะอ่อนแอและไม่มั่นคงเหมือนเรือที่ขาดหัก

ขาดแม่เหมือนแพแตก:

แพแตก หมายถึงแพที่พังทลาย

เปรียบเสมือนแม่ที่เป็นที่พึ่งพิงและให้ความอบอุ่น หากขาดแม่ไป บุตรหลานก็จะรู้สึกเดียวดายและไม่มีที่พึ่งเหมือนแพที่แตก

ความหมายโดยรวม:

คำกล่าวนี้สื่อถึงความสำคัญของพ่อและแม่ต่อบุตรหลานอย่างชัดเจน พ่อและแม่เปรียบเสมือนสิ่งที่จำเป็นต่อความอยู่รอดและความมั่นคงของครอบครัว หากขาดพ่อหรือแม่ไป ครอบครัวจะประสบกับความยากลำบากและอ่อนแอ

นอกจากนี้ คำกล่าวนี้ยังเน้นย้ำถึงความรักและความผูกพันที่ลึกซึ้งระหว่างพ่อแม่กับบุตรหลาน

คำตอบของ Nemotron4–340b-instruct

คำกล่าวที่ว่า “ขาดพ่อเหมือนถ่อหัก ขาดแม่เหมือนแพแตก” เป็นสำนวนไทยที่ใช้เพื่อแสดงถึงความสำคัญและบทบาทที่แตกต่างกันของพ่อและแม่ในครอบครัว ซึ่งสามารถอธิบายความหมายได้ดังนี้

“ขาดพ่อเหมือนถ่อหัก”: ถ่อคือไม้ยาวที่ใช้สำหรับพายหรือค้ำยันเรือให้เคลื่อนที่ไปในทิศทางที่ต้องการ ถ่อจึงเปรียบเหมือนพ่อที่เป็นหลักชัยและผู้นำในครอบครัว คอยให้คำแนะนำ ชี้แนะแนวทาง และแก้ปัญหาต่างๆ ให้กับสมาชิกในครอบครัว เมื่อขาดพ่อไปก็เหมือนกับการที่เรือขาดถ่อ ทำให้การเดินทางหรือการดำเนินชีวิตในครอบครัวขาดความมั่นคงและทิศทางที่ถูกต้อง

“ขาดแม่เหมือนแพแตก”: แพคือที่อยู่อาศัยชั่วคราวที่ลอยอยู่บนน้ำ แพจึงเปรียบเหมือนแม่ที่เป็นผู้ให้ความอบอุ่น ดูแลเอาใจใส่ และสร้างความผูกพันภายในครอบครัว เมื่อขาดแม่ไปก็เหมือนกับการที่แพแตก ทำให้ความอบอุ่นและความผูกพันในครอบครัวลดลงหรือหายไป สมาชิกในครอบครัวอาจรู้สึกขาดที่พึ่งและความมั่นคงทางจิตใจ

ดังนั้น สำนวนนี้จึงต้องการสื่อถึงความสำคัญของทั้งพ่อและแม่ในครอบครัว ที่ต่างก็มีบทบาทและหน้าที่แตกต่างกัน แต่ล้วนแล้วแต่มีความสำคัญและจำเป็นต่อการดำรงชีวิตและความสุขของสมาชิกในครอบครัว เมื่อขาดพ่อหรือแม่ไป ก็อาจทำให้ครอบครัวขาดความสมบูรณ์และความมั่นคงได้

จากที่ทดสอบจะเห็นว่า model ที่เลือกมาสามารถตอบคำถามสมมติได้ดีทีเดียว โดย model ที่มีพารามิเตอร์มากจะสามารถให้รายละเอียดได้ค่อนข้างดี ส่วน model ขนาดเล็กก็อาจจะมีข้อผิดพลาดบ้าง แต่ถือว่าเล็กน้อย

สำหรับ Llama3 ทั้งสองรุ่นนั้นจะ default ตอบออกมาเป็นภาษาอังกฤษ แต่เราสามารถปรับ promยะt เพิ่มนิดหน่อย โดยเพิ่มคำว่า “โดยตอบเป็นภาษาไทย” ต่อท้าย prompt เดิมไปก็ทำงานได้ถูกต้อง

สำหรับ Google Gemma2 ที่เพิ่งออกมาทั้งสองรุ่นคือ 9b และ 27b ต้องบอกว่าภาษาไทยของเจ้าตัวนี้โหดมาก จากนี้ไปคงมีการพัฒนายิ่งขึ้นไปอีก ขณะเดียวกันค่ายอื่นๆ ก็คงทยอยออก model ดีๆ มาให้พวกเราเลือกใช้กัน — The Age of AI just begins.

Update (10/10/2924) : โพสอื่นที่เกี่ยวข้อง

--

--