วิธี คํานวณ ความ คล้าย กัน ใน การ ประมวล ผล จาก ภาษา ธรรมชาติ

มี การ ใช้ คะแนน คล้าย ๆ กัน ใน การ แปล ภาษา ธรรมชาติ เพื่อ วัด ว่า สอง คํา หรือ วลี คล้าย กัน นั้น อาศัย การ แปล ของ ตัว เลข ที่ ใช้ ใน การ แปล ของ ตัว เลข ที่ เป็นเวกเตอร์.

การเข้าใจการฝังตัวคํา

การฝังคําเป็นการแสดงคําแบบเวกเตอร์หนาแน่น ในการสร้างโดยอัลกอริทึม เช่น คํา 2Vec, กลอสฟี หรือ เส้นตรงแบบเร็ว คําแต่ละคําจะถูกโยงไปยังพื้นที่ที่มีมิติสูง

การคํานวณความคล้ายคลึงกัน

วิธีคํานวณความคล้ายคลึงกันระหว่างคําสองคํา คือการใช้โคไซน์ความคล้ายคลึง. นี่วัดโคไซน์ของมุมระหว่างเวกเตอร์สองตัว, ระบุว่าทิศพวกมันคล้ายกันแค่ไหน.

ขั้น ตอน ต่าง ๆ ใน การ คํานวณ ความ คล้ายคลึง ของ โคไซน์

• ใช้รูปเวกเตอร์ของคํา
• คํานวณดอทโปรดัคของเวกเตอร์สองตัว
• จงคํานวณขนาด (ความยาว) ของเวกเตอร์แต่ละตัว
• จงหารดอทโปรดัคด้วยผลคูณของขนาด

สูตรของโคไซน์คล้ายคือ:

[FLT: 0] Cogine parentity = (A ⁇ B) / (AHE) ⁇ ⁇ ⁇ ⁇ ⁇ ⁇ (

การ แปล ความ หมาย ของ คะแนน

คะแนน ที่ ใกล้ เคียง กับ 1 แสดง ให้ เห็น ความ คล้ายคลึง กัน อย่าง มาก 0 บ่ง ชี้ ว่า ไม่ มี ความ คล้ายคลึง กัน และ -1 บ่ง ชี้ ความ หมาย ตรง กัน ข้าม.