การ พูด ถึง เรื่อง เหล่า นี้ เป็น สิ่ง จําเป็น เพื่อ จะ ปรับ ปรุง การ มอง เห็น และ การ ทํา งาน ของ หุ่น ยนต์ ใน สภาพ แวด ล้อม ต่าง ๆ.
ข้อ ท้าทาย ทั่ว ไป ใน การ มอง เห็น 3 มิติ
การ เพิ่ม ความ สว่าง ใน พื้น ผิว ที่ สะท้อน แสง และ สภาพ แวด ล้อม อาจ ทํา ให้ เกิด ความ ผิด พลาด ใน การ รับ รู้ ลึก ซึ่ง นํา ไป สู่ ความ ผิด พลาด ใน การ ตรวจ จับ และ การ นํา ทาง สิ่ง ของ.
การ แก้ ปัญหา ที่ ฝัง ราก ลึก
เพื่อปรับความแม่นยําของความลึก เซ็นเซอร์หลายตัว เช่น LiDAR กล้องสเตอริโอ และแสงโครงสร้างสามารถรวมกันได้ เทคนิคการปรับตั้งและอัลกอริทึมการสังเคราะห์ของเซ็นเซอร์ ช่วยรวมข้อมูล
การ จัด การ กับ สิ่ง แวด ล้อม ที่ ไม่ มี การ ควบคุม
หุ่นยนต์มักจะดําเนินงานในสภาพแวดล้อมด้วยวัตถุเคลื่อนไหว ซึ่งสามารถเข้าใจภาพ 3 มิติได้ การถอดภาพการประมวลผลตามเวลาจริง
การหาววัตถุ
การจดจําวัตถุอย่างถูกต้องใน 3 มิตินั้น ต้องการอัลกอริทึมที่ทนทาน ที่สามารถจัดการกับ occlusion และมุมมองที่หลากหลายได้ รุ่นการเรียนรู้ของเครื่องที่ฝึกบนชุดข้อมูลต่าง ๆ จะเพิ่มความสามารถในการระบุวัตถุได้