Contact
Line : comsiam
Contact
Line : comsiam

Copilot Vision บนมือถือสามารถช่วยให้ Microsoft Copilot ดูสิ่งของรอบตัวผ่านกล้อง แล้วตอบคำถามจากสิ่งที่เห็นได้ในประสบการณ์ที่รองรับ เช่น ช่วยดูอุปกรณ์ ป้าย เอกสาร สินค้า หรือวัตถุต่าง ๆ โดยผู้ใช้ไม่ต้องถ่ายรูปแล้วอธิบายเองทีละอย่างเสมอไป
จุดเด่นคือสามารถใช้ร่วมกับ Voice ได้ ผู้ใช้จึงเปิดกล้องให้ Copilot ดูสิ่งที่อยู่ตรงหน้า แล้วถามด้วยเสียงว่า “อันนี้คืออะไร” หรือ “ฉันต้องทำอะไรต่อ”
บทความนี้ comsiam จะอธิบายวิธีใช้ Copilot Vision ผ่านกล้องมือถือแบบทีละขั้น พร้อมตัวอย่างการใช้งานจริงและข้อควรระวังเรื่อง Privacy
คือการให้ Copilot ใช้ภาพจากกล้องมือถือเป็น Context ในการตอบคำถาม
ตัวอย่างเช่น
จากนั้นผู้ใช้สามารถถามเกี่ยวกับสิ่งที่กำลังเห็นได้
โดยทั่วไปต้องมี
ฟีเจอร์อาจไม่เปิดให้ทุกบัญชีพร้อมกัน
ขั้นตอนทั่วไปคือ
จากนั้น Copilot จะตอบจากสิ่งที่เห็นในระดับที่ระบบรองรับ
ต้องเปิดถ้าต้องการใช้กล้อง
ถ้าปฏิเสธ Permission ไว้ก่อนหน้า สามารถกลับไปเปิดจาก Settings ของมือถือได้
สำหรับ iPhone และ Android ชื่อเมนูอาจต่างกันเล็กน้อย
ได้
ตัวอย่าง
อุปกรณ์ตรงหน้าคืออะไร
ช่วยอ่านข้อความบนกล่องนี้
ปุ่มไหนใช้เปิดเครื่อง
ไม่จำเป็นต้องใช้ภาษาอังกฤษ
ได้ในประสบการณ์ที่รองรับ
นี่เป็นรูปแบบที่สะดวกมาก เพราะไม่ต้อง
เพียงหันกล้องแล้วพูดคำถามได้เลย
ได้
เช่นหันกล้องไปที่ Router แล้วถาม
นี่คืออุปกรณ์อะไร
หรือ
พอร์ตด้านหลังแต่ละช่องใช้ทำอะไร
เหมาะกับคนที่ไม่รู้จักอุปกรณ์
ตัวอย่าง Prompt
ช่วยดู Router ตัวนี้ แล้วบอกว่าพอร์ต WAN อยู่ตรงไหน
หรือ
ไฟ LED ดวงนี้หมายถึงอะไร
แต่ถ้าเป็นรุ่นเฉพาะ ควรให้ Copilot อ่าน Model number ก่อน
ได้
เช่น
สายเส้นนี้น่าจะเป็นสายอะไร
หรือ
พอร์ตนี้คือ HDMI, USB หรือ Ethernet
ช่วยแยกพอร์ตพื้นฐานได้
แต่ควรระวังพอร์ตที่หน้าตาคล้ายกัน
ช่วยดูอาการที่มองเห็นได้ เช่น
แล้วถาม
มีอะไรผิดปกติที่เห็นได้ไหม
แต่ Vision ไม่สามารถวินิจฉัยวงจรภายในจากภาพภายนอกได้ทั้งหมด
ได้
เช่นหันกล้องไปที่ไฟสถานะแล้วถาม
ไฟสีแดงนี้หมายความว่าอะไร
ถ้า Copilot เห็นรุ่นอุปกรณ์และไฟชัด อาจช่วยอธิบายเบื้องต้นได้
แต่ควรตรวจคู่มือรุ่นจริงด้วย
ได้
ตัวอย่าง
ป้ายนี้เขียนว่าอะไร
ช่วยแปลป้ายนี้เป็นภาษาไทย
เหมาะกับการเดินทางหรืออ่านข้อความภาษาต่างประเทศ
ได้
ถาม
เมนูนี้มีอะไรบ้าง
หรือ
ช่วยแปลชื่ออาหารให้หน่อย
แต่ Vision อาจอ่านราคาหรือตัวหนังสือเล็กผิดได้
ได้
หันกล้องไปยังเอกสารแล้วถาม
เอกสารนี้เกี่ยวกับอะไร
หรือ
ช่วยสรุปหัวข้อสำคัญ
แต่ควรระวังเอกสารที่มีข้อมูลส่วนตัว
ได้ในบางกรณี
เช่น
ยอดรวมเท่าไร
หรือ
มีรายการอะไรบ้าง
แต่ตัวเลขสำคัญควรตรวจด้วยตาอีกครั้ง
ได้
เช่น
สินค้านี้คืออะไร
รุ่นไหนที่เขียนอยู่บนกล่อง
มีสเปกอะไรที่อ่านได้จากฉลาก
ช่วยหาข้อมูลจาก Packaging ได้เร็ว
ได้ในบางสถานการณ์ถ้ากล้องมองเห็นทั้งสองชิ้นชัด
ถามว่า
สองรุ่นนี้ต่างกันตรงไหนจากข้อมูลบนกล่อง
แต่ถ้าต้องการเปรียบเทียบสเปกละเอียด ควรใช้ข้อมูลผู้ผลิตด้วย
Vision อาจมองเห็นบาร์โค้ดหรือข้อความรอบ ๆ ได้ แต่ไม่ควรสมมติว่าจะอ่านหรือค้นฐานข้อมูลสินค้าได้แม่นทุกครั้ง
ถ้าต้องการข้อมูลแน่นอน ควรใช้แอปสแกนบาร์โค้ดโดยตรง
อาจช่วยระบุว่าเป็น QR Code แต่การเปิดลิงก์ควรใช้ระบบกล้องหรือ Scanner ของมือถือ
ไม่ควรเปิด QR Code ที่ไม่น่าเชื่อถือ
สามารถช่วยอ่านข้อความหรืออธิบายฉลากได้ในระดับหนึ่ง
แต่ไม่ควรใช้ Vision ตัดสินใจเรื่องยาแทนแพทย์หรือเภสัชกร
โดยเฉพาะ
ต้องตรวจจากฉลากจริงและผู้เชี่ยวชาญ
ได้
เช่นถาม
นี่น่าจะเป็นอาหารอะไร
หรือ
มีส่วนประกอบอะไรที่มองเห็นได้บ้าง
แต่ AI ไม่สามารถรู้ส่วนผสมที่ซ่อนอยู่ทั้งหมดจากภาพ
ช่วยระบุเบื้องต้นได้
เช่น
ต้นไม้นี้น่าจะเป็นอะไร
แต่การจำแนกชนิดจากภาพอาจผิดได้
ไม่ควรใช้เพื่อยืนยันว่าพืชหรือเห็ดชนิดหนึ่งกินได้หรือปลอดภัย
ช่วยระบุลักษณะทั่วไปได้
แต่ถ้าเป็นสัตว์มีพิษหรืออันตราย ควรรักษาระยะห่างและไม่เข้าใกล้เพียงเพื่อให้กล้องเห็นชัดขึ้น
ความปลอดภัยต้องมาก่อน
ได้ในระดับที่มองเห็น
เช่น
ไฟเตือนนี้หมายความว่าอะไร
หรือ
ชิ้นส่วนนี้คืออะไร
แต่ไม่ควรทำงานซ่อมที่เสี่ยงจากคำแนะนำ Vision อย่างเดียว
ได้
สามารถถาม
สัญลักษณ์นี้หมายความว่าอะไร
แต่ถ้าเป็นไฟเตือนความปลอดภัย เช่น
ควรตรวจคู่มือรถหรือศูนย์บริการ
ได้
เช่น
ปุ่มนี้ใช้ทำอะไร
หรือ
สัญลักษณ์นี้หมายถึงโหมดไหน
เหมาะกับเครื่องใช้ที่มี Icon เยอะ
ได้
ตัวอย่าง
ฉันควรเสียบสาย Internet เข้าช่องไหน
หรือ
ช่อง LAN อยู่ตรงไหน
แต่ควรบอกรุ่นอุปกรณ์ด้วยถ้าเห็น Model number
ช่วยแนะนำเบื้องต้นได้
เช่น
สายไหนดูเหมือนหลุด
หรือ
มีจุดไหนผิดปกติจากที่เห็น
แต่ Vision ไม่ควรใช้แทนการวัดไฟ การทดสอบอุปกรณ์ หรือการวินิจฉัยทางเทคนิคจริง
ถ้าเป็น
อย่าเข้าใกล้เพื่อให้ AI ดูภาพชัดขึ้น
ควรให้ช่างที่มีความรู้ตรวจ
ลอง
ภาพชัดช่วยให้ Vision อ่านข้อมูลได้ดีขึ้น
ให้ขยับเข้าใกล้พอเหมาะ
หรือถ่ายเฉพาะบริเวณ
ไม่ต้องให้เห็นทั้งอุปกรณ์ถ้าคำถามอยู่ที่จุดเดียว
ถามต่อว่า
คุณเห็นข้อความอะไรบนอุปกรณ์นี้
ถ้าคำตอบไม่ตรงกับของจริง ให้แก้ข้อมูลก่อนถามต่อ
อย่าปล่อยให้ AI วิเคราะห์ต่อจากข้อมูลที่มองผิด
แทนที่จะถาม
นี่คืออะไร
ให้พูดว่า
ช่วยดูข้อความสีขาวด้านล่างกล่อง
หรือ
ดูเฉพาะพอร์ตด้านซ้าย
ช่วยเพิ่มความแม่นยำ
ได้ ถ้าตัวอักษรชัด
ถามว่า
ช่วยอ่าน Model number บนป้ายนี้
จากนั้นควรตรวจตัวอักษรและตัวเลขเองอีกครั้ง
เช่น
US-9256ALSZH
ตัวเลขผิดหนึ่งตัวอาจกลายเป็นคนละรุ่น
ในทางเทคนิคอาจอ่านได้ แต่ Serial number อาจเป็นข้อมูลเฉพาะอุปกรณ์
ไม่ควรแชร์โดยไม่จำเป็น
ถ้าต้องการเพียงระบุรุ่น ให้ใช้ Model number แทน
ก่อนเปิด Vision ควรตรวจ Background
อาจมี
หันกล้องเฉพาะสิ่งที่ต้องการให้ดู
ไม่ควรหันกล้องไปยัง
ถ้าอยู่ในภาพ ให้ปิดหรือบังออกก่อน
ไม่ควรบันทึกหรือแชร์ภาพผู้อื่นโดยไม่จำเป็น
โดยเฉพาะในพื้นที่ส่วนตัวหรือสถานการณ์ที่บุคคลนั้นไม่ได้คาดว่าจะถูกนำภาพไปใช้กับ AI
ควรคำนึงถึง Privacy ของคนรอบข้างด้วย
ไม่
อาจผิดพลาดจาก
จึงควรใช้เป็นผู้ช่วย ไม่ใช่หลักฐานสุดท้าย
ลองใช้
Prompt สุดท้ายช่วยลดการตอบแบบมั่นใจเกินจริง
ได้ในประสบการณ์และบัญชีที่รองรับ
ได้
ได้ในประสบการณ์ที่รองรับ
ได้
ได้ถ้ากล้องมองเห็นข้อความชัด
ไม่ ควรตรวจข้อมูลสำคัญอีกครั้ง
สมมติว่าคุณมี Router ที่ไม่รู้ว่าช่องไหนคือ WAN
ทำดังนี้
วิธีนี้ง่ายกว่าการอธิบายตำแหน่งพอร์ตด้วยข้อความ
วิธีใช้ Copilot Vision ผ่านกล้องมือถือ คือเปิด Microsoft Copilot เข้าโหมด Vision ที่รองรับ อนุญาต Camera แล้วหันกล้องไปยังสิ่งที่ต้องการถาม
สามารถใช้ช่วยดู
จากนั้นถามด้วยข้อความหรือ Voice ได้ เช่น
“สิ่งนี้คืออะไร”
“ปุ่มไหนใช้ทำอะไร”
“ฉันต้องทำขั้นตอนต่อไปอย่างไร”
comsiam แนะนำให้ใช้กล้อง Vision กับสิ่งที่ต้องการคำอธิบายแบบรวดเร็ว แต่ควรหันกล้องเฉพาะสิ่งที่จำเป็น และหลีกเลี่ยงการให้ AI เห็น Password, OTP, Serial number ที่ไม่จำเป็น เอกสารลับ หรือข้อมูลส่วนตัวของคนอื่น เพื่อรักษาความเป็นส่วนตัวให้มากที่สุด