Contact
Line : comsiam
Copilot Vision สามารถช่วยให้ Microsoft Copilot ดูสิ่งที่ผู้ใช้กำลังแชร์บนหน้าจอ แล้วตอบคำถามเกี่ยวกับสิ่งนั้นแบบโต้ตอบได้ เช่น ช่วยอธิบายเมนู ชี้จุดสำคัญ วิเคราะห์กราฟ อ่านข้อความ หรือบอกว่าควรทำอะไรต่อ
ความสามารถนี้เหมาะมากกับคนที่ไม่รู้จะอธิบายหน้าจอยังไง เพราะแทนที่จะพิมพ์ยาว ๆ ว่า “ตรงมุมขวาบนมีปุ่มอะไร” ผู้ใช้สามารถเปิด Vision แล้วถามจากสิ่งที่กำลังเห็นได้โดยตรง
บทความนี้ comsiam จะอธิบายวิธีใช้ Copilot Vision ดูหน้าจอแล้วถามคำถามแบบเรียลไทม์ พร้อมตัวอย่าง Prompt และข้อควรระวังเรื่อง Privacy
① Copilot Vision ดูหน้าจอแบบเรียลไทม์คืออะไร
คือการให้ Copilot ใช้ข้อมูลจากหน้าจอหรือหน้าต่างที่ผู้ใช้เลือกแชร์ แล้วช่วยตอบคำถามจากสิ่งที่แสดงอยู่ในขณะนั้น
ตัวอย่างเช่น
ปุ่มไหนใช้ตั้งค่า Wi-Fi
หรือ
จากหน้าจอนี้ ฉันต้องกดอะไรต่อ
ช่วยลดการอธิบายหน้าจอด้วยข้อความ
② Vision ไม่ได้เห็นทุกอย่างตลอดเวลา
สิ่งสำคัญคือ Copilot Vision ไม่ควรถูกเข้าใจว่าเปิดดูหน้าจอของผู้ใช้ตลอดเวลาโดยอัตโนมัติ
โดยทั่วไปผู้ใช้ต้องเป็นฝ่าย
- เปิด Vision
- เลือกสิ่งที่จะแชร์
- อนุญาต Permission
- เริ่ม Session
เมื่อไม่ต้องการใช้แล้วควรหยุดการแชร์
③ วิธีเริ่มใช้ Copilot Vision
ขั้นตอนโดยทั่วไปคือ
- เปิด Microsoft Copilot
- เข้าโหมดที่รองรับ Vision
- เลือกแชร์หน้าจอหรือหน้าต่างตามตัวเลือกที่มี
- อนุญาตสิทธิ์ที่ระบบร้องขอ
- เปิดหน้าที่ต้องการให้ Copilot ดู
- ถามคำถาม
ชื่อเมนูอาจแตกต่างตามอุปกรณ์และเวอร์ชัน
④ ต้อง Sign in หรือไม่
ฟีเจอร์ Vision บางรูปแบบอาจต้อง Sign in
การใช้งานขึ้นอยู่กับ
- Microsoft Account
- ประเทศ
- อุปกรณ์
- แอปเวอร์ชัน
- แพ็กเกจหรือสิทธิ์
ถ้าไม่เห็น Vision ควรอัปเดตแอปและตรวจบัญชีก่อน
⑤ ใช้ดูหน้า Windows Settings ได้ไหม
ได้ในประสบการณ์ที่รองรับ
เช่นเปิด Windows Settings แล้วถาม
ฉันต้องกดตรงไหนเพื่อเปิด Bluetooth
หรือ
เมนูไหนใช้เปลี่ยน Default browser
เหมาะมากกับผู้ใช้มือใหม่
⑥ ใช้ดูหน้าโปรแกรมได้ไหม
ได้ในหน้าต่างหรือแอปที่ระบบอนุญาตให้แชร์
ตัวอย่าง
ปุ่ม Export อยู่ตรงไหน
หรือ
จากหน้าจอนี้ฉันต้องทำขั้นตอนอะไรต่อ
ช่วยให้ Copilot ทำหน้าที่เหมือนผู้ช่วยดูหน้าจอไปพร้อมกัน
⑦ ใช้กับ Microsoft Edge ได้ไหม
ได้ในประสบการณ์ที่รองรับ
สามารถเปิดเว็บไซต์แล้วถาม เช่น
ส่วนไหนของหน้านี้คือราคา
ปุ่มสมัครอยู่ตรงไหน
หน้านี้พูดถึงอะไร
ช่วยลดเวลาในการอ่านหน้าเว็บยาว
⑧ ใช้ดู Error ได้ไหม
เหมาะมาก
ถ้าโปรแกรมแสดง Error สามารถถาม
Error นี้หมายความว่าอะไร
หรือ
จากข้อความที่เห็น ฉันควรแก้ขั้นตอนไหนก่อน
แต่ควรอ่าน Error code จริงประกอบด้วย
⑨ ให้บอกว่าต้องกดตรงไหนได้ไหม
ได้
Prompt เช่น
จากหน้าจอนี้ ช่วยบอกว่าฉันต้องกดตรงไหนต่อ
หรือ
เมนูไหนใช้ตั้งค่าตัวเลือกนี้
เป็นหนึ่งในกรณีใช้งานที่มีประโยชน์ที่สุดสำหรับมือใหม่
⑩ Copilot กดแทนเราได้ไหม
อย่าสับสนระหว่าง Vision กับระบบควบคุมคอมพิวเตอร์
Vision เน้นการ
- มอง
- อธิบาย
- ให้คำแนะนำ
ความสามารถในการลงมือกดหรือควบคุมแทนขึ้นอยู่กับผลิตภัณฑ์และฟีเจอร์อื่นที่รองรับ ไม่ควรสมมติว่า Vision สามารถคลิกทุกอย่างแทนเราได้
⑪ ถ้าหน้าจอเปลี่ยน Copilot เห็นการเปลี่ยนแปลงไหม
ใน Session แบบเรียลไทม์ที่รองรับ ระบบสามารถใช้สิ่งที่กำลังแสดงอยู่เพื่อช่วยตอบคำถามต่อเนื่อง
เช่น
- เปิด Settings
- ถามว่ากดตรงไหน
- เปิดหน้าถัดไป
- ถามต่อว่า แล้วต่อไปทำอะไร
วิธีนี้เหมาะกับงานแบบ Step-by-step
⑫ ใช้สอนติดตั้งโปรแกรมได้ไหม
ได้
เช่นถาม
จากหน้าจอนี้ ขั้นตอนต่อไปในการติดตั้งคืออะไร
หรือ
ตัวเลือกไหนควรเลือกสำหรับผู้ใช้ทั่วไป
แต่ต้องระวัง Installer ที่มี Software แถมหรือสิทธิ์สำคัญ
⑬ ใช้สอนตั้งค่า Router ได้ไหม
ได้ถ้าหน้า Admin ถูกแชร์ให้ Vision ดู
เช่น
เมนูไหนใช้เปลี่ยนชื่อ Wi-Fi
หรือ
ตรงไหนใช้ตั้ง Password
แต่ไม่ควรแชร์ Password จริงให้ AI โดยไม่จำเป็น
⑭ ใช้ดูหน้า BIOS ได้ไหม
ถ้าสามารถแชร์ภาพหรือ Screen ให้ Copilot เห็นได้ ก็อาจช่วยอธิบายรายการต่าง ๆ ได้
แต่ BIOS เป็นพื้นที่ที่เปลี่ยนค่าผิดแล้วมีผลต่อเครื่องได้
ควรตรวจคู่มือรุ่นจริงก่อนเปลี่ยนค่าที่สำคัญ
⑮ ใช้ดู Dashboard ได้ไหม
ได้
เช่น Dashboard ของ
- Analytics
- Ads
- Server
- Monitoring
- E-commerce
ถามว่า
ตัวเลขไหนผิดปกติ
หรือ
กราฟนี้แนวโน้มขึ้นหรือลง
ช่วยให้เข้าใจข้อมูลเร็วขึ้น
⑯ ใช้ดู Google Search Console ได้ไหม
ได้ถ้าหน้าจอถูกแชร์ใน Vision ที่รองรับ
สามารถถาม
กราฟนี้แสดงอะไร
ช่วงไหนคลิกลดลง
Impression กับ Click ต่างกันยังไง
แต่การวิเคราะห์ตัวเลขสำคัญควรตรวจข้อมูลจริงในระบบด้วย
⑰ ใช้ดูกราฟแบบเรียลไทม์
ได้
ตัวอย่าง
กราฟนี้มีแนวโน้มอย่างไร
หรือ
ช่วงไหนยอดตกแรงที่สุด
Vision เหมาะกับการอธิบายภาพรวมของกราฟ
⑱ ใช้ดูตารางได้ไหม
ได้ในหลายกรณี
เช่นถาม
แถวไหนมียอดขายสูงสุด
หรือ
คอลัมน์ไหนมีค่าต่ำที่สุด
แต่ตารางที่มีข้อมูลแน่นมากอาจอ่านผิดได้
⑲ ใช้ดูหน้า Excel ได้ไหม
ได้ถ้าแชร์หน้าจอและ Vision รองรับ
สามารถถามเกี่ยวกับสิ่งที่เห็น เช่น
จากตารางนี้ คอลัมน์ไหนยอดสูงสุด
หรือ
กราฟนี้ควรตีความยังไง
แต่การคำนวณจริงควรใช้ข้อมูลในไฟล์โดยตรงเมื่อทำได้
⑳ ใช้ดู PowerPoint ได้ไหม
ได้
เช่น
สไลด์นี้ข้อความเยอะไปไหม
หรือ
จุดไหนควรปรับให้อ่านง่ายขึ้น
ช่วยเรื่อง Review งานนำเสนอได้
㉑ ใช้ดู Word ได้ไหม
ได้
เช่น
จากหน้านี้ หัวข้อหลักคืออะไร
หรือ
ย่อหน้านี้อ่านยากตรงไหน
เหมาะกับการตรวจเอกสารบนหน้าจอ
㉒ ใช้ดูหน้าร้านออนไลน์ได้ไหม
ได้
สามารถถาม
ราคาตรงไหน
รุ่นไหนเลือกอยู่ตอนนี้
มีค่าจัดส่งแสดงตรงไหน
ช่วยลดการหาเมนูในหน้าสินค้าที่ซับซ้อน
㉓ ใช้ดูเว็บที่มีหลายปุ่มได้ไหม
ได้
ถามว่า
ปุ่มไหนใช้ดาวน์โหลด
หรือ
ถ้าต้องการสมัครบัญชีควรกดตรงไหน
แต่ควรระวังโฆษณาหรือปุ่มปลอมในเว็บไซต์บางประเภท
㉔ ใช้ช่วยกรอกฟอร์มได้ไหม
Vision สามารถช่วยอธิบายช่องต่าง ๆ ได้
เช่น
ช่องนี้ต้องกรอกอะไร
หรือ
คำว่า Billing Address หมายถึงอะไร
แต่ข้อมูลสำคัญควรกรอกด้วยตัวเอง
㉕ ห้ามให้ AI ดู Password โดยไม่จำเป็น
ถ้ากำลังเข้าสู่ระบบ
- ซ่อน Password
- อย่าอ่าน Password ออกเสียง
- อย่าแชร์ OTP
- อย่าแชร์ Recovery code
ก่อนใช้ Vision ควรตรวจว่าหน้าจอไม่มีข้อมูลลับ
㉖ ใช้กับ Internet Banking ได้ไหม
ไม่แนะนำ
หน้า Internet Banking มีข้อมูลอ่อนไหวสูง เช่น
- ยอดเงิน
- เลขบัญชี
- ธุรกรรม
- OTP
- ข้อมูลส่วนตัว
ควรหยุด Screen sharing ก่อนเข้าใช้งาน
㉗ ใช้กับ Email ได้ไหม
อาจใช้ได้ แต่ต้องระวัง Privacy
Inbox อาจมี
- ข้อมูลส่วนบุคคล
- Password reset
- ใบแจ้งหนี้
- ข้อมูลลูกค้า
ควรแชร์เฉพาะ Email ที่จำเป็นจริง ๆ
㉘ ใช้กับระบบบริษัทได้ไหม
ต้องดู Policy ขององค์กร
ระบบภายในอาจมีข้อมูลที่ห้ามส่งให้บริการ AI ภายนอก
ก่อนใช้ควรตรวจ
- นโยบายบริษัท
- สิทธิ์ผู้ใช้
- ประเภทข้อมูล
- Compliance
㉙ ใช้ Vision กับ Voice พร้อมกันอย่างไร
ในประสบการณ์ที่รองรับ ผู้ใช้สามารถแชร์หน้าจอแล้วพูดว่า
ฉันต้องกดตรงไหน
จากนั้นเปลี่ยนหน้าแล้วถาม
ตอนนี้ถูกไหม
ช่วยให้การแก้ปัญหาเป็นธรรมชาติมากขึ้น
㉚ ถ้า Copilot ชี้ผิดทำอย่างไร
อย่ากดทันทีถ้าเป็นการตั้งค่าสำคัญ
ถามต่อว่า
ช่วยอธิบายว่าทำไมต้องกดตรงนี้
หรือ
มีวิธีตรวจสอบก่อนกดไหม
เหมาะกับงานที่มีความเสี่ยง
㉛ ถ้าหน้าจอมีข้อความเล็กมาก
Copilot อาจอ่านไม่ครบ
ให้ลอง
- Zoom
- ขยาย Window
- เลื่อนไปเฉพาะส่วนสำคัญ
- ปิดสิ่งรบกวน
- ถ่าย Screenshot เฉพาะบริเวณ
ช่วยเพิ่มโอกาสอ่านถูก
㉜ ถ้าหน้าจอมีข้อมูลเยอะมาก
ให้ระบุบริเวณ
เช่น
ดูเฉพาะด้านขวาบน
ดูเฉพาะตารางตรงกลาง
สนใจเฉพาะแถวที่ 3
ช่วยให้ AI โฟกัสได้ดีขึ้น
㉝ Prompt แบบไหนเหมาะกับ Vision
Prompt ควรสั้นแต่ระบุเป้าหมาย
ตัวอย่าง
จากหน้าจอนี้ ฉันต้องกดอะไรต่อเพื่อเปิด Wi-Fi
ดีกว่า
ช่วยดูให้หน่อย
เพราะ Copilot รู้ทันทีว่าต้องมองหาอะไร
㉞ Prompt สำหรับแก้ปัญหา
ใช้
จากหน้าจอนี้ ช่วยระบุปัญหาที่เห็น แล้วแนะนำวิธีแก้ทีละขั้น โดยอย่าเดาถ้าไม่แน่ใจ
เหมาะกับ Troubleshooting
㉟ Prompt สำหรับเรียนรู้โปรแกรม
ใช้
อธิบายปุ่มสำคัญที่เห็นบนหน้าจอนี้สำหรับมือใหม่
หรือ
ช่วยสอนฉันใช้หน้านี้ทีละขั้น
ช่วยเปลี่ยน Vision เป็นผู้ช่วยสอนได้
㊱ Copilot Vision แม่น 100% ไหม
ไม่
อาจเกิดความผิดพลาด เช่น
- อ่านข้อความผิด
- ชี้เมนูผิด
- สับสน UI
- อ่านตัวเลขผิด
- เข้าใจ Icon ผิด
ผู้ใช้ต้องตรวจสิ่งที่สำคัญก่อนทำตาม
㊲ งานไหนต้องระวังเป็นพิเศษ
ระวังมากเมื่อเกี่ยวกับ
- การเงิน
- การลบข้อมูล
- การ Format Disk
- BIOS
- Security
- Account
- Permission
- การติดตั้ง Software ไม่รู้จัก
ถ้ากดผิดอาจมีผลจริงกับระบบ
㊳ วิธีหยุดแชร์หน้าจอ
เมื่อใช้งานเสร็จ ควรหยุด Session หรือ Screen sharing ทันที
อย่าปล่อย Vision เปิดต่อแล้วไปทำงานส่วนตัว
โดยเฉพาะก่อนเข้า
- Banking
- Password manager
- ระบบบริษัท
㊴ วิธีใช้ Vision ให้ปลอดภัยขึ้น
ใช้หลัก 5 ข้อ
- แชร์เฉพาะ Window ที่จำเป็น
- ปิดข้อมูลลับก่อน
- ตรวจ Permission
- อย่าทำตามคำแนะนำเสี่ยงโดยไม่ตรวจ
- หยุดแชร์เมื่อเสร็จ
เป็นนิสัยที่ควรใช้ทุกครั้ง
㊵ คำถามที่พบบ่อย
Copilot Vision ดูหน้าจอได้ไหม
ได้ในประสบการณ์ที่รองรับและเมื่อผู้ใช้แชร์หรืออนุญาต
ถามแบบเรียลไทม์ได้ไหม
ได้ใน Session ที่รองรับการโต้ตอบต่อเนื่อง
ช่วยบอกว่าต้องกดตรงไหนได้ไหม
ได้
Copilot กดแทนเราไหม
Vision เน้นมองและให้คำแนะนำ ไม่ควรสมมติว่าสามารถควบคุมทุกอย่างแทนผู้ใช้
ปลอดภัยไหม
ควรแชร์เฉพาะข้อมูลที่จำเป็นและหยุด Sharing เมื่อใช้งานเสร็จ
㊶ ตัวอย่างการใช้งานจริง
สมมติว่าคุณหาเมนู Bluetooth ไม่เจอ
เปิด Settings แล้วเปิด Vision จากนั้นถามว่า
จากหน้าจอนี้ ฉันต้องกดตรงไหนเพื่อเปิด Bluetooth
เมื่อเข้าเมนูถัดไปถาม
ตอนนี้ต้องเปิดตัวเลือกไหน
นี่คือจุดเด่นของ Vision เพราะ AI สามารถช่วยอธิบายจากสิ่งที่ผู้ใช้กำลังเห็นแทนการเดาจากคำบรรยาย
㊷ สรุป
วิธีใช้ Copilot Vision ดูหน้าจอแล้วถามคำถามแบบเรียลไทม์ คือเปิด Copilot Vision เลือกแชร์หน้าจอหรือ Window ที่ต้องการ แล้วถามเกี่ยวกับสิ่งที่กำลังแสดงอยู่
สามารถใช้ช่วย
- หาเมนู
- ดู Error
- อ่านกราฟ
- อธิบายตาราง
- สอนใช้โปรแกรม
- ช่วยตั้งค่า
- วิเคราะห์หน้าเว็บ
- Troubleshooting
ตัวอย่างคำถามง่ายที่สุดคือ
“จากหน้าจอนี้ ฉันต้องกดตรงไหนต่อ”
comsiam แนะนำให้ใช้ Vision กับงานที่ต้องการคำแนะนำจากสิ่งที่เห็น แต่ควรตรวจทุกครั้งว่าหน้าจอไม่มี Password, OTP, ข้อมูลธนาคาร หรือข้อมูลลับ และเมื่อใช้เสร็จควรหยุด Screen sharing ทันที เพื่อไม่ให้แชร์ข้อมูลมากเกินความจำเป็น
