วิธีใช้ ChatGPT กับ Visual Intelligence บน iPhone 18 Pro แบบละเอียด

Visual Intelligence บน iPhone 18 Pro ช่วยให้ iPhone เข้าใจสิ่งที่อยู่ตรงหน้าผ่านกล้อง หรือสิ่งที่กำลังแสดงอยู่บนหน้าจอ แล้วนำข้อมูลนั้นไปค้นหา ถามคำถาม หรือทำ Action ต่อได้ เช่น สรุปข้อความ แปลภาษา เพิ่มกิจกรรมลง Calendar หรือถาม ChatGPT เกี่ยวกับสิ่งที่เห็นได้โดยตรง

เมื่อใช้ร่วมกับ ChatGPT ความสามารถจะกว้างขึ้น เพราะผู้ใช้สามารถถามต่อแบบภาษาธรรมชาติได้ เช่น “อุปกรณ์ชิ้นนี้คืออะไร”, “ช่วยอธิบายกราฟนี้”, “อาหารในภาพน่าจะมีส่วนผสมอะไร” หรือ “Error บนหน้าจอนี้หมายความว่าอย่างไร”

① Visual Intelligence คืออะไร

Visual Intelligence เป็นส่วนหนึ่งของ Apple Intelligence ที่ใช้ข้อมูลจากสิ่งที่กล้องเห็นหรือสิ่งที่อยู่บนหน้าจอเพื่อช่วยผู้ใช้ค้นหา ถามคำถาม และดำเนินการต่อ

บน iOS 27 ความสามารถนี้ทำงานร่วมกับ Siri AI และสามารถใช้กับข้อมูลบนหน้าจอได้ด้วย

② ChatGPT เข้ามาช่วย Visual Intelligence อย่างไร

Visual Intelligence สามารถส่งบริบทที่เกี่ยวข้องไปให้ ChatGPT เพื่อช่วยอธิบาย วิเคราะห์ หรือให้ข้อมูลเพิ่มเติม

ตัวอย่าง

“Ask ChatGPT what this object is.”

หรือ

“Ask ChatGPT to explain this diagram.”

เหมาะกับสิ่งที่ต้องการคำอธิบายมากกว่าการค้นหาภาพที่คล้ายกันอย่างเดียว

③ ต้องเปิดอะไรบ้างก่อนใช้งาน

ควรตรวจว่า

  • Apple Intelligence เปิดอยู่
  • Siri เปิดอยู่
  • ChatGPT Extension เปิดอยู่
  • iOS เป็นเวอร์ชันที่รองรับ
  • ภาษาและภูมิภาครองรับ
  • อินเทอร์เน็ตใช้งานได้

Apple ระบุว่า ChatGPT Extension ใช้งานได้เฉพาะภูมิภาคที่บริการ ChatGPT เปิดให้บริการ

④ วิธีใช้ Visual Intelligence จากหน้าจอ

บน iPhone สามารถเปิด Visual Intelligence สำหรับสิ่งที่อยู่บนหน้าจอด้วยการกดปุ่มด้านข้างและปุ่มเพิ่มเสียงพร้อมกัน เหมือนการจับภาพหน้าจอ

หลังจากนั้นเครื่องมือ Visual Intelligence ที่เกี่ยวข้องจะปรากฏขึ้นตามเนื้อหาที่ตรวจพบ

⑤ ถ่าย Screenshot แล้วถาม ChatGPT

หลังเปิด Visual Intelligence จากหน้าจอ สามารถเลือกถาม ChatGPT เกี่ยวกับสิ่งที่กำลังเห็นได้

ตัวอย่าง

“ข้อความนี้หมายความว่าอะไร”

“ช่วยอธิบาย Error นี้”

“กราฟนี้บอกอะไร”

เหมาะมากกับหน้าจอที่อธิบายด้วยคำพูดยาก

⑥ เลือกเฉพาะวัตถุที่ต้องการถามได้ไหม

ได้

Visual Intelligence รองรับการ Highlight วัตถุเฉพาะบนหน้าจอ เพื่อค้นหาหรือถามเกี่ยวกับสิ่งนั้นโดยไม่ต้องใช้ทั้งภาพ

เหมาะกับ Screenshot ที่มีหลายสิ่งอยู่พร้อมกัน

⑦ ใช้กับสิ่งที่กล้องเห็น

Visual Intelligence ยังสามารถช่วยเรียนรู้เกี่ยวกับวัตถุหรือสถานที่ตรงหน้าผ่านกล้องได้

ใน iPhone 18 Pro มี Siri Mode ใน Camera ซึ่งสามารถใช้ Visual Intelligence เพื่อค้นหา ถามคำถาม และทำ Action จากสิ่งที่อยู่รอบตัวได้

⑧ ใช้ ChatGPT ระบุวัตถุ

ตัวอย่าง

หันกล้องไปที่อุปกรณ์แล้วถามว่า

“Ask ChatGPT what this device is.”

หรือ

“อุปกรณ์ชิ้นนี้ใช้ทำอะไร”

เหมาะกับอุปกรณ์ที่ไม่รู้ชื่อหรือหน้าที่

⑨ ใช้กับอุปกรณ์ Network

ตัวอย่างเช่น ถ่าย

  • Router
  • Switch
  • Access Point
  • RJ45
  • Patch Panel
  • Adapter

แล้วถามว่า

“พอร์ตนี้คืออะไร”

หรือ

“อุปกรณ์นี้ใช้กับระบบอะไร”

ช่วยวิเคราะห์เบื้องต้นได้เร็ว

⑩ ใช้กับ Error บนอุปกรณ์

หากหน้าจอ Router, Computer หรืออุปกรณ์อื่นแสดง Error

สามารถถ่ายภาพแล้วถามว่า

“Error นี้หมายความว่าอะไร”

หรือ

“ช่วยบอกวิธีแก้ทีละขั้นตอน”

วิธีนี้ช่วยลดการพิมพ์ Error Code เอง

⑪ ใช้กับเอกสารบนหน้าจอ

เปิดเอกสารแล้วใช้ Visual Intelligence จาก Screenshot

จากนั้นถาม ChatGPT ว่า

“ช่วยสรุปหน้านี้”

หรือ

“เอกสารนี้พูดถึงอะไร”

เหมาะกับ PDF รายงาน และเอกสารที่มีข้อความจำนวนมาก

⑫ ใช้ ChatGPT อธิบายกราฟ

หากเห็นกราฟในเว็บไซต์หรือเอกสาร สามารถถามว่า

“ช่วยอธิบายแนวโน้มของกราฟนี้”

“อะไรเพิ่มขึ้นมากที่สุด”

“สรุปให้คนทั่วไปเข้าใจ”

แต่ตัวเลขสำคัญควรตรวจจากต้นฉบับอีกครั้ง

⑬ ใช้กับตารางข้อมูล

ตัวอย่าง

“เปรียบเทียบข้อมูลในแต่ละคอลัมน์”

“ตัวเลขไหนสูงที่สุด”

“สรุปตารางนี้เป็น 5 ข้อ”

ช่วยลดเวลาการอ่านตารางขนาดใหญ่

⑭ ใช้กับสินค้า

Visual Intelligence สามารถช่วยค้นหาสินค้าที่คล้ายกับสิ่งที่เห็นบนหน้าจอ และยังสามารถถาม ChatGPT เพิ่มเกี่ยวกับวัตถุได้

ตัวอย่าง

“สินค้านี้ใช้ทำอะไร”

“ต่างจากรุ่นทั่วไปอย่างไร”

⑮ ค้นหาสินค้าที่คล้ายกัน

หากเห็นสินค้าในรูปหรือเว็บไซต์ สามารถใช้ Visual Intelligence เพื่อค้นหารูปหรือสินค้าที่คล้ายกันบนบริการที่รองรับได้

Apple ระบุว่าสามารถใช้การค้นหาภาพผ่าน Google และแอปภายนอกบางรายได้

⑯ ใช้กับอาหาร

สามารถถามเกี่ยวกับอาหารที่อยู่ตรงหน้า เช่น

“อาหารนี้คืออะไร”

“มีส่วนผสมอะไรบ้าง”

“โภชนาการโดยประมาณเป็นอย่างไร”

Apple ระบุว่า Visual Intelligence รุ่นใหม่สามารถให้ข้อมูลโภชนาการของอาหารบางประเภทได้ด้วย

⑰ ใช้กับเมนูอาหาร

ถ่ายเมนูแล้วถามว่า

“ช่วยแปลเมนูนี้”

“เมนูไหนเป็นอาหารเผ็ด”

“อธิบายแต่ละเมนูให้หน่อย”

สำหรับอาการแพ้อาหาร ควรสอบถามร้านโดยตรงก่อนรับประทาน

⑱ ใช้กับป้ายภาษาต่างประเทศ

หันกล้องหรือใช้ Screenshot แล้วถามว่า

“ช่วยแปลข้อความนี้”

Visual Intelligence สามารถทำงานเกี่ยวกับข้อความ เช่น แปล สรุป หรืออ่านออกเสียงได้ในฟีเจอร์ที่รองรับ

⑲ สรุปข้อความจากภาพ

ถ้าภาพมีข้อความยาว สามารถใช้คำสั่งว่า

“สรุปข้อความในภาพนี้เป็น 5 ข้อ”

เหมาะกับโปสเตอร์ ประกาศ หรือ Screenshot จากเว็บไซต์

⑳ อ่านข้อความออกเสียงได้ไหม

Visual Intelligence รองรับ Action กับข้อความบนหน้าจอ รวมถึงการอ่านข้อความออกเสียงในฟีเจอร์ที่รองรับ

เหมาะกับข้อความยาวหรือผู้ที่ต้องการฟังแทนอ่าน

㉑ เพิ่มกิจกรรมลง Calendar

หาก Visual Intelligence พบข้อมูลกิจกรรม เช่น

  • ชื่องาน
  • วันที่
  • เวลา
  • สถานที่

สามารถเสนอเพิ่มกิจกรรมลง Calendar พร้อมกรอกข้อมูลสำคัญให้อัตโนมัติ

㉒ ใช้กับโปสเตอร์งาน

ตัวอย่าง

ถ่ายโปสเตอร์คอนเสิร์ตหรือสัมมนา

จากนั้นเลือกเพิ่ม Event ลง Calendar

ระบบสามารถดึงวัน เวลา และสถานที่จากข้อมูลในภาพ

ควรตรวจความถูกต้องก่อนบันทึก

㉓ ใช้กับนามบัตร

ถ่ายนามบัตรแล้วสามารถถาม ChatGPT ว่า

“ช่วยสรุปข้อมูลติดต่อในภาพนี้”

จากนั้นนำข้อมูลไปใช้ต่อใน Contacts ด้วยเครื่องมือที่รองรับ

ควรตรวจชื่อ อีเมล และเบอร์โทรก่อนบันทึก

㉔ ใช้กับใบเสร็จ

ตัวอย่าง

“ยอดรวมเท่าไร”

“มีรายการอะไรบ้าง”

“ช่วยแบ่งค่าอาหาร 4 คน”

Visual Intelligence รุ่นใหม่มี Smart Actions ที่ช่วยกับงานอย่างการแบ่งบิลจากเช็คได้ด้วย

㉕ ใช้ ChatGPT คำนวณจากข้อมูลในภาพ

หากใบเสร็จหรือ Screenshot มีตัวเลข สามารถถาม ChatGPT ให้ช่วยจัดกลุ่มหรืออธิบายได้

แต่ควรตรวจตัวเลขทุกตัวก่อน เพราะภาพเบลออาจทำให้อ่านตัวเลขผิด

㉖ ใช้กับรูปต้นไม้หรือสัตว์

สามารถถามว่า

“นี่คือต้นอะไร”

“สัตว์นี้คือชนิดไหน”

Visual Intelligence รองรับการระบุวัตถุ เช่น พืชและสัตว์ในบริบทที่รองรับ

แต่ถ้าเกี่ยวกับพิษหรือความปลอดภัย ไม่ควรใช้ AI เป็นแหล่งยืนยันเพียงอย่างเดียว

㉗ ใช้กับสิ่งของที่ไม่รู้จัก

ลองถามว่า

“ของชิ้นนี้คืออะไร”

“ใช้ทำอะไร”

“มีวิธีใช้อย่างไร”

เหมาะกับเครื่องมือ อุปกรณ์ และของใช้ที่ไม่คุ้นเคย

㉘ ใช้กับงานซ่อมได้ไหม

สามารถช่วยดูภาพและอธิบายเบื้องต้น เช่น

“สายเส้นนี้น่าจะเสียบตรงไหน”

“พอร์ตนี้ใช้ทำอะไร”

แต่ไม่ควรใช้ AI แทนคู่มือหรือช่างผู้เชี่ยวชาญในงานไฟฟ้าและงานที่มีความเสี่ยง

㉙ ใช้กับ Screenshot การตั้งค่า iPhone

เปิดหน้าการตั้งค่าที่ไม่เข้าใจแล้วใช้ Visual Intelligence

จากนั้นถามว่า

“ต้องกดตรงไหนต่อ”

หรือ

“ตัวเลือกนี้ทำอะไร”

เหมาะกับผู้ใช้มือใหม่มาก

㉚ ใช้กับแอปอื่นได้ไหม

Visual Intelligence บนหน้าจอสามารถทำงานกับเนื้อหาที่ผู้ใช้กำลังดูในแอปต่าง ๆ ได้ในระดับระบบ โดย Apple ระบุว่าสามารถใช้ค้นหาและดำเนินการกับสิ่งที่อยู่บนหน้าจอข้ามแอปได้

แต่ Action ที่มีให้จะแตกต่างตามประเภทเนื้อหาและแอป

㉛ ใช้ Siri AI ถามสิ่งที่อยู่บนหน้าจอ

หากเปิด Siri AI Beta แล้ว สามารถเรียก Siri และถามเกี่ยวกับสิ่งที่อยู่บนหน้าจอโดยตรง

Apple ยกตัวอย่างการถามเกี่ยวกับ Diagram ใน Notes หรือเปรียบเทียบรายงานสองไฟล์ใน Files

㉜ Visual Intelligence กับ Siri AI ต่างกันอย่างไร

Visual Intelligence เน้นการทำความเข้าใจสิ่งที่เห็น

Siri AI เน้นการสนทนา การใช้บริบท และการทำ Action

เมื่อทำงานร่วมกัน ผู้ใช้จึงสามารถ

“มองเห็น > เข้าใจ > ถามต่อ > ทำงานต่อ”

ได้ใน Workflow เดียว

㉝ Visual Intelligence กับ ChatGPT ต่างกันอย่างไร

Visual Intelligence เป็นระบบของ Apple สำหรับรับรู้และจัดการสิ่งที่อยู่ในภาพหรือหน้าจอ

ChatGPT เป็น AI ที่สามารถช่วยอธิบาย วิเคราะห์ และสนทนาต่อจากข้อมูลที่ถูกส่งมา

จึงเป็นความสามารถที่เสริมกันมากกว่าทดแทนกัน

㉞ จำเป็นต้องส่งทุกอย่างให้ ChatGPT ไหม

ไม่

หลายงานสามารถใช้ Visual Intelligence หรือ Apple Intelligence โดยไม่ต้องเรียก ChatGPT

ควรเลือก ChatGPT เมื่อจำเป็นต้อง

  • อธิบายลึกขึ้น
  • วิเคราะห์
  • ระดมความคิด
  • ถามต่อหลายประเด็น

㉟ ระบบถามก่อนส่งไป ChatGPT หรือไม่

ในการใช้งานที่เกี่ยวข้องกับ ChatGPT ผู้ใช้ยังมีการควบคุมการส่งข้อมูล และในบางกรณีระบบจะขอการยืนยันก่อนส่งคำขอ รูป หรือไฟล์

จึงควรอ่านหน้าจอยืนยันทุกครั้งก่อนดำเนินการ

㊱ ระวังข้อมูลส่วนตัวในภาพ

ก่อนส่งรูปให้ ChatGPT ควรตรวจว่ามี

  • ชื่อและที่อยู่
  • เลขบัญชี
  • เอกสารลูกค้า
  • QR Code สำหรับเข้าสู่ระบบ
  • ข้อมูลธุรกิจลับ
  • ข้อมูลส่วนตัวอื่น

อยู่หรือไม่

ถ้าไม่จำเป็นควรครอปออก

㊲ ห้ามส่ง OTP หรือ Password

ถ้าหน้าจอมี

  • OTP
  • Password
  • PIN
  • Recovery Code
  • Secret Key

ควรปิดหรือครอปออกก่อนใช้ Visual Intelligence กับบริการภายนอก

㊳ ถ้าภาพมีหลายสิ่งควรทำอย่างไร

ใช้การ Highlight เลือกเฉพาะวัตถุที่สนใจ

หรือ Crop Screenshot ให้เหลือเฉพาะส่วนสำคัญ

ช่วยลดความกำกวมและเพิ่มความแม่นยำ

㊴ รูปไม่ชัดมีผลหรือไม่

มีผลมาก

ควร

  • เช็ดเลนส์
  • ใช้แสงเพียงพอ
  • ถ่ายให้ตรง
  • หลีกเลี่ยงแสงสะท้อน
  • เข้าใกล้ข้อความ

ยิ่งข้อมูลภาพชัด AI ยิ่งมีโอกาสเข้าใจถูกต้อง

㊵ ChatGPT อาจวิเคราะห์ผิดได้ไหม

ได้

อาจ

  • ระบุวัตถุผิด
  • อ่านตัวเลขผิด
  • อ่านตัวหนังสือผิด
  • เดารุ่นสินค้าผิด
  • ตีความภาพผิด

จึงควรใช้คำตอบเป็นตัวช่วย ไม่ใช่ข้อยืนยันสุดท้ายในเรื่องสำคัญ

㊶ สูตรถาม ChatGPT จาก Visual Intelligence

ใช้สูตร

ดูอะไร + ต้องการรู้อะไร + ต้องการคำตอบรูปแบบไหน

ตัวอย่าง

“ดูฉลากบนอุปกรณ์นี้ แล้วบอกชื่อรุ่น แรงดันไฟ และการใช้งานเป็น Bullet Points”

ตรงกว่าพูดเพียง

“นี่คืออะไร”

㊷ ตัวอย่างคำสั่งที่ควรลอง

“Ask ChatGPT what this is.”

“Explain this diagram.”

“Summarize the text on this screen.”

“Translate this into Thai.”

“What does this error mean?”

“Compare these two items.”

“What can I cook with these ingredients?”

“Explain this for a beginner.”

㊸ Workflow สำหรับแก้ Error

  1. เปิด Error บนหน้าจอ
  2. เปิด Visual Intelligence
  3. Highlight Error
  4. ถาม ChatGPT ว่าหมายความว่าอะไร
  5. ขอวิธีแก้ทีละขั้นตอน
  6. ตรวจวิธีกับคู่มือของอุปกรณ์หากเป็นงานสำคัญ

วิธีนี้เหมาะกับการแก้ปัญหาไอที

㊹ Workflow สำหรับสินค้า

  1. เปิดรูปสินค้า
  2. เปิด Visual Intelligence
  3. เลือกวัตถุ
  4. ค้นหารูปที่คล้าย
  5. ถาม ChatGPT ว่าสินค้าประเภทนี้ใช้ทำอะไร
  6. ตรวจรุ่นจริงจากฉลาก

ช่วยทั้งการค้นหาและการเรียนรู้จากภาพ

㊺ Workflow สำหรับเอกสาร

  1. เปิดเอกสาร
  2. เปิด Visual Intelligence
  3. เลือกข้อความหรือหน้า
  4. ขอให้สรุป
  5. ถาม ChatGPT เพิ่มเฉพาะประเด็นที่ไม่เข้าใจ
  6. กลับไปตรวจต้นฉบับก่อนนำข้อมูลสำคัญไปใช้

㊻ Visual Intelligence ใช้งานไม่ได้ทำอย่างไร

ตรวจ

  • Apple Intelligence เปิดหรือไม่
  • iOS เป็นเวอร์ชันล่าสุดหรือไม่
  • ภาษาและภูมิภาครองรับหรือไม่
  • Siri AI พร้อมหรือไม่
  • ChatGPT Extension เปิดหรือไม่
  • Internet ใช้งานได้หรือไม่

Apple Intelligence บน iOS 27 จะเปิดใช้งานโดยอัตโนมัติบนอุปกรณ์ที่เข้าเกณฑ์ในภาษาและภูมิภาคที่รองรับ

㊼ สรุป วิธีใช้ ChatGPT กับ Visual Intelligence บน iPhone 18 Pro

Visual Intelligence ทำให้ iPhone 18 Pro สามารถเข้าใจสิ่งที่อยู่ตรงหน้าหรือสิ่งที่กำลังแสดงบนหน้าจอ จากนั้นผู้ใช้สามารถค้นหา ถามคำถาม หรือทำ Action ต่อได้

เมื่อใช้ร่วมกับ ChatGPT สามารถนำไปใช้กับ

  • รูปภาพ
  • Screenshot
  • Error
  • เอกสาร
  • ตาราง
  • กราฟ
  • สินค้า
  • อาหาร
  • ป้าย
  • อุปกรณ์
  • ข้อความบนหน้าจอ

ได้อย่างยืดหยุ่น

วิธีใช้งานที่มีประสิทธิภาพคือเลือกเฉพาะสิ่งที่ต้องการถาม แล้วระบุให้ชัดว่าอยากให้ ChatGPT “อธิบาย”, “สรุป”, “เปรียบเทียบ”, “แปล” หรือ “แนะนำขั้นตอนต่อไป”

สำหรับข้อมูลสำคัญ ควรตรวจจากต้นฉบับเสมอ และก่อนส่งรูปหรือ Screenshot ไปยัง ChatGPT ควรลบหรือปิดข้อมูลลับที่ไม่จำเป็นออกก่อน