เร็วๆ นี้ ChatGPT จะสามารถมองเห็นทุกอย่างที่เกิดขึ้นบนหน้าจอของคุณได้

เมื่อวานนี้ในการอัปเดตฤดูใบไม้ผลิ OpenAI ได้เปิดตัวแอป Mac ดั้งเดิมสำหรับChatGPTและยังเปิดตัวรุ่นเรือธงใหม่ นั่นคือGPT-4oอีก ด้วย การสาธิตดังกล่าวสร้างความตื่นเต้นเป็นอย่างมาก โดยเฉพาะในกลุ่มผู้ใช้ Apple ที่กำลังรอคอยความร่วมมือระหว่าง Apple และ OpenAI ที่คาดว่าจะปรากฏบน iOS 18

สิ่งสำคัญอย่างหนึ่งในวิดีโอเต็มรูปแบบของงานนี้คือมีการสาธิตฟีเจอร์แอป ChatGPT ที่กำลังจะเปิดตัว แต่ไม่ได้มีการเปิดเผยรายละเอียดที่แท้จริง ความสามารถของ ChatGPT คือการดูทุกสิ่งที่เกิดขึ้นบนหน้าจออุปกรณ์ของผู้ใช้

คุณพร้อมที่จะไว้วางใจ ChatGPT และแบ่งปันเนื้อหาหน้าจอของคุณหรือยัง?

เมื่อเปิดใช้งาน แอป ChatGPT Mac จะรองรับการจับภาพหน้าจอด้วยตนเองหรืออัปโหลดไฟล์เพื่อค้นหาไฟล์นั้นใน ChatGPT แต่ในอนาคต ตามที่เห็นในวิดีโอด้านล่าง คุณจะสามารถคลิกปุ่มที่ให้แอปเข้าถึงทุกสิ่งทุกอย่างบนหน้าจอของคุณได้

ดูเหมือนว่าคุณสมบัตินี้จะไม่จำกัดอยู่แค่ Mac เท่านั้น เพราะแอป iOS และ iPadOS ได้สาธิตเทคโนโลยีเดียวกันในตัวอย่างด้านล่างแล้ว

ไม่ทราบว่าฟีเจอร์การดูหน้าจอเหล่านี้จะพร้อมใช้งานใน ChatGPT เมื่อใด อย่างไรก็ตามการเปลี่ยนแปลงนี้อาจส่งผลให้เกิดประสบการณ์แบบโต้ตอบและราบรื่นยิ่งขึ้น Apple ยังจัดเตรียม API สำหรับให้นักพัฒนาเข้าถึงเนื้อหาบนหน้าจออุปกรณ์อีกด้วย โดยต้องได้รับความยินยอมจากผู้ใช้ก่อน ดังนั้น OpenAI จึงไม่ทำอะไรชั่วร้ายด้วยการเพิ่มฟีเจอร์เหล่านี้

การเข้าถึง ChatGPT เพื่อดูเนื้อหาทั้งหมดบนหน้าจอของคุณอาจเป็นเรื่องน่ากลัวเล็กน้อย แต่ก็อาจมีประโยชน์อย่างยิ่งเช่นกัน

น่าจะมีการจำกัดเวลาในการเข้าถึงหน้าจอของผู้ใช้ผ่านแอป โดยต้องกดปุ่มทุกครั้งที่มีการอนุญาตให้เข้าถึง แต่ในทางทฤษฎี มันสมเหตุสมผลที่วันหนึ่งเครื่องมือ AI จะมีสิทธิ์เข้าถึงทุกสิ่งที่คุณเห็นได้อย่างถาวร ช่วยให้การช่วยเหลือราบรื่นยิ่งขึ้นโดยมีความยุ่งยากน้อยที่สุด

ผู้ช่วย AI ที่สามารถเห็นทุกสิ่งที่คุณเห็นบนอุปกรณ์ของคุณดูเหมือนจะเป็นสิ่งที่ Apple ตั้งเป้าไว้ที่ระดับระบบทั่วทั้งแพลตฟอร์ม หาก Siri ได้รับการเพิ่มประสิทธิภาพ AI ด้วยการผสานรวมระบบอย่างล้ำลึก ก็อาจพิสูจน์ให้เห็นได้ว่าเป็นสินทรัพย์ที่แท้จริงสำหรับ ผู้ใช้ iOS 18ขึ้นไป