appshots คือฟีเจอร์ที่ให้เรากด Command สองที…
ที่มันต่างจากการแคปรูปคือมันไม่ได้เห็นแค่ภาพ แต่ดึงข้อความจากแอปได้ด้วย รวมถึงข้อความที่อยู่นอกจอที่ต้องเลื่อนลงไปดู ในกรณีที่แอปนั้นเปิดให้เข้าถึง เช่นเธรดยาวๆ ที่ถ้าแคปเป็นรูปจะได้แค่ท่อนเดียว
ตัวอย่างการใช้ที่เขายกมามีตั้งแต่สรุปเธรด Slack ยาวๆ ให้ อ่านฟอร์มที่เปิดค้างไว้แล้วกรอกให้ ดู API reference ที่เปิดอยู่แล้วเขียนฟีเจอร์เพิ่มในแอป สรุปธีมจากคอมเมนต์ที่ตอบมาใน X ดูว่า DM ไหนต้องตอบบ้าง เปลี่ยนโน้ตที่จดไว้เป็นสไลด์ ไปจนถึงช่วยตัดวิดีโอใน iMovie และเปลี่ยนสูตรอาหารที่เปิดอยู่เป็นลิสต์ของที่ต้องซื้อ
ผมว่าคุณค่าจริงของมันคือการตัดขั้นตอนอธิบายบริบททิ้ง เพราะเวลาเราถาม AI ส่วนใหญ่ที่เสียเวลาไม่ใช่คำถาม แต่คือการเล่าให้มันฟังว่าตอนนี้เรากำลังดูอะไรอยู่
ข้อจำกัดที่ควรรู้คือตอนนี้ใช้ได้เฉพาะแอป ChatGPT บน macOS ต้องเปิดสิทธิ์ให้แอปอ่านหน้าจอและ accessibility ก่อน แล้วบางแอปอย่าง Google Docs Gmail Sheets Slides อาจได้แค่ภาพที่มองเห็นเท่านั้น ไม่ได้ข้อความเต็ม
ที่สำคัญคือมันเห็นทุกอย่างที่อยู่บนหน้าต่างนั้นจริงๆ ก่อนกดสองทีเลยควรเช็คก่อนว่าจอที่เปิดอยู่ไม่มีข้อมูลลูกค้าหรือของที่ไม่ควรหลุดออกไปครับ
อยากใช้ AI กับงานจริงเป็นระบบ?
เรียน Claude Method — วิธีคิดและลงมือใช้ Claude/AI กับงานจริง ตั้งแต่วันแรก
📍 โพสต้นฉบับบน Facebook: AI กับ Peesamac