ขณะนี้ Copilot ได้รับการผสานรวมอย่างลึกซึ้งเข้ากับทาสก์บาร์ของ Windows 11 ตามที่เราทุกคนคาดหวัง และตอนนี้กำลังเปิดตัว หากคุณวางเมาส์เหนือแอปบนทาสก์บาร์ของ Windows 11 ตอนนี้คุณสามารถแชร์หน้าต่างแอปของคุณกับ Copilot และเริ่มถามคำถาม เช่น วิธีตอบกลับอีเมลหากคุณอยู่ใน Outlook ถึงแม้จะฟังดูไร้สาระ แต่นี่คือจุดรวมของ Copilot Vision
ฉันเห็นฟีเจอร์ “แชร์กับ Copilot” บนพีซี Intel Lunar Lake Copilot+ ของฉัน แต่ฟีเจอร์นี้เปิดให้ทุกคนใช้งานได้ และไม่ต้องใช้พีซี “AI” ตัวใดตัวหนึ่ง ซึ่งหมายความว่า หากคุณมีพีซีที่ไม่ใช่ AI ทั่วไป รวมถึง AMD หรือ Intel คุณจะยังคงเห็น “Share with Copilot” บนทาสก์บาร์ของคุณ และนั่นก็สมเหตุสมผลดี (มีข้อมูลเพิ่มเติมในภายหลัง)
“แชร์กับ Copilot” บนทาสก์บาร์ทำงานอย่างไร
ในการทดสอบของเรา Windows Insight สังเกตว่า “แชร์กับ Copilot” ปรากฏขึ้นเมื่อฉันวางเมาส์เหนือแอปที่เปิดอยู่บนทาสก์บาร์ และมันจะปรากฏขึ้นในหน้าต่างแอพใด ๆ รวมถึง Cloudflare WARP ซึ่งเป็นบริการที่คล้ายกับ VPN ฉันยังพบการสลับสำหรับ Netflix ซึ่งมีเนื้อหาที่ป้องกันด้วย DRM แต่มันทำงานไม่ถูกต้องด้วยเหตุผลที่ชัดเจน
เมื่อคุณแชร์หน้าต่างแอพใดๆ Copilot จะใช้ AI บนคลาวด์เพื่อวิเคราะห์เนื้อหาของแอพและให้ข้อมูลเชิงลึก ตัวอย่างเช่น ฉันเปิดอีเมล Outlook ในพื้นหลังและแชร์หน้าต่างกับ Copilot Copilot เริ่มอ่านอีเมลของฉันซึ่งเปิดอยู่แล้ว แต่ไม่สามารถเปิดอีเมลอื่น ย้ายไปรอบๆ หรือคลิกที่ใดก็ได้
Copilot สามารถมองเห็นได้เฉพาะสิ่งที่คุณเห็นเท่านั้น และสามารถนำทางคุณได้ ตัวอย่างเช่น ฉันถาม Copilot ว่าฉันจะตอบอีเมลได้อย่างไร และมันบอกให้มองหาปุ่ม “ส่ง” ซึ่งไม่มีด้วยซ้ำ (Copilot มีอาการประสาทหลอนในขั้นตอนนี้) แต่ฉันขอให้ Copilot แสดงให้ฉันเห็นว่าฉันคลิก “อย่างไร” และ “ที่ไหน”
Copilot เปิดใช้งาน “เคอร์เซอร์” ของตัวเอง ซึ่งปรากฏบนหน้าจอ และจากนั้นก็ไฮไลต์ตำแหน่งที่ฉันต้องคลิก โชคดีที่ Copilot วิเคราะห์หน้าจอของฉันได้อย่างถูกต้องและบอกให้ฉันใช้ปุ่ม ‘ตอบกลับ’ ไม่ใช่ ‘ส่ง’ ซึ่งไม่มีอยู่บนหน้าจอ แต่แนะนำให้ใช้ครั้งล่าสุด
ต่อไป ฉันถาม Copilot ถึงวิธีการลบอีเมล และระบบก็เน้นตัวเลือกที่ถูกต้องอีกครั้ง
Microsoft เรียกมันว่า “ความช่วยเหลือแบบมีคำแนะนำ” และเอกสารสนับสนุนฉบับหนึ่งยืนยันว่า Copilot Vision ควรจะช่วยเหลือคุณ แต่มันจะใช้งานไม่ได้กับเนื้อหาที่มีการป้องกันด้วย DRM หรือเนื้อหาละเอียดอ่อน
Microsoft เพิ่ม “Share with Copilot” ให้กับหน้าต่างแอปทั้งหมดบนทาสก์บาร์อย่างไร
Windows Insight พบว่า Microsoft กำลังใช้ Windows API ที่ช่วยให้แอปการสื่อสารเสียบเข้ากับ Shell ของ Windows 11 (เช่น แถบงานหรือ UI การแชร์) เพื่อให้ Windows สามารถแสดงคำสั่งเริ่มการแชร์/ หยุดการแชร์ และส่งแอปตาม WindowId ที่ผู้ใช้เลือก
API นี้ควรจะถูกใช้โดยแอปอย่าง Teams แต่ Microsoft กำลังพยายามอย่างเต็มที่และใช้สำหรับ Copilot ไม่ใช่ API แบบเปิดที่นักพัฒนาสามารถใช้ได้
API นี้ถูกทำเครื่องหมายว่าเป็นคุณลักษณะการเข้าถึงแบบจำกัด ซึ่งโดยทั่วไปหมายความว่า Microsoft จะต้องอนุมัติคุณและมอบโทเค็นการปลดล็อคให้กับคุณก่อนจึงจะสามารถใช้งานได้ในผลิตภัณฑ์จริง
หาก OpenAI ต้องการจำลองพฤติกรรมเดียวกัน จะต้องติดต่อกับ Microsoft และรอการอนุมัติ
นั่นเป็นเหตุผลที่เราเห็นเฉพาะ Copilot เท่านั้นที่ใช้งาน เนื่องจาก Microsoft สามารถให้สิทธิ์การเข้าถึงแก่ตนเอง (หรือคู่ค้าที่ได้รับการคัดเลือก) และ Copilot ก็สามารถลงทะเบียนในระหว่างเซสชันเป็น “แหล่งคำสั่งการแชร์ได้”
บ้าน
แบ่งปัน
จดหมายข่าว
จดหมายข่าว WL
จดหมายข่าว WL!
ก้าวล้ำหน้าด้วยการอัปเดต Windows, IT และ AI ล่าสุด ได้รับความไว้วางใจจากสมาชิกมากกว่า 50,000 ราย
ชื่อ
อีเมล
เข้าร่วมฟรี
*️⃣ ลิงค์ที่มา:
-
บ้าน
-
จดหมายข่าว