마이크로소프트, 윈도우 11 작업 표시줄에 코파일럿과 앱 창을 공유하는 기능 추가

마이크로소프트는 윈도우 11 작업 표시줄에 코파일럿(Copilot)을 완벽하게 통합했으며, 이 기능은 현재 사용자들에게 순차적으로 배포되고 있습니다.작업 표시줄의 앱 위에 마우스를 올리기만 하면 해당 앱의 창을 코파일럿과 공유할 수 있습니다.이를 통해 아웃룩에서 이메일에 답장하는 방법에 대한 제안을 받는 등 상호 작용적인 지원을 받을 수 있습니다.사소해 보일지 모르지만, 코파일럿 비전(Copilot Vision)의 기능은 매우 중요합니다.

최근 저는 인텔 루나 레이크 코파일럿+ PC에서 “코파일럿과 공유” 옵션을 발견했습니다.그런데 이 기능은 PC가 “AI” 시스템으로 분류되는지 여부와 관계없이 모든 사용자에게 제공될 예정입니다.즉, 일반적인 AMD 또는 인텔 시스템을 사용하는 사용자도 작업 표시줄에서 “코파일럿과 공유” 옵션을 볼 수 있게 되어 접근성이 더욱 향상될 것입니다.

“Copilot과 공유” 기능 이해하기

조사 결과, 작업 표시줄에서 열려 있는 모든 애플리케이션(예: VPN 서비스인 Cloudflare WARP)에 마우스를 올리면 “Copilot으로 공유” 기능이 나타나는 것을 확인했습니다.특히 Netflix와 같이 DRM으로 보호된 콘텐츠를 제공하는 애플리케이션에서도 이 기능이 표시되지만, 저작권 문제로 인해 일부 기능이 예상대로 작동하지 않을 수 있습니다.

Copilot은 애플리케이션 창을 공유하면 클라우드 기반 AI를 사용하여 표시된 콘텐츠를 분석하고 실행 가능한 인사이트를 제공합니다.예를 들어, 제가 Outlook에서 이메일을 열고 창을 공유했을 때 Copilot은 내용을 읽을 수는 있었지만 다른 이메일로 이동하거나 저를 대신하여 클릭을 수행할 수는 없었습니다.

Copilot은 사용자가 보는 것만 인식할 수 있기 때문에 그에 기반한 안내만 제공할 수 있다는 한계가 있습니다.이메일 답장 방법을 문의했을 때, Copilot은 존재하지 않는 “보내기” 버튼을 찾으라고 안내했는데, 이는 일종의 “환각”과 같은 한계를 보여주는 사례였습니다.하지만 답장 방법을 설명해 달라고 요청하자 Copilot의 반응은 개선되었습니다.가상 커서를 활성화하여 클릭해야 할 정확한 위치를 알려주었습니다.

다행히도 Copilot은 화면에 제안된 ‘보내기’ 버튼 대신 올바른 ‘답장’ 옵션을 강조 표시하여 오류를 수정했습니다.그 후 이메일을 삭제하는 방법을 물었을 때, Copilot은 적절한 삭제 방법을 정확하게 알려주었습니다.

마이크로소프트는 이 기능을 “안내형 지원”이라고 부릅니다.공식 문서에 따르면, Copilot Vision은 사용자를 효과적으로 지원하는 것을 목표로 하지만, DRM으로 보호되거나 민감한 콘텐츠에는 이 기능이 작동하지 않는다고 명시되어 있습니다.

“Copilot과 공유” 기능 통합의 작동 원리

Windows Latest의 보도에 따르면, 마이크로소프트는 통신 애플리케이션용으로 설계된 특정 Windows API를 활용하여 “Copilot으로 공유” 기능을 Windows 11 셸(작업 표시줄 및 공유 사용자 인터페이스 포함)에 통합했습니다.이 API를 통해 “공유 시작” 및 “공유 중지” 명령을 표시하고 선택한 WindowId를 해당 앱에 정확하게 전달할 수 있습니다.

이 기능은 주로 Microsoft Teams와 같은 애플리케이션을 위해 개발되었지만, Microsoft는 Copilot에도 적용할 수 있도록 범위를 넓히고 있습니다.중요한 점은 이 API는 일반 개발자가 사용할 수 없다는 것입니다.제한된 액세스 기능으로 분류되어 있으며, 일반적으로 Microsoft의 사전 승인이 있어야 액세스 및 구현이 가능합니다.

OpenAI와 같은 조직에서 이 기능을 복제하려면 Microsoft로부터 API 사용 승인을 받아야 합니다.현재 “Copilot과 공유” 기능이 Copilot 전용으로 구현되어 있고 Microsoft가 일부 파트너에게 액세스 권한을 제공하는 이유가 바로 이 독점성 때문입니다.

출처 및 이미지