Microsoft는 지원되는 모든 개인용 컴퓨터에 인공 지능 기능을 통합하도록 설계된 기능 세트를 도입하는 Windows 11 운영 체제에 대한 Fall Moments 업데이트를 발표했습니다. 업데이트는 사용자를 위한 보다 대화형 AI 환경을 만들기 위해 함께 작동하는 두 가지 기본 추가 기능인 Copilot Voice와 Copilot Vision에 중점을 둡니다. 첫 번째 기능인 코파일럿 보이스(Copilot Voice)는 사용자가 음성 명령과 자연스러운 대화를 통해 컴퓨터와 상호 작용할 수 있도록 해준다. 이는 다른 대화형 AI 도구와 유사한 상호 작용 방식이다. 두 번째 핵심 기능은 코파일럿 비전(Copilot Vision)으로, 컴퓨터가 카메라를 통해 주변 환경을 인식하고 해석할 수 있게 해줍니다. Copilot Vision은 또한 사용자 화면에 표시된 콘텐츠를 분석하여 상황을 이해하고 “보는” 내용에 따라 작업을 수행할 수 있습니다. 이번 업데이트의 일환으로 “Hey, Copilot”이라는 문구를 사용하여 AI 조수를 음성으로 활성화할 수 있습니다. 활성화되면 사용자는 질문을 하거나 정보를 검색하거나 보조자에게 특정 작업을 실행하도록 지시할 수 있습니다. Copilot Vision 기능을 통해 사용자는 데스크톱이나 개별 애플리케이션을 AI와 직접 공유할 수 있습니다. 그 대가로 Copilot은 화면 콘텐츠와 관련된 통찰력을 제공하거나 질문에 답할 수 있습니다. 이 업데이트에는 Microsoft가 하이라이트라고 부르는 안내 기능도 도입되었습니다. 이 도구는 특정 컴퓨터 작업에 익숙하지 않은 사용자를 지원하도록 설계되었습니다. 사용자는 화면의 특정 영역을 가리키고 도움을 요청함으로써 AI로부터 작업 완료 방법에 대한 단계별 지침을 받을 수 있습니다. Microsoft는 이 기능이 특히 기술에 대한 친숙도가 낮은 사용자에게 도움을 주기 위한 것이라고 밝혔습니다. 하이라이트 기능은 운영 체제 및 특정 응용 프로그램 내에서 사용할 수 있습니다. 이러한 기능과 함께 Copilot 입력 인터페이스가 재설계되어 Windows 11 작업 표시줄에 직접 통합되었습니다. 이번 변경의 목적은 AI 도우미와의 텍스트 기반 상호 작용에 더 쉽게 접근할 수 있도록 하는 것입니다. PowerPoint, Excel 및 Word가 포함된 Microsoft 365 응용 프로그램 제품군 내에서 Copilot Vision은 사용자 작업의 전체 컨텍스트를 이해하도록 향상되었습니다. 명시적인 사용자 권한을 통해 AI는 화면을 보고 프레젠테이션 디자인이나 스프레드시트 데이터 분석과 같은 작업에 대한 지원을 제공할 수 있습니다. Microsoft는 또한 지능형 에이전트가 사용자를 위해 다단계 작업을 수행할 수 있도록 하는 기능인 Copilot Actions를 확장하고 있습니다. 이전에는 호텔 예약이나 항공편 찾기와 같은 브라우저 기반 작업으로 제한되었던 이 기능이 이제 Windows 11 Insiders 프로그램으로 확장되고 있습니다. 확장을 통해 Copilot Actions는 로컬 운영 체제 내에서 작동하여 파일 탐색기에서 작업을 수행하거나 컴퓨터에서 파일을 검색할 수 있습니다. 사용자가 원하는 결과를 설명하면 AI가 이를 실행합니다. 이는 AI를 OneDrive와 같은 서비스 및 Google Gmail과 같은 외부 플랫폼과 연결하고 작업 결과를 다른 응용 프로그램으로 내보내는 기능을 갖춘 광범위한 Microsoft 이니셔티브와 연결됩니다. 또한 Microsoft는 작업 에이전트 도구인 Manus와의 협력을 발표했습니다. 이 파트너십을 통해 도구는 권한 수신에 따라 사용자의 로컬 파일에 대해 복잡한 작업을 수행할 수 있습니다. 이 협업의 기술적 기반은 AI 기능으로 향상된 Azure 서버를 활용하여 Microsoft와 상하이에 본사를 둔 제3자 회사인 Manus의 모회사가 구축한 공유 인프라입니다. 보안 및 개인 정보 보호 문제를 해결하기 위해 업데이트에는 “보안 펜스”라고 설명되는 새로운 제어 수준이 포함되어 있습니다. Microsoft는 사용자가 새로운 기능을 완전히 제어할 수 있으며 언제든지 Copilot Action을 비활성화하거나 일시 중단할 수 있다고 밝혔습니다. 또한 회사는 작업의 각 단계에서 제공되는 업데이트를 통해 사용자에게 AI 작업에 대한 완전한 투명성을 제공하기 위해 노력하고 있습니다. Microsoft는 최근의 “리콜 실패”에서 얻은 교훈을 참고하여 보안 및 개인 정보 보호 메커니즘을 개선하기 위해 지속적으로 포괄적인 점검을 수행하고 조직의 피드백을 수집하고 있다고 주장합니다.
Source: 마이크로소프트, 윈도우 11용 ‘Copilot Voice’와 ‘Copilot Vision’ 출시
