기업용 Copilot AI 기반 제품의 업데이트를 발표 한 주 후에, Microsoft는 모든 사용자를 위한 새로운 Copilot 기능을 Windows에 출시하고, 화면에 있는 내용에 대한 질문을 이해하고 대답할 수 있는 도구를 포함 합니다.
오늘 iOS, Android, Windows 및 웹을 위한 새로운 Copilot 애플리케이션이 롤아웃되며, 모두 Microsoft가 이를 '더 따뜻하고 독특한' 스타일로 설명하는 Copilot를 갖게 됩니다. Microsoft는 또한 WhatsApp에 챗봇을 가져와 사용자들이 Meta의 메시징 플랫폼에서 다른 봇들과 경험하는 것과 유사하게 Copilot와 DM을 통해 채팅 할 수 있도록 합니다.
Copilot 비전
Copilot Vision은 PC에서보고있는 것에 대한 보기를 갖습니다 - 더 구체적으로 말하면 Microsoft Edge에서 방문하는 사이트에 대한 렌즈를 갖습니다. 새로운 Copilot Labs에 비밀리에 유지되는 Copilot Pro 전용 옵트인 프로그램을 통해 쉽게 사용할 수있는 Copilot Vision은 웹페이지의 텍스트와 이미지를 분석하고 그에 대한 질문 (예 : '이 사진에 나오는 음식의 레시피는 무엇입니까?') 에 대답 할 수 있습니다.
Edge 주소 표시 줄에 '@copilot'을 입력하여 호출 할 수있는 Vision은 정확히 기술적인 기적은 아닙니다. Google은 Android에서 유사한 검색 기술을 제공하고 최근에는 이 기술의 조각들을 Chrome에도 가져 왔습니다.
그러나 Microsoft는 Copilot Vision이 과거의 화면 분석 기능보다 강력하고 개인 정보를 더 잘 인식한다고 제안합니다.
'Copilot Vision은 다음 단계를 제안 할 수 있고, 질문에 대답하고, 원하는 작업을 탐색하고, 작업을 도와줄 수 있으며, 당신이 자연 언어로 그것에게 말 할 때 모든 일을 수행 할 수 있습니다.'Microsoft는 TechCrunch와 공유 한 블로그 게시물에서 이렇게 쓰고 있습니다. '새 아파트를 가구로 가구하려고 할 때를 생각해보세요. Copilot Vision은 가구를 찾아주고 적절한 색 팔레트를 찾고 어떤 러그에서 담요까지의 옵션을 고민하고 보고있는 우리의 것을 배열하는 방법을 제안해 줄 수 있습니다.'
분명히 AI 개인 정보 침해로 인한 부정적인 보도를 피하려는 마음이 큰 Microsoft는 Copilot Vision이 대화 후 즉시 데이터를 삭제하도록 설계되었음을 강조합니다. 처리 된 오디오, 이미지 또는 텍스트는 저장되거나 모델을 교육하는 데 사용되지 않는다고 회사는 주장합니다 - 적어도이 미리보기 버전에서는 그렇습니다.
Copilot Vision은 해석할 수있는 웹 사이트의 유형에 제한이 있습니다. 현재 Microsoft는 유료 및 '민감한' 콘텐츠에서 작동하는 기능을 차단하여 Vision을 '인기있는' 웹 속성의 사전 승인 목록으로 제한하고 있습니다.
정확히 '민감한' 콘텐츠가 무엇을 의미합니까? 포르노? 폭력? 이 단계에서 Microsoft는 말하지 않았습니다.
AI 도구를 사용하여 유료 담벼락을 우회하는 비난이 최근 Microsoft에게 법적인 문제를 일으켰습니다. 현재 진행중인 소송에서 뉴욕 타임스는 Microsoft가 Bing의 Copilot 챗봇을 통해 뉴욕 타임스 기사를 제공하여 사용자가 유료 이야기의 맥락 (또는 거의 맥락이없는)의 스니펫을 얻도록 허용했다고 주장했습니다. 특정 방식으로 충족시키면 오히려 절로, 또는 거의 절로 제공하게됩니다.
Microsoft는 Copilot Vision이 현재 미국 전용이라고 말했지만 사이트가 AI 교육을위한 데이터 스크래핑을 금지하는 규칙과 같이 사이트의 '기계가 읽을 수있는 AI'에 대한 제어를 존중할 것입니다. 사용되는 정확한 제어가 무엇인지 회사는 분명히하지 않았습니다. 사용 중인 여러 가지가 있습니다. 우리는 Microsoft에 설명을 요청했습니다.
많은 주요 발행인들은 데이터가 허가없이 사용될 수 있으며이 도구가 서버 비용을 급증시키는 것을 방지하기 위해 웹 사이트에서 AI 도구를 차단하는 방향으로 이동했습니다. 현재의 경향이 이어지면 Copilot Vision은 일부 최고의 뉴스 사이트에서 작동하지 않을 수 있습니다.
Microsoft는 '의견을 수렴'하기 위해 헌신한다고 말했습니다.
'일반적으로 시작하기 전에 안전 조치를 계속해서 다듬고 개인 정보 보호와 책임을 모든 것의 중심에 두도록 노력 할 것입니다.'Microsoft는 블로그 게시물에서 '당신이 Copilot과 함께 찾아 볼 웹 사이트의 내용은 특정 처리되거나 AI 교육됩니다. 단순히 페이지에서 본 이미지 및 텍스트를 첫 번째로 읽고 해석하는 것입니다.'
더 깊게 생각하기
비전과 마찬가지로 Copilot의 새로운 Think Deeper 기능은 Microsoft의 어시스턴트를 더 다재다능하게 만들기 위한 시도입니다.
상세한 단계별 답변을 제공하기 전에 좀 더 많은 시간을 들여 비교하는 "추론 모델"덕분에 Think Deeper는 더 복잡한 문제를 해결하는 능력을 Copilot에게 부여합니다.
어떤 추론 모델입니까? Microsoft는 제한적 인 답을했습니다. Think Deeper는 'Microsoft에 의해 조정 된 OpenAI의 최신 모델을 사용합니다.'라고만 말했습니다. 줄거리 사이를 읽어볼 때 베이스 모델의 개인화 된 버전인 것은 확실합니다.
'긴 어려운 수학 문제를 해결하는 것부터 집 보수 비용을 평가하는 것까지 하루 종일 실생활의 다양한 도전에 도움이되도록 설계된 Think Deeper입니다.'Microsoft는 블로그 게시물에서 썼습니다. 'Think Deeper를 많이 칭찬했지만 그것이 기반이되는 모델이 o1이면 여러 면에서 분명히 실패 할 것입니다. Microsoft가 기본 모델에 어떤 향상을 가했는지와 Think Deeper가 제한적인 점에 대해 얼마나 솔직한지에 대해 궁금합니다.
오늘부터 Think Deeper는 호주, 캐나다, 뉴질랜드, 미국 및 영국의 제한된 수의 Copilot Labs 사용자에게 사용할 수 있습니다.
Copilot 목소리
별개의 GitHub의 Copilot 목소리와 혼동되지 않도록 오늘 일반적으로 사용할 수있는 새로운 Copilot 기능은 Copilot Voice입니다. 초기에 영어로 시작하여 뉴질랜드, 캐나다, 호주, 영국 및 미국에서 시작하여 Voice는 4 개의 합성 음성을 추가하여 Copilot과 대화하고 회신이 음성으로 이어지도록합니다.
ChatGPT를위한 OpenAI의 고급 음성 모드와 마찬가지로 Copilot Voice는 대화 중에 귀하의 톤을 인식하고 그에 따라 대화를하며 Copilot Voice가 회신 중일 때 언제든지 가로채 들을 수 있습니다. Microsoft 대변인은 '이 모드는 Copilot 앱을위한 새로운 모델로 세밀하게 조정 된 새로운 음성 기술을 사용합니다.'라고 말했습니다. 어떤 기술? 어떤 모델? 구체적인 사항에 관해서는 말이 없습니다.
알아야 할 한 가지 사항 : Copilot Voice에는 시간 기반 사용 제한이 있습니다. Copilot Pro 구독자는 더 많은 분을 받지만 요구에 따라 '가변적입니다.'Microsoft는 나에게 말했습니다.
개인화
Microsoft는 새로운 개인화 설정 덕분에 Copilot이 사용자의 취향과 선호도에 더 맞춰질 것이라고 말했습니다.
설정이 활성화되면 Copilot은 과거의 상호 작용 및 기록뿐만 아니라 다른 Microsoft 앱 및 서비스 (Microsoft는 어떤 서비스인지 말하지 않음)와의 상호 작용을 기반으로 Copilot을 사용하는 방법을 추천합니다.
'이것은 Copilot의 유용한 기능과 대화 키를 제공하여 시작하는 데 도움이됩니다.'Microsoft는 블로그 게시물에서 썼습니다.
Copilot의 개인화는 Windows의 Copilot 설정 메뉴에서 비활성화 될 수 있으며 영국 또는 EU에 대해서는 곧 예정되지 않습니다. 그러나 다른 곳의 사용자는 오늘 오후부터이 설정을 볼 수 있어야합니다.
Microsoft와 EU는 기존의 AI 제품 출시에 관해 높은 긴장을 가졌습니다. 5 월에 EU는 회사가 AI 도구를 중점으로 둔 가이던스 제도 인 디지털 서비스 법에 따라 글로벌 연간 매출의 1 %까지 벌금을 부과 할 수 있음을 경고 한 후 회사가 AI 제너레이티브 도구에 중점을 둔 정보를 요청에 응하지 않은 후에 그렇습니다. 대표이사.
애플과 메타를 포함한 많은 주요 기술 거물은 데이터 프라이버시와 모델 배포를 규제하는 법률에 걸쳐 달콤한 접근법을 취해 왔습니다.
'유럽 경제 지역 (EEA) 및 제한된 수의 다른 국가의 사용자를위한이 수준의 Copilot 개인화를 제공하기 전에 우리는 옵션을 평가하고 있습니다.'마이크로소프트 대변인이 TechCrunch에 말했습니다. '일부 기능은 나중 날짜에 EEA에서 사용할 수없습니다.'
