ChatGPT는 곧 화면에서 일어나는 모든 일을 볼 수 있게 됩니다.

어제, OpenAI는 봄 업데이트에서 ChatGPT 용 기본 Mac 앱을 출시했고 , 새로운 플래그십 모델인 GPT-4o 도 공개했습니다 . 이 데모는 특히 iOS 18에 적용될 것으로 예상되는 Apple-OpenAI 파트너십을 기대하고 있는 Apple 사용자들 사이에서 많은 기대감을 불러일으켰습니다 .

이벤트 전체 영상에서 중요한 점 하나는 곧 출시될 ChatGPT 앱 기능이 데모로 공개되었지만 구체적인 세부 정보는 공유되지 않았다는 것입니다. ChatGPT는 사용자 기기 화면에서 일어나는 모든 일을 볼 수 있는 기능을 제공합니다.

ChatGPT를 신뢰하고 화면 콘텐츠를 공유할 준비가 되셨나요?

ChatGPT Mac 앱을 실행하면 수동으로 스크린샷을 찍거나 파일을 업로드한 다음 해당 파일에 대해 ChatGPT에 쿼리를 보내는 기능을 지원합니다. 하지만 미래에는 아래 영상에서 볼 수 있듯이, 앱이 화면에 있는 모든 것에 접근할 수 있는 버튼을 클릭하는 것이 가능해질 겁니다.

이 기능은 Mac에만 국한되지 않을 것으로 보입니다. 아래 예에서 iOS와 iPadOS 앱도 동일한 기술을 선보였기 때문입니다.

이러한 화면 보기 기능이 ChatGPT에서 언제 제공될지는 알 수 없습니다. 하지만 이러한 변화를 통해 더욱 상호 작용적이고 원활한 경험이 가능해질 수 있습니다. Apple은 개발자가 기기 화면 콘텐츠에 접근할 수 있는 API를 제공합니다. 물론 사용자 동의가 필요합니다. 따라서 OpenAI가 이런 기능을 추가함으로써 불법적인 일을 하고 있는 것은 아닙니다.

ChatGPT가 화면의 전체 콘텐츠에 접근할 수 있다는 건 조금 두려울 수도 있지만, 매우 유용할 수도 있습니다.

앱이 사용자 화면에 접근하는 데 시간 제한이 있을 가능성이 높으며, 접근 권한이 부여될 때마다 버튼을 눌러야 합니다. 하지만 이론상으로는 언젠가 AI 도구가 사용자가 볼 수 있는 모든 것에 영구적으로 접근하여 최소한의 마찰로 보다 원활한 지원을 제공할 수 있게 될 것입니다.

사용자의 기기에서 보이는 모든 것을 볼 수 있는 AI 비서는 Apple이 모든 플랫폼에서 시스템 수준에서 목표로 삼고 있는 것처럼 보입니다. Siri가 심층적인 시스템 통합을 통해 새로운 AI 기능을 갖추게 된다면, iOS 18 이상 사용자 에게 큰 도움이 될 수 있습니다 .