2024년 한 해 요즘은 빅 테크 기업들이 앞 다퉈 AI에 대해서 컨퍼런스 때마다 지겹도록 설명을 했다
마이크로소프트의 코파일럿, 삼성의 갤럭시 AI(가우스), Open AI사의 Chat GPT, 구글의 재미나이 까지 다양하게 있는데
그 중 나는 Apple Intelligence에 대해서 관심이 생겨 자세하게 알아보았다.
사실 Apple은 빅 테크 기업중에 가장 마지막으로 출발했다.
그 당시 사람들은 애플이 후발주자로 등장했는데 WWDC의 내용을 보곤 다른 회사들과 다를 게 없고 장점이 부각되지 않는다며 놀렸었다.
하지만 AI 쪽을 공부하고 있는 사람들이라면 알꺼다.
Apple Intelligence는 시장의 판도를 바꿀 애플의 가장 큰 무기라고...
자 그럼 Apple Intelligence가 무엇이고 어떠한 특징이 있는지 알아보자
시작하기 전에 애플에서 내놓은 5분 짜리 영상을 보고 와보자
https://www.youtube.com/watch?v=Q_EYoV1kZWk
자 보고 왔는가 그럼 영상에 있는데로 차차 설명을 해보자
1. Writing Tools
- 이메일을 쓰고 있다고 가정할 때 더 친근하거나, 전문적이고, 간결하게 들리도록 톤을 바꿀 수 있음
- Prooofread를 이용해 문법, 단어 선택, 단어 구조를 정확하게 파악하는 것이 가능
- 많은 양의 이메일을 쓴 경우, Key point 기능을 이용해 핵심요점을 뽑아서 요약으로 볼 수 있음
2. Genmoji
- 원하는 이모티콘에 대해서 설명을 입력하면 자동으로 생성해줌
- 자신의 기기의 사람의 이미지가 있다면 이모티콘으로 만들어 줄 수 있음
3. Image Playground
- 텍스트를 입력해서 그 문장에 알맞는 이미지를 생성해줌
- 스타일에서 일러스트, 스케치 등을 선택가능함
- 위와 마찬가지로 기기안에 사람의 이미지가 있다면 그 사람에 대해서도 생성가능
4. Image Wand
- 스케치 한것을 토대로 세련된 이미지로 바꾸기 가능
- Apple Pencil을 이용하여 원을 그리면 스케치와 단어를 분석해 이미지를 만들어 줌
5. Sirl
- 자연어 기능을 이용해 더욱 풍부한 언어를 이해할 수 있어 더욱 원할한 대화 가능
- 말을 더듬어도 사용자의 의도를 이해할 수 있음
- 화면 하단을 두 번 탭하여 시리 요청 o
6. Personal Context
- 사진, 캘린더, 메시지 및 기타앱에서 가져와 사용자가 원하는 부분을 알려 줄 수 있음
- 예를 들어 아이폰에 저장된 비행기 항공편을 알려주고, 그 후에 일정까지 알려주는 것도 가능
7. Priority Notifications - 개인 맞춤형 & Memory Movie
- 우선 순위의 가장 중요한 항목은 맨 위에 배치하여 무엇이 중요한지 알려줌
- 애플 기기에 저장된 사진을 이용하여 텍스트를 입력하면 그 와 관련된 것을 조합하여 영화처럼 만들어서 보여줌
이와 같은 내용이 5분동안 짧게 함축되어 있는 내용이다
하지만 우리는 본격적으로 조금 깊게 파볼 것이다.
Apple Intelligence는 WWDC에 발표하기에 앞써 논문으로 작동방식을 설명한 적이 있다.
바로 지난 2024년 4월 8일에 등재된 Ferret-UI가 그 예다.
사이트 : https://arxiv.org/pdf/2404.05719.pdf
간단하게 이 논문을 요약하자면 3가지로 나눌 수 있다
1. 모델 아키텍처 개선 : Ferret 모델을 기반으로 UI 중심 작업에 최적화된 구조를 설계함
2. 데이터 구성 : 다양한 UI 작업에 적합한 학습 데이터를 생성함
3. 벤치마크 설정 : 포괄적인 테스트 벤치마크를 구축하여 모델 성능을 평가함
일단 먼저 Ferret UI가 뭔지 설명하자면
Ferret-UI
- UI 화면에 특화된 정확한 참조 및 그라운딩 작업을 수행할 수 있는 최초의 MLLM(Multimodal Large Language Model)
- 개방형 언어 지침을 해석하고 이를 기반으로 작성 수행 o
특징
참조 작업 : 위젯 분류, 아이콘 인식, 광학 문자 인식(OCR) -> 특정 지점, 상자, 낙서를 포함한 다양한 형식을 처리
그라운딩 작업 : 특정 위젯, 아이콘, 텍스트를 찾거나 위젯 목록 생성 o
기본 작업 : 모델이 UI 화면의 시각적 및 공간적 지식을 풍부하게 이해하도록 도움, 다양한 아이콘 및 텍스트 요소 구분,
ui 유형을 세부적이고 전반적으로 파악하는데 중요한 역할을 함
고급작업 : 시각적 요소를 세부적으로 설명하거나 목표 지향적인 상호작용 계획 제안, 화면의 전반적인 기능 추론
등이 특징이다!!
경쟁사와 다른점
자 이제 특징은 여기까지 알아보고 애플의 AI가 다른 회사와 무엇이 차별화 되어 있는지 알아보자!!
첫번째 : Private Cloud Compute
https://www.youtube.com/watch?v=546ufMY7488
1. 개인정보 보호 : 데이터는 주로 로컬 기기에서 처리되며, 클라우드로 전용하였을 경우 철처히 암호화 됨
2. 에너지 효율성 : 최적화된 데이터 전송 및 연산으로 인하여 에너지 소비를 최소화 시킴
3. 분산 처리 : 사용자 기기와 클라우드 간 협력 처리로 성능 최적화
4. 실시간 업데이트 : 머신 러닝 모델 및 기능을 최신 상태로 유지
5. 안전한 사용자 경험: 생태계 내 모든 기기에서 안전하고 일관된 성능 제공
두번째 : Apple Continuity
원래도 애플은 연결성에 관해서 항상 다른 제조사들에 비해 강조해 왔다.
그러다 보니 이번 WWDC 발표에서도 애플 인텔리전스는 애플워치와 애플TV를 제외한 나머지 제품에 탑제가 된다고 한다.
예를 들어 내가 사파리에서 네이버를 보고 있다가 맥에서 사이트를 이어서 바로 볼 수 있으며,
내가 파일을 공유하고 싶은데 같은 애플 기기를 쓰고 있는 사람이라면 바로 손쉽게 전송 할 수 있는 AirDrop 기능도 있다.
전화나 페이스타임도 같은 네트워크에 연결되어 있고 같은 기기라면 통과도 가능한 것이 특징이다.
마지막으로 세상을 놀랍게 해왔던 기기가 있었던 것 처럼 Apple Intelligence로 인하여 세상을 또 한번 바꿀 수 있는 그런 날이 오기를 기대하며 이야기는 --여기까지--
'IT 이야기' 카테고리의 다른 글
| 유성의 이것저것 - 2. 스테이지엑스는 왜 제4 통신사가 되지 못했을까? (0) | 2024.08.05 |
|---|---|
| 유성의 이것저것 - 1. 2024 WWDC 후기 (0) | 2024.06.12 |