Apple Watch 에어 제스처 출시, 새로운 기능의 디자인 공개

Apple은 최근 Apple Watch에 에어 제스처 기능을 제공하는 watchOS 10.1을 공식 출시했습니다.

애플은 최근 워치OS 10.1을 정식 출시해 두 개의 새로운 애플워치에 손가락 끝을 가볍게 터치해 화면을 띄울 수 있는 더블탭(Double Tap)을 도입했습니다. 노래 재생, 전화 받기, 메시지 답장 등 공중에서 화면을 제어할 수 있습니다.

 

 

올해 새로 출시된 Apple Watch의 새로운 기능인 두 손가락으로 서로 두 번 탭하기는 제품 관리자의 갑작스런 영감이 아니라 모든 사용자가 공감할 수 있는 것, 시계 버튼을 클릭하기만 하면 되는 순간에서 나온 것입니다.

 

경우의 예를 들어 개를 산책시키는 중에 전화가 옵니다. Mac을 한 손에 들고 다음 회의로 달려가던 중 갑자기 동료로부터 메시지를 받았습니다. 빵을 굽는 동안 시계의 타이머가 꺼지는데 다른 손은 달걀물에 묻혀서 만지고 싶지 않습니다.

 

이런 경우를 대비하여 Apple Watch 제품 관리자인 Eric Charles는 망설이는 순간 때문에 실제로 사용자는 작동 방법에 대해 생각하는데 더 많은 시간을 소비하게 된다고 말했습니다. 팀은 중요한 경우 추가 작업 없이 모든 것이 원활하게 실행되도록 하는 안정적이고 직관적인 방법을 제공하고자 했습니다.

 

모두의 '상황적 장애' 는 Apple Watch 제스처에 주목

두 손가락 서로 탭하기의 프로토타입은 Apple Watch가 출시된 지 1년도 채 되지 않은 2015년으로 거슬러 올라갑니다.

 

Apple은 웨어러블 장치의 동작 및 제스처 입력이라는 제목의 특허 문서에서 힘줄 감지 및 골격 움직임을 입력 명령으로 사용할 가능성을 탐색하려고 시도합니다.

 

 

6년 후, 이러한 대화형 탐색은 watchOS 8에서 보조 터치(AssistiveTouch)를 탄생시키는데 앞장섰습니다. 사용자는 핀치, 두 번 핀치, 주먹 쥐기, 두 번 주먹 쥐기의 네 가지 동작을 통해 공중에서 시계를 제어할 수 있습니다.

 

 

접근성 기능의 일부로 당시 제스처 제어가 해결해야 했던 문제는 다음과 같습니다.

 

사용자가 한 손만 가지고 있는 경우 Apple Watch를 어떻게 제어해야 합니까?

 

Apple의 디자인 원칙 중 하나는 모든 사람의 관점을 고려하는 것입니다. 그들은 장애인이 체형에 따라 다르게 대우받아서는 안 되며 장애인이 제품을 사용할 때 동등한 권리를 가져야 한다고 믿습니다.

 

그러나 공식 인터랙션 디자인 문서에서 Apple의 장애 정의는 특이합니다.

 

누구나 장애를 경험할 수 있습니다. 대부분의 사람들이 나이가 들면서 경험하는 장애 외에도 감염으로 인한 단기 청력 상실과 같은 일시적 장애와 시끄러운 기차에서 듣지 못하는 것과 같은 상황적 장애도 있습니다.

 

휴대폰은 한 손으로 제어할 수 있지만 애플워치는 처음부터 사용자의 손목에 고정되도록 설계되어 화면을 터치하면 실제로는 두 손이 모두 사용되어야 합니다.

 

 

어떤 의미에서 모든 Apple Watch 사용자는 한 손만 갖고 있으며 모두 상황적 장애를 경험합니다.

 

이 문제를 해결하려면 음성 제어와 제스처 제어라는 두 가지 옵션만 있습니다. 물리적인 움직임을 기반으로 한 제스처 제어가 확실히 더 자연스럽고 인터페이스의 버튼이나 컨트롤에 의존하지 않으며 특히 Apple Watch와 같이 화면이 좁은 장치에 적합합니다.

 

실제로 1세대 애플워치는 제스처 상호작용의 기본 패러다임을 확립한 손목을 들어 깨우기를 지원했습니다.

 

Apple은 일부 복잡한 제스처 작업을 포함하여 다양한 손 움직임을 연구했습니다.

 

 

두 손가락으로 탭하기는 두 가지 기준을 충족했기 때문에 다양한 제스처 솔루션 중에서 마침내 눈에 띄었습니다.

• 간단하고 직관적
• 명확한 목적

전자는 학습 임계값을 요구하지 않으며 목적은 해당 작업이 사용자의 의도를 나타내야 하며 실수로 터치한 결과가 아니어야 함을 분명히 요구합니다.

 

같은 이유로 두 손가락으로 탭하기는 화면이 켜져 있을 때만 활성화될 수 있습니다. Eric은 사용자가 화면을 볼 수 없으면 응답이 무엇인지 알 수 없다고 설명합니다.

 

심박수 센서 버그, 두 손가락으로 서로 탭하는 문제 발생

 

두 손가락으로 탭하기는 간단해 보이고 사용하기 위해 두 손가락을 모으기만 하면 되지만 그 뒤에 숨어 있는 작동 원리는 상당히 복잡합니다.

 

두 손가락으로 탭하기는 기계 학습을 통해 구축된 알고리즘을 기반으로 하며 데이터는 가속도계, 자이로스코프 및 광학 심박수 센서의 세 가지 센서에서 나옵니다. 센서는 손과 손가락을 두 번 두드릴 때 작은 움직임의 특성과 혈류의 변화를 감지하여 사용자의 실제 입력 의도를 정확하게 파악합니다.

 

 

광학 심박수 센서는 꼭 필요한 부품으로 제스처 제어용으로 설계되지는 않았지만 수년간의 연구를 통해 사용자의 일상적인 손목 움직임에 따라 손목과 심박수 센서 사이의 접촉이 아주 작은 간격이라도 변경된다는 사실을 발견했습니다. 이 모든 것이 심박수 센서에서 얻은 데이터에 영향을 미칩니다.

 

이 예상치 못한 발견을 통해 팀은 제스처 작업과 심박수 센서 간의 연관성을 밝힐 수 있었습니다. 이러한 간격이 없으면 두 손가락을 서로 두 번 탭하는 동작이 불가능할 수 있습니다.

 

다윗의 말을 인용하면 동일한 센서, 동일한 데이터로 완전히 다른 목적을 달성할 수 있습니다.

 

CPU에서 실행되는 보조 기능의 제스처 제어와 달리 두 손가락으로 두 번 탭하기는 S9 칩의 쿼드 코어 신경망 엔진을 호출하여 알고리즘 감지 정확도를 15% 향상시킵니다.

 

 

이는 기존 Apple Watch가 두 손가락으로 탭하기를 지원하지 않고 보조 터치 제스처의 신뢰성도 훨씬 떨어지는 이유를 설명할 수 있습니다.

 

팀은 개발 과정에서 많은 어려움에 직면했습니다. 예를 들어 신체 유형, 팔다리 길이, 심지어 제스처까지 미묘한 차이가 있을 때 모든 사용자가 일관된 경험을 얻을 수 있도록 어떻게 보장할 수 있을까? 블루투스 무선 신호와 LTE로 인한 간섭을 극복하는 방법은 무엇일까?

 

David는 팀이 기계 학습 모델을 훈련하기 위해 회사 내에서 많은 양의 데이터를 수집했다고 언급했습니다. 이 모델은 불필요한 노이즈를 제거하고 다양한 시나리오, 특히 정지되지 않은 장면에서 제스처 감지의 신뢰성을 보장합니다.

 

두 손가락 서로 탭하기 작업은 기본 작업에 따라 조정

 

알고리즘 문제를 해결한 후에도 Apple은 두 손가락을 탭하는 것이 ​​무엇을 할 수 있는지 결정하기 위해 소프트웨어 수준에서 메커니즘을 설계해야 합니다.

 

Apple Watch Series 9/Ultra를 경험하면서 두 손가락으로 탭하기라는 조작 개체에는 미리 정해진 방향이 없다고 언급했습니다. 핀치 투 줌(Pinch to Zoom)과 달리 항상 줌 효과가 발생합니다. 그리고 두 손가락으로 서로를 더블클릭하면 앱마다 다른 결과가 나타납니다.

 

인간과 컴퓨터가 상호작용의 정보처리 이론에 따르면 인터페이스와 상호작용하는 과정에서 사용자와 기계 사이에 지속적인 양방향 정보처리가 이루어지며 확립된 피드백은 작업의 만족도를 높이고 사용 임계값을 낮추고 줌으로써 효율성과 경험에 영향을 미칩니다. 그 반대도 마찬가지입니다.

 

 

Apple의 솔루션은 다양한 시나리오에서 다양한 앱에 대한 논리적 기본 작업을 설정하는 것입니다. 예를 들어 전화가 왔을 때 가장 논리적인 행동은 전화를 받는 것이고 다시 클릭하는 것은 전화를 끊는 것입니다. 메시지 알림의 경우 가장 논리적인 방법은 응답하는 것입니다. 따라서 두 손가락으로 탭하면 음성 및 텍스트 기능이 직접 활성화되고 다시 두 손가락으로 탭하면 전송이 완료됩니다.

 

우리의 원칙은 너무 많이 생각할 필요가 없고 필요할 때 행동하면 된다는 것입니다.

 

사용자의 말로는 앱 내부의 제스처에 비해 알림에 대한 즉각적인 제스처 피드백이 더 실용적이라는 사실을 발견했습니다. 특히 전화 통화 및 메시지와 같이 빈도가 높은 애플리케이션 시나리오에서는 더욱 그렇습니다. 전자는 금상첨화일 뿐이고 후자는 시기적절한 도움이 됩니다.

 

이는 또한 개발자에게 더 많은 상상의 여지를 제공합니다. 누군가 개발자들에게 Double Tap을 사용하여 소프트웨어 경험을 개선하는 방법을 물었을 때 생각했던 답을 알려줬습니다. 이는 바로 알림에 응답하는 것입니다.

 

개발자는 기존 알림 API를 활용하여 가장 중요한 작업을 올바른 위치에 배치할 수 있습니다. 이런 방식으로 알림이 도착하면 사용자는 두 손가락으로 직접 클릭하여 작업을 완료할 수 있습니다.

 

두 손가락으로 서로 탭하기, 바로 애플워치 개발의 본래 의도

 

해외 매거진은 잘 알려지지 않은 Apple의 Apple Watch 개발 이야기를 다루고 있습니다. 제품 정의에 대한 고민 끝에 팀은 마침내 Apple Watch의 존재 이유를 깨달았습니다. 스마트폰이 당신의 삶을 망치고 있다는 것입니다.

 

Apple Watch 소프트웨어 기술 책임자인 Kevin Lynch는 사람들이 휴대폰을 들고 자주 화면을 본다고 말했습니다. 사람들은 저녁 식탁에 휴대폰을 들고 앉아 있다가 휴대폰이 울리거나 진동할 때마다 주머니에 손을 넣는 사람들을 비웃습니다.

 

팀은 궁극적으로 몇 시간 동안 사용할 수도 없고 사용할 수도 없는 대부분의 정보를 필터링하고 가장 중요한 정보만 제공하는 장치를 만들기로 결정했습니다.

 

사용자를 중독시키는 제품을 만드는 것이 상업 기업의 기본 논리라면 Apple Watch는 최초의 주목 방지 Apple 기기일 수 있습니다.

 

Apple은 개발자 홈페이지에서 Apple Watch 경험의 핵심은 Moment에 있다고 강조하고 있으며 이전 인터뷰에서 Kevin Lynch는 이 Moment의 제한 시간을 10초에서 2초로 단축하기도 했습니다.

 

두 손가락 터치의 탄생은 애플워치가 간섭을 없애기 위한 도약입니다. 많은 경우 더 이상 시계를 제어하기 위해 다른 손을 사용할 필요가 없으며 집중적인 메시지 알림을 위해 항상 휴대폰을 꺼낼 필요도 없습니다.

 

Apple Watch는 우리의 손을 완전히 자유롭게 할 수 없을 수도 있고 정보 과부하에 맞서는 궁극적인 무기도 될 수는 없지만 변화를 만드는 방식으로 새로운 관점을 제공합니다.