(19) 대한민국특허청(KR) (12) 공개특허공보(A) (51) 국제특허분류(Int. Cl.) G06F 3/048 (2006.01) G06F 3/14 (2006.01) (21) 출원번호 10-2012-7000663 (22) 출원일자(국제) 2010년05월07일 심사청구일자 2012년01월09일 (85) 번역문제출일자 2012년01월09일 (86) 국제출원번호 PCT/US2010/034109 (87) 국제공개번호 WO 2010/144201 국제공개일자 (30) 우선권주장 2010년12월16일 12/565,744 2009년09월23일 미국(US) (뒷면에 계속) 전체 청구항 수 : 총 15 항 (11) 공개번호 10-2012-0061064 (43) 공개일자 2012년06월12일 (71) 출원인 애플 인크. 미합중국 95014 캘리포니아 쿠퍼티노 인피니트 루프 1 (72) 발명자 플레이자치, 크리스토퍼, 브라이언 미국 95051 캘리포니아주 산타 클라라 사라토가 애비뉴 141 시모어, 에릭, 테일러 미국 95125 캘리포니아주 산 호세 캘리포니아 애 비뉴 933 (뒷면에 계속) (74) 대리인 백만기, 양영준 (54) 발명의 명칭 터치 감지형 표면을 이용하는 접근성을 위한 장치, 방법 및 그래픽 사용자 인터페이스 (57) 요 약 본 발명의 방법은 디스플레이 및 터치 감지형 표면을 갖는 액세스 가능한 전자 장치에 의해 수행된다. 본 발 명의 방법은, 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하는 단계 - 현재 포커스는 제1 사 용자 인터페이스 요소 상에 있음 - ; 터치 감지형 표면 상의 제1 손가락 제스처를 검출하는 단계 - 제1 손가락 제스처는 터치 감지형 표면 상의 제2 사용자 인터페이스 요소에 대응하는 위치와 접촉하는 것과 독립적임 - ; 제1 손가락 제스처의 검출에 응답하여, 현재 포커스를 복수의 사용자 인터페이스 요소 중 제1 사용자 인터페이 스 요소로부터 복수의 사용자 인터페이스 요소 중 제2 사용자 인터페이스 요소로 변경하는 단계; 및 제2 사용 자 인터페이스 요소와 연관된 접근성 정보를 출력하는 단계를 포함한다. 대 표 도 - 도5a - 1 -
(72) 발명자 휴즈, 그레고리, 프랜시스 미국 95014 캘리포니아주 쿠퍼티노 에이피티. 18 디 홈스테드 로드 20800 허드슨, 레저널드, 딘 미국 94112 캘리포니아주 샌 프란시스코 앨러매니 블러바드 1434 (30) 우선권주장 12/565,745 2009년09월23일 미국(US) 12/565,746 2009년09월23일 미국(US) 61/184,825 2009년06월07일 미국(US) - 2 -
특허청구의 범위 청구항 1 터치 감지형 표면 및 디스플레이를 갖는 액세스 가능한 전자 장치에서, 상기 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하는 단계; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하는 단계; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 현재 네비게이션가능 유닛 타입에 따라 상기 복수의 사용자 인터페이스 요소에서 네비게이션하는 단 계 - 상기 현재 네비게이션가능 유닛 타입은 복수의 네비게이션가능 유닛 타입에서 선택된 제1 네비게이션가 능 유닛 타입으로 설정됨 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 단계 - 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 상기 터치 감지형 표면 상의 상기 복수의 사용자 인터페이스 요소 중 임의의 사용자 인터페이스 요소에 대응하는 위치와 접촉하는 것과 독립적임 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 것에 응답하여, 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 복수의 네비게이션 가능 유닛 타입에서 선택된 제2 네비게이션가능 유닛 타입으로 변경하는 단계; 상기 제2 네비게이션가능 유닛 타입에 관한 접근성 정보를 출력하는 단계; 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 제2 네비게이션가능 유닛 타입으로 변경한 후에, 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하는 단계 - 상기 제2 사용자 인터페이스의 네비게이션 제스처는 상기 제1 사용자 인터페이스의 네비게이션 제스처와 실질적으로 동일함 - ; 및 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 상기 현재 네비게이션가능 유닛 타입에 따라 상기 복수의 사용자 인터페이스 요소에서 네비게이션하 는 단계 - 상기 현재 네비게이션가능 유닛 타입은 상기 제2 네비게이션가능 유닛 타입으로 설정됨 - 를 포함하는 방법. 청구항 2 제1항에 있어서, 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 연관된 방향을 가지며, 상기 방법은, 상기 터치 감지형 표면 상의 제2 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 단계 - 상기 제2 사용자 인터페이스의 네비게이션 설정 제스처는 상기 터치 감지형 표면 상의 상기 복수의 사용자 인터페이스 요소 중 임의의 사용자 인터페이스 요소에 대응하는 위치와 접촉하는 것과 독립적이며, 상기 제2 사용자 인터페이스의 네비게이션 설정 제스처는 상기 제1 사용자 인터페이스의 네비게이션 설정 제 스처의 방향과 실질적으로 반대인 연관된 방향을 가짐 - ; 상기 제2 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 것에 응답하여, 상기 현재 네비게이션가능 유닛 타입을 상기 제2 네비게이션가능 유닛 타입으로부터 상기 제1 네비게이션가능 유닛 타입으로 변경하는 단계; 및 상기 제1 네비게이션가능 유닛 타입에 관한 접근성 정보를 출력하는 단계 를 포함하는 방법. 청구항 3-3 -
제1항에 있어서, 상기 복수의 네비게이션가능 유닛 타입은 문자, 단어, 문장, 줄, 단락, 및/또는 페이지를 포함하는 방법. 청구항 4 제3항에 있어서, 상기 제2 네비게이션가능 유닛 타입에 관한 접근성 정보는 "문자", "단어", "문장", "줄", "단락", 및 "페이 지"로 이루어진 그룹에서 선택된 음성 단어인 방법. 청구항 5 제1항에 있어서, 상기 디스플레이는 터치 스크린 디스플레이이며, 상기 터치 감지형 표면은 상기 디스플레이 상에 있는 방법. 청구항 6 제1항에 있어서, 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 다중 손가락 제스처인 방법. 청구항 7 제1항에 있어서, 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 두 손가락 회전 제스처인 방법. 청구항 8 제1항에 있어서, 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는, 일정 거리만큼 분리되는 제1 손가락 접촉과 동시의 제2 손가락 접촉을 포함하고, 상기 제1 손가락 접촉과 상기 제2 손가락 접촉 간의 거리는 중심점을 포함하고, 상기 제1 손가락 접촉과 상기 제2 손가락 접촉은 상기 중심점을 중심으로 상기 터치 감지형 표면 상에서 회전 하는 방법. 청구항 9 제1항에 있어서, 상기 현재 네비게이션가능 유닛 타입은 컨텍스트 의존형이고, 상기 복수의 사용자 인터페이스 요소 중 하나의 사용자 인터페이스 요소 상에 현재 포커스가 존재하는 방법. 청구항 10 제9항에 있어서, 상기 복수의 사용자 인터페이스 요소 중 상기 현재 포커스를 갖는 사용자 인터페이스 요소의 타입에 기초하여 상기 현재 네비게이션가능 유닛 타입을 변경하는 단계를 포함하는 방법. 청구항 11 액세스 가능한 전자 장치로서, 터치 감지형 표면; 디스플레이; 하나 이상의 프로세서; 메모리; 및 - 4 -
하나 이상의 프로그램 을 포함하고, 상기 하나 이상의 프로그램은 상기 메모리 내에 저장되고, 상기 하나 이상의 프로세서에 의해 실행되도록 구성되며, 상기 하나 이상의 프로그램은, 상기 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하고; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하고; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 현재 네비게이션가능 유닛 타입에 따라 상기 디스플레이 상의 상기 복수의 사용자 인터페이스 요소에 서 네비게이션하고 - 상기 현재 네비게이션가능 유닛 타입은 복수의 네비게이션가능 유닛 타입에서 선택된 제 1 네비게이션가능 유닛 타입으로 설정됨 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하고 - 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 상기 터치 감지형 표면 상의 복수의 사용자 인터페이스 요소 중 임의 의 사용자 인터페이스 요소에 대응하는 위치와 접촉하는 것과 독립적임 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 것에 응답하여, 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 복수의 네비게이션 가능 유닛 타입에서 선택된 제2 네비게이션가능 유닛 타입으로 변경하고; 상기 제2 네비게이션가능 유닛 타입에 관한 접근성 정보를 출력하고; 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 제2 네비게이션가능 유닛 타입으로 변경한 후에, 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하고 - 상기 제2 사용자 인터페이스의 네비게이션 제스처는 상기 제1 사용자 인터페이스의 네비 게이션 제스처와 실질적으로 동일함 - ; 및 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 상기 현재 네비게이션가능 유닛 타입에 따라 상기 디스플레이 상의 상기 복수의 사용자 인터페이스 요소에서 네비게이션 - 상기 현재 네비게이션가능 유닛 타입은 상기 제2 네비게이션가능 유닛 타입으로 설정 됨 - 하기 위한 명령어들을 포함하는 전자 장치. 청구항 12 명령어들이 저장된 컴퓨터 판독 가능한 저장 매체로서, 터치 감지형 표면 및 디스플레이를 갖는 액세스 가능 한 전자 장치에 의해 실행되는 경우, 상기 전자 장치로 하여금, 상기 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하고; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하고; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 현재 네비게이션가능 유닛 타입에 따라 복수의 사용자 인터페이스 요소에서 네비게이션하고 - 상기 현재 네비게이션가능 유닛 타입은 복수의 네비게이션가능 유닛 타입에서 선택된 제1 네비게이션가능 유닛 타 입으로 설정됨 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하고 - 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 상기 터치 감지형 표면 상의 상기 복수의 사용자 인터페이스 요소 중 임의의 사용자 인터페이스 요소에 대응하는 위치와 접촉하는 것과 독립적임 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 것에 응답하여, 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 복수의 네비게이션 가능 유닛 타입에서 선택된 제2 네비게이션가능 유닛 타입으로 변경하고; 상기 제2 네비게이션가능 유닛 타입에 관한 접근성 정보를 출력하고; 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 제2 네비게이션가능 - 5 -
유닛 타입으로 변경한 후에, 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하고 - 상기 제2 사용자 인터페이스의 네비게이션 제스처는 상기 제1 사용자 인터페이스의 네비 게이션 제스처와 실질적으로 동일함 - ; 및 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 상기 현재 네비게이션가능 유닛 타입에 따라 상기 복수의 사용자 인터페이스 요소에서 네비게이션 - 상기 현재 네비게이션가능 유닛 타입은 상기 제2 네비게이션가능 유닛 타입으로 설정됨 - 하게 하는 컴퓨터 판독 가능한 저장 매체. 청구항 13 액세스 가능한 전자 장치로서, 터치 감지형 표면; 디스플레이; 상기 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하기 위한 수단; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하기 위한 수 단; 상기 터치 감지형 표면 상의 손가락에 의한 제1 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 현재 네비게이션가능 유닛 타입에 따라 상기 복수의 사용자 인터페이스 요소에서 네비게이션하기 위 한 수단 - 상기 현재 네비게이션가능 유닛 타입은 복수의 네비게이션가능 유닛 타입에서 선택된 제1 네비게이 션가능 유닛 타입으로 설정됨 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하기 위한 수단 - 상기 제1 사용자 인터페이스의 네비게이션 설정 제스처는 상기 터치 감지형 표면 상의 복수의 사용자 인터페이스 요소 중 임의의 사용자 인터페이스 요소에 대응하는 위치와 접촉하는 것과 독립적임 - ; 상기 터치 감지형 표면 상의 제1 사용자 인터페이스의 네비게이션 설정 제스처를 검출하는 것에 응답하여, 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 복수의 네비게이션 가능 유닛 타입에서 선택된 제2 네비게이션가능 유닛 타입으로 변경하기 위한 수단; 상기 제2 네비게이션가능 유닛 타입에 관한 접근성 정보를 출력하기 위한 수단; 상기 현재 네비게이션가능 유닛 타입을 상기 제1 네비게이션가능 유닛 타입으로부터 상기 제2 네비게이션가능 유닛 타입으로 변경한 후에, 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하기 위한 수단 - 상기 제2 사용자 인터페이스의 네비게이션 제스처는 상기 제1 사용자 인터페 이스의 네비게이션 제스처와 실질적으로 동일함 - ; 및 상기 터치 감지형 표면 상의 손가락에 의한 제2 사용자 인터페이스의 네비게이션 제스처를 검출하는 것에 응 답하여, 상기 현재 네비게이션가능 유닛 타입에 따라 상기 복수의 사용자 인터페이스 요소에서 네비게이션하 기 위한 수단 - 상기 현재 네비게이션가능 유닛 타입은 상기 제2 네비게이션가능 유닛 타입으로 설정됨 - 을 포함하는 전자 장치. 청구항 14 터치 감지형 표면 및 디스플레이를 갖는 액세스 가능한 전자 장치로서, 상기 전자 장치는 제1항 내지 제10항 중 어느 한 항의 방법을 수행하도록 구성되는 전자 장치. 청구항 15 명령어들이 저장된 컴퓨터 판독 가능한 저장 매체로서, 상기 명령어들은 터치 감지형 표면 및 디스플레이를 갖는 액세스 가능한 전자 장치에 의해 실행되는 경우에, 상기 전자 장치로 하여금 제1항 내지 제10항 중 어느 한 항의 방법을 수행하게 하는 컴퓨터 판독 가능한 저장 매체. - 6 -
명 세 서 [0001] 기 술 분 야 개시된 실시예들은 일반적으로 시력이 손상된 사람들을 위한 전자 장치에 관한 것으로, 더 구체적으로는 터치 스크린 디스플레이 또는 트랙 패드와 같은 터치 감지형 표면을 이용하여 접근성을 제공하는 전자 장치에 관한 것이다. [0002] [0003] [0004] 배 경 기 술 최근, 컴퓨터 및 다른 전자 장치들을 위한 입력 장치로서 터치 감지형 표면을 이용하는 것이 상당히 증가하였 다. 이러한 터치 감지형 표면의 이용이 증가함에 따라, 특히 시력이 손상된 사람들을 위해 액세스가능한 네 비게이션 피드백(accessible navigation feedback)을 제공하는 터치 기반 네비게이션 방법에 대한 필요성도 증가하였다 (예를 들어, 가청 피드백, 햅틱 피드백 및/또는 점자 출력). 예를 들어, 저시력 사용자, 맹인 사 용자, 난독증 사용자 또는 학습장애를 가진 다른 사람들, 또는 심지어는 단순히 조작 동안 장치를 보지 않고 서 장치를 이용하기를 원하거나 그럴 필요가 있는 정상 시력의 사용자들까지도, 장치 상의 사용자 인터페이스 요소들 간에서의 터치 기반 네비게이션을 허용하는 접근성 사용자 인터페이스(accessibility user interfaces)로부터 혜택을 받을 수 있다. 구체적으로, 맹인 사용자에게 있어서, 효과적인 접근성 인터페이스 는 단순한 옵션이 아니고, 정상 시력의 사용자로부터의 도움 없이 이러한 장치들을 이용하는 데에 필수적인 것이다. 불행하게도, 터치 감지형 표면을 구비하는 장치 상의 현존하는 접근성 인터페이스들은 다루기가 복잡하고 비 효율적인 상태이다. 사용자 인터페이스 요소들의 네비게이션 및 활성화가 어려운 경우가 많으며, 따라서 시 력이 손상된 사용자에 대한 상당한 인지적(cognitive) 부담을 발생시킨다. 또한, 현존하는 접근성 방법들은 필요 이상으로 오래 걸리며, 따라서 에너지를 낭비한다. 이러한 에너지 낭비에 대한 고려는 배터리로 작동되 는 장치들에서 특히 중요하다. 따라서, 더 빠르고 더 효율적인 터치 기반 접근성 방법 및 인터페이스를 갖는 터치 감지형 표면(예를 들어, 터치 스크린 디스플레이 및/또는 터치 패드)을 갖는 전자 장치들이 필요하다. 그러한 방법 및 인터페이스는 사용자 인터페이스 개체들과의 상호작용 및 네비게이션을 위한 현존하는 접근성 방법들을 보완하거나 대체할 수 있다. 그러한 방법 및 인터페이스는 시력이 손상된 사용자에 대한 인지적 부담을 감소시키고, 더 효율적 인 인간-머신 인터페이스를 만들어낸다. 배터리로 작동되는 장치들에서, 그러한 방법 및 인터페이스는 전력 을 보존하고, 배터리 충전 간의 시간을 증가시킨다. 발명의 내용 [0005] [0006] 과제의 해결 수단 터치 감지형 표면을 갖는 장치에 관련된 상기의 결점들 및 기타 사용자 인터페이스 접근성 문제들은 개시된 장치들에 의해 감소되거나 제거된다. 일부 실시예들에서, 장치는 데스크탑 컴퓨터이다. 일부 실시예들에서, 장치는 휴대용이다 (예를 들어, 노트북 컴퓨터 또는 핸드핼드형 장치). 일부 실시예들에서, 장치는 터치패드 ("트랙 패드"라고도 알려져 있음)를 갖는다. 일부 실시예들에서, 장치는 터치 감지 디스플레이("터치 스크린" 또는 "터치 스크린 디스플레이"라고도 알려져 있음)를 갖는다. 일부 실시예들에서, 장치는 그래픽 사용자 인터페이스(GUI), 하나 이상의 프로세서, 메모리 및 하나 이상의 모듈, 복수의 기능을 수행하기 위해 메모리 내에 저장된 프로그램 또는 명령어들의 집합을 갖는다. 일부 실시예들에서, 사용자는 주로 터치 감지 형 표면 상에서의 손가락 접촉 및 제스처를 통해 GUI와 상호작용한다. 일부 실시예들에서, 기능들은 프리젠 팅(presenting), 워드프로세싱, 웹사이트 생성, 디스크 저작(disk authoring), 스프레드시트 작성, 게임 플레 이, 전화걸기, 화상 회의, 이메일, 인스턴스 메시징, 음성 메모, 웹 브라우징, 디지털 음악 재생, 디지털 콘 텐츠의 구매 및/또는 다운로드, 및/또는 디지털 비디오 재생을 포함할 수 있다. 이러한 기능들을 수행하기 위한 실행가능한 명령어들은 하나 이상의 프로세서에 의한 실행을 위해 구성된 컴퓨터 판독가능한 저장 매체 또는 다른 컴퓨터 프로그램 제품 내에 포함될 수 있다. 일부 실시예들에서, 접근성 방법은 터치 감지형 표면 및 디스플레이를 갖는 전자 장치에서 수행된다. 방법은 터치 스크린 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하는 것을 포함하며, 현재의 포커 스는 제1 사용자 인터페이스 요소 상에 있다. 방법은 또한 터치 스크린 디스플레이 상에서 제1 손가락 제스 - 7 -
처를 검출하고, 제1 손가락 제스처는 제2 사용자 인터페이스 요소에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적이며, 방법은 이에 응답하여, 현재의 포커스를 복수의 사용자 인터페이스 요소 내의 제1 사용자 인터페이스 요소로부터 복수의 사용자 인터페이스 요소 내의 제2 사용자 인터페이스 요소로 변경하고, 제2 사용자 인터페이스 요소에 연관된 접근성 정보를 출력한다. [0007] [0008] [0009] [0010] [0011] [0012] 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면 및 디스플레이, 하나 이상의 프로세서, 메모 리, 및 메모리 내에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함 한다. 하나 이상의 프로그램은 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하고 -현재의 포커스는 제1 사용자 인터페이스 요소 상에 있음- ; 터치 감지형 표면 상에서 제1 손가락 제스처를 검출하고 -제1 손가락 제스처는 제2 사용자 인터페이스 요소에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적임-, 제1 손가락 제스처를 검출한 것에 응답하여, 현재의 포커스를 복수의 사용자 인터페이스 요소 내 의 제1 사용자 인터페이스 요소로부터 복수의 사용자 인터페이스 요소 내의 제2 사용자 인터페이스 요소로 변 경하고, 제2 사용자 인터페이스 요소에 연관된 접근성 정보를 출력하기 위한 명령어들을 포함한다. 일부 실시예들에서, 컴퓨터 판독가능한 저장 매체에는, 디스플레이 및 터치 감지형 표면을 구비하는 액세스가 능한 전자 장치에 의해 실행될 때, 장치로 하여금, 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플 레이하고 -현재의 포커스는 제1 사용자 인터페이스 요소 상에 있음- ; 터치 감지형 표면 상에서 제1 손가락 제스처를 검출하고 -제1 손가락 제스처는 제2 사용자 인터페이스 요소에 대응하는 터치 감지형 표면 상의 위 치를 접촉하는 것에 독립적임- ; 제1 손가락 제스처를 검출한 것에 응답하여, 현재의 포커스를 복수의 사용자 인터페이스 요소 내의 제1 사용자 인터페이스 요소로부터 복수의 사용자 인터페이스 요소 내의 제2 사용자 인 터페이스 요소로 변경하고, 제2 사용자 인터페이스 요소에 연관된 접근성 정보를 출력하게 하기 위한 명령어 들이 저장된다. 일부 실시예들에서, 디스플레이 및 터치 감지형 표면을 구비하는 액세스가능한 전자 장치 상의 그래픽 사용자 인터페이스("GUI")는 디스플레이 상에 복수의 사용자 인터페이스 요소를 포함하고, 현재의 포커스는 제1 사용 자 인터페이스 요소 상에 있다. 터치 감지형 표면 상에서 제1 손가락 제스처를 검출한 것에 응답하여 -제1 손가락 제스처는 제2 사용자 인터페이스 요소에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립 적임-, 현재의 포커스는 복수의 사용자 인터페이스 요소 내의 제1 사용자 인터페이스 요소로부터 복수의 사 용자 인터페이스 요소 내의 제2 사용자 인터페이스 요소로 변경되고, 제2 사용자 인터페이스 요소에 연관된 접근성 정보가 출력된다. 일부 실시예들에서, 액세스가능한 전자 장치는 디스플레이; 터치 감지형 표면; 디스플레이 상에 복수의 사용 자 인터페이스 요소를 디스플레이하기 위한 수단 -현재의 포커스는 제1 사용자 인터페이스 요소 상에 있음- ; 터치 감지형 표면 상에서 제1 손가락 제스처를 검출하기 위한 수단 -제1 손가락 제스처는 제2 사용자 인터페 이스 요소에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적임- ; 제1 손가락 제스처를 검출한 것에 응답하여, 현재의 포커스를 복수의 사용자 인터페이스 요소 내의 제1 사용자 인터페이스 요소로부터 복 수의 사용자 인터페이스 요소 내의 제2 사용자 인터페이스 요소로 변경하기 위한 수단 및 제2 사용자 인터페 이스 요소에 연관된 접근성 정보를 출력하기 위한 수단을 포함한다. 일부 실시예들에서, 접근성 방법은 디스플레이 및 터치 감지형 표면을 구비하는 전자 장치에서 수행된다. 방 법은 디스플레이 상에 문서의 제1 섹션을 디스플레이하는 단계 -문서는 복수의 섹션을 가짐- ; 문서의 제1 섹 션에 대응하는 가청 문서 섹션 표시(audible document section indicia)를 출력하는 단계; 터치 감지형 표면 상에서 제1 손가락 제스처를 검출하는 단계; 제1 손가락 제스처를 검출한 것에 응답하여, 문서의 제1 섹션의 디스플레이를 중단하는 단계; 디스플레이 상에 문서의 제2 섹션을 디스플레이하는 단계 -문서의 제2 섹션은 문서의 제1 섹션에 인접함- ; 및 문서의 제2 섹션에 대응하는 가청 문서 섹션 표시를 출력하는 단계를 포함한 다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면 및 디스플레이, 하나 이상의 프로세서, 메모 리, 및 메모리 내에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함 한다. 하나 이상의 프로그램은 디스플레이 상에 문서의 제1 섹션을 디스플레이하고 -문서는 복수의 섹션을 가짐- ; 문서의 제1 섹션에 대응하는 가청 문서 섹션 표시를 출력하고; 터치 감지형 표면 상에서 제1 손가락 제스처를 검출하고; 제1 손가락 제스처를 검출한 것에 응답하여: 문서의 제1 섹션의 디스플레이를 중단하고, 디스플레이 상에 문서의 제2 섹션을 디스플레이하고 -문서의 제2 섹션은 문서의 제1 섹션에 인접함-, 문서의 제2 섹션에 대응하는 가청 문서 섹션 표시를 출력하기 위한 명령어들을 포함한다. - 8 -
[0013] [0014] [0015] [0016] [0017] 일부 실시예들에서, 컴퓨터 판독가능한 저장 매체에는, 디스플레이 및 터치 감지형 표면을 구비하는 액세스가 능한 전자 장치에 의해 실행될 때, 장치로 하여금, 디스플레이 상에 문서의 제1 섹션을 디스플레이하고 -문서 는 복수의 섹션을 가짐- ; 문서의 제1 섹션에 대응하는 가청 문서 섹션 표시를 출력하고; 디스플레이 상에서 제1 손가락 제스처를 검출하고, 제1 손가락 제스처를 검출한 것에 응답하여: 문서의 제1 섹션의 디스플레이를 중단하고; 디스플레이 상에 문서의 제2 섹션을 디스플레이하고 -문서의 제2 섹션은 문서의 제1 섹션에 인접함 - ; 문서의 제2 섹션에 대응하는 제1 가청 문서 섹션 표시를 출력하게 하기 위한 명령어들이 저장되어 있다. 일부 실시예들에서, 디스플레이 및 터치 감지형 표면을 구비하는 액세스가능한 전자 장치 상의 그래픽 사용자 인터페이스("GUI")는 문서의 제1 섹션을 포함하는데, 문서는 복수의 섹션을 갖는다. 터치 감지형 표면 상에 서 제1 손가락 제스처를 검출한 것에 응답하여: 문서의 제2 섹션이 디스플레이되어, 디스플레이된 문서의 제1 섹션을 대체하며, 문서의 제2 섹션은 문서의 제1 섹션에 인접하고, 문서의 제2 섹션에 대응하는 가청 문서 섹 션 표시가 출력된다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면; 디스플레이; 터치 스크린 디스플레이 상에 문서의 제1 섹션을 디스플레이하기 위한 수단 -문서는 복수의 섹션을 가짐- ; 문서의 제1 섹션에 대응하는 가 청 문서 섹션 표시를 출력하기 위한 수단; 터치 감지형 표면 상에서 제1 손가락 제스처를 검출하기 위한 수단; 및 제1 손가락 제스처를 검출한 것에 응답하여: 문서의 제1 섹션의 디스플레이를 중단하기 위한 수단; 디스플레이 상에 문서의 제2 섹션을 디스플레이하기 위한 수단 - 문서의 제2 섹션은 문서의 제1 섹션에 인접 함 -; 및 문서의 제2 섹션에 대응하는 제1 가청 문서 섹션 표시를 출력하기 위한 수단을 포함한다. 일부 실시예들에서, 방법은 터치 감지형 표면 및 디스플레이를 구비하는 액세스가능한 전자 장치에서 수행된 다. 방법은 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하는 단계; 터치 감지형 표면 상에 서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출하는 단계; 및 터치 감지형 표면 상에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 (navigable) 유닛 타입에 따라 디스플레이 상의 복수의 사용자 인터페이스 요소를 네비게이트하는 단계 -현재 의 네비게이션가능한 유닛 타입은 복수의 네비게이션가능한 유닛 타입으로부터 선택된 제1 네비게이션가능한 유닛 타입으로 설정됨- 를 포함한다. 방법은 또한 터치 감지형 표면 상에서 제1 사용자 인터페이스 네비게이 션 설정 제스처를 검출하는 단계 -제1 사용자 인터페이스 네비게이션 설정 제스처는 복수의 사용자 인터페이 스 요소 중 임의의 것에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적임- ; 터치 감지형 표 면 상에서 제1 사용자 인터페이스 네비게이션 설정 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으로부터 복수의 네비게이션가능한 유닛 타입에서 선택된 제2 네 비게이션가능한 유닛 타입으로 변경하는 단계; 및 제2 네비게이션가능한 유닛 타입에 관한 접근성 정보를 출 력하는 단계를 포함한다. 방법은, 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으 로부터 제2 네비게이션가능한 유닛 타입으로 변경한 후, 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출하는 단계 -제2 사용자 인터페이스 네비게이션 제스처는 제1 사용자 인 터페이스 네비게이션 제스처와 실질적으로 동일함- ; 및 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입에 따라 디스플레 이 상의 복수의 사용자 인터페이스 요소 내에서 네비게이트하는 단계 -현재의 네비게이션가능한 유닛 타입은 제2 네비게이션가능한 유닛 타입으로 설정됨- 를 포함한다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면 및 디스플레이, 하나 이상의 프로세서, 메모 리, 및 메모리 내에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함 한다. 하나 이상의 프로그램은 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레이하고; 터치 감 지형 표면 상에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출하고; 터치 감지형 표면 상 에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가 능한 유닛 타입에 따라 복수의 사용자 인터페이스 요소 내를 네비게이트 -현재의 네비게이션가능한 유닛 타입 은 복수의 네비게이션가능한 유닛 타입으로부터 선택된 제1 네비게이션가능한 유닛 타입으로 설정됨- 하기 위 한 명령어들을 포함한다. 하나 이상의 프로그램은 또한 터치 감지형 표면 상에서 제1 사용자 인터페이스 네 비게이션 설정 제스처를 검출하고 -제1 사용자 인터페이스 네비게이션 설정 제스처는 복수의 사용자 인터페이 스 요소 중 임의의 것에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적임- ; 터치 감지형 표 면 상에서 제1 사용자 인터페이스 네비게이션 설정 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으로부터 복수의 네비게이션가능한 유닛 타입에서 선택된 제2 네 비게이션가능한 유닛 타입으로 변경하고, 제2 네비게이션가능한 유닛 타입에 관한 접근성 정보를 출력하고; - 9 -
현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으로부터 제2 네비게이션가능한 유닛 타입으로 변경한 후, 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검 출하고 -제2 사용자 인터페이스 네비게이션 제스처는 제1 사용자 인터페이스 네비게이션 제스처와 실질적으로 동일함- ; 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입에 따라 디스플레이 상의 복수의 사용자 인터페이스 요소 내에 서 네비게이트 -현재의 네비게이션가능한 유닛 타입은 제2 네비게이션가능한 유닛 타입으로 설정됨- 하기 위 한 명령어들을 포함한다. [0018] [0019] [0020] 일부 실시예들에서, 컴퓨터 판독가능한 저장 매체에는, 디스플레이 및 터치 감지형 표면을 갖는 액세스가능한 전자 장치에 의해 실행될 때, 그 장치로 하여금, 디스플레이 상에 복수의 사용자 인터페이스 요소를 디스플레 이하고; 터치 감지형 표면 상에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출하고; 터치 감지형 표면 상에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재 의 네비게이션가능한 유닛 타입에 따라 복수의 사용자 인터페이스 요소 내에서 네비게이트하고 -현재의 네비 게이션가능한 유닛 타입은 복수의 네비게이션가능한 유닛 타입으로부터 선택된 제1 네비게이션가능한 유닛 타 입으로 설정됨- ; 터치 감지형 표면 상에서 제1 사용자 인터페이스 네비게이션 설정 제스처를 검출하고 -제1 사용자 인터페이스 네비게이션 설정 제스처는 복수의 사용자 인터페이스 요소 중 임의의 것에 대응하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적임- ; 터치 감지형 표면 상에서 제1 사용자 인터페이스 네비게 이션 설정 제스처를 검출한 것에 응답하여: 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으로부터 복수의 네비게이션가능한 유닛 타입에서 선택된 제2 네비게이션가능한 유닛 타입으로 변경하고, 제2 네비게이션가능한 유닛 타입에 관한 접근성 정보를 출력하게 하는 명령어들이 저장되어 있다. 하나 이상 의 프로그램은 또한 실행될 때, 장치로 하여금 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으로부터 제2 네비게이션가능한 유닛 타입으로 변경한 후, 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출하고 -제2 사용자 인터페이스 네비게이션 제스처는 제1 사용 자 인터페이스 네비게이션 제스처와 실질적으로 동일함- ; 터치 감지형 표면 상에서 손가락에 의한 제2 사용 자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입에 따라 복수 의 사용자 인터페이스 요소 내에서 네비게이트하게 -현재의 네비게이션가능한 유닛 타입은 제2 네비게이션가 능한 유닛 타입으로 설정됨- 하기 위한 명령어들을 포함한다. 일부 실시예들에서, 터치 감지형 표면 및 디스플레이를 구비하는 액세스가능한 전자 장치 상의 GUI는 디스플 레이 상의 복수의 사용자 인터페이스 요소를 포함한다. 터치 감지형 표면 상에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입에 따라 복수의 사용자 인터페이스 요소에서의 네비게이션이 발생하는데, 현재의 네비게이션가능한 유닛 타입은 복수의 네비 게이션가능한 유닛 타입으로부터 선택된 제1 네비게이션가능한 유닛 타입으로 설정된다. 터치 감지형 표면 상에서 제1 사용자 인터페이스 네비게이션 설정 제스처를 검출한 것에 응답하여 -제1 사용자 인터페이스 네비 게이션 설정 제스처는 복수의 사용자 인터페이스 요소 중 임의의 것에 대응하는 터치 감지형 표면 상의 위치 를 접촉하는 것에 독립적임 -: 현재의 네비게이션가능한 유닛 타입은 제1 네비게이션가능한 유닛 타입으로부 터 복수의 네비게이션가능한 유닛 타입에서 선택된 제2 네비게이션가능한 유닛 타입으로 변경되고, 제2 네비 게이션가능한 유닛 타입에 관한 접근성 정보가 출력된다. 현재의 네비게이션가능한 유닛 타입을 제1 네비게 이션가능한 유닛 타입으로부터 제2 네비게이션가능한 유닛 타입으로 변경한 후, 터치 감지형 표면 상에서 손 가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여 -제2 사용자 인터페이스 네비 게이션 제스처는 제1 사용자 인터페이스 네비게이션 제스처와 실질적으로 동일함-, 현재의 네비게이션가능한 유닛 타입에 따라 복수의 사용자 인터페이스 요소에서의 네비게이션이 발생하며, 현재의 네비게이션가능한 유 닛 타입은 제2 네비게이션가능한 유닛 타입으로 설정된다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면; 디스플레이; 디스플레이 상에 복수의 사용 자 인터페이스 요소를 디스플레이하기 위한 수단; 및 터치 감지형 표면 상에서 손가락에 의한 제1 사용자 인 터페이스 네비게이션 제스처를 검출하기 위한 수단을 포함한다. 액세스가능한 전자 장치는, 터치 감지형 표 면 상에서 손가락에 의한 제1 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게 이션가능한 유닛 타입에 따라 복수의 사용자 인터페이스 요소 내에서 네비게이트하기 위한 수단 -현재의 네비 게이션가능한 유닛 타입은 복수의 네비게이션가능한 유닛 타입으로부터 선택된 제1 네비게이션가능한 유닛 타 입으로 설정됨- ; 터치 감지형 표면 상에서 제1 사용자 인터페이스 네비게이션 설정 제스처를 검출하기 위한 수단 -제1 사용자 인터페이스 네비게이션 설정 제스처는 복수의 사용자 인터페이스 요소 중 임의의 것에 대응 하는 터치 감지형 표면 상의 위치를 접촉하는 것에 독립적임- ; 터치 감지형 표면 상에서 제1 사용자 인터페 - 10 -
이스 네비게이션 설정 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션 가능한 유닛 타입으로부터 복수의 네비게이션가능한 유닛 타입에서 선택된 제2 네비게이션가능한 유닛 타입으 로 변경하기 위한 수단; 제2 네비게이션가능한 유닛 타입에 관한 접근성 정보를 출력하기 위한 수단; 현재의 네비게이션가능한 유닛 타입을 제1 네비게이션가능한 유닛 타입으로부터 제2 네비게이션가능한 유닛 타입으로 변경한 후, 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출하기 위 한 수단 -제2 사용자 인터페이스 네비게이션 제스처는 제1 사용자 인터페이스 네비게이션 제스처와 실질적으 로 동일함- ; 및 터치 감지형 표면 상에서 손가락에 의한 제2 사용자 인터페이스 네비게이션 제스처를 검출한 것에 응답하여, 현재의 네비게이션가능한 유닛 타입에 따라 복수의 사용자 인터페이스 요소 내에서 네비게이 트하기 위한 수단 -현재의 네비게이션가능한 유닛 타입은 제2 네비게이션가능한 유닛 타입으로 설정됨- 을 더 포함한다. [0021] [0022] [0023] [0024] [0025] [0026] 일부 실시예들에서, 방법은 터치 감지형 표면 및 디스플레이를 구비하는 액세스가능한 전자 장치에서 수행된 다. 방법은 디스플레이의 적어도 제1 부분을 터치 감지형 표면에 맵핑하는 단계; 디스플레이 상에 복수의 사 용자 인터페이스 컨테이너를 동시에 디스플레이하는 단계; 복수의 사용자 인터페이스 컨테이너에서 제1 사용 자 인터페이스 컨테이너를 선택하는 사용자 인터페이스 컨테이너 선택 이벤트를 검출하는 단계; 및 사용자 인 터페이스 컨테이너 선택 이벤트를 검출한 것에 응답하여, 디스플레이의 제1 부분을 터치 감지형 표면에 맵핑 하는 것을 중단하고, 제1 사용자 인터페이스 컨테이너를 터치 감지형 표면과 실질적으로 동일한 공간을 차지 하도록 비례적으로(proportionally) 맵핑하는 단계를 포함한다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면 및 디스플레이, 하나 이상의 프로세서, 메모 리, 및 메모리 내에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함 한다. 하나 이상의 프로그램은 디스플레이의 적어도 제1 부분을 터치 감지형 표면에 맵핑하고; 디스플레이 상에 복수의 사용자 인터페이스 컨테이너를 동시에 디스플레이하고; 복수의 사용자 인터페이스 컨테이너에서 제1 사용자 인터페이스 컨테이너를 선택하는 사용자 인터페이스 컨테이너 선택 이벤트를 검출하고; 사용자 인 터페이스 컨테이너 선택 이벤트를 검출한 것에 응답하여, 디스플레이의 제1 부분을 터치 감지형 표면에 맵핑 하는 것을 중단하고, 제1 사용자 인터페이스 컨테이너를 터치 감지형 표면과 실질적으로 동일한 공간을 차지 하도록 비례적으로 맵핑하기 위한 명령어들을 포함한다. 일부 실시예들에서, 컴퓨터 판독가능한 저장 매체에는, 디스플레이 및 터치 감지형 표면을 구비하는 액세스가 능한 전자 장치에 의해 실행될 때, 장치로 하여금, 디스플레이의 적어도 제1 부분을 터치 감지형 표면에 맵핑 하고; 디스플레이 상에 복수의 사용자 인터페이스 컨테이너를 동시에 디스플레이하고; 복수의 사용자 인터페 이스 컨테이너에서 제1 사용자 인터페이스 컨테이너를 선택하는 사용자 인터페이스 컨테이너 선택 이벤트를 검출하고; 사용자 인터페이스 컨테이너 선택 이벤트를 검출한 것에 응답하여, 디스플레이의 제1 부분을 터치 감지형 표면에 맵핑하는 것을 중단하고, 제1 사용자 인터페이스 컨테이너를 터치 감지형 표면과 실질적으로 동일한 공간을 차지하도록 비례적으로 맵핑하게 하는 명령어들이 저장되어 있다. 일부 실시예들에서, 디스플레이 및 터치 감지형 표면을 구비하는 액세스가능한 전자 장치 상의 GUI는 디스플 레이 상에 동시에 디스플레이되는 복수의 사용자 인터페이스 컨테이너를 포함한다. 디스플레이의 적어도 제1 부분은 터치 감지형 표면에 맵핑된다. 복수의 사용자 인터페이스 컨테이너에서 제1 사용자 인터페이스 컨테 이너를 선택하는 사용자 인터페이스 컨테이너 선택 이벤트를 검출한 것에 응답하여, 디스플레이의 제1 부분이 터치 감지형 표면에 맵핑되는 것을 중단하고, 제1 사용자 인터페이스 컨테이너는 터치 감지형 표면과 실질적 으로 동일한 공간을 차지하도록 비례적으로 맵핑된다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 감지형 표면; 디스플레이; 디스플레이의 적어도 제1 부분 을 터치 감지형 표면에 맵핑하기 위한 수단; 디스플레이 상에 복수의 사용자 인터페이스 컨테이너를 동시에 디스플레이하기 위한 수단; 복수의 사용자 인터페이스 컨테이너에서 제1 사용자 인터페이스 컨테이너를 선택 하는 사용자 인터페이스 컨테이너 선택 이벤트를 검출하기 위한 수단; 및 사용자 인터페이스 컨테이너 선택 이벤트를 검출한 것에 응답하여, 디스플레이의 제1 부분을 터치 감지형 표면에 맵핑하는 것을 중단하기 위한 수단 및 제1 사용자 인터페이스 컨테이너를 터치 감지형 표면과 실질적으로 동일한 공간을 차지하도록 비례적 으로 맵핑하기 위한 수단을 포함한다. 일부 실시예들에서, 접근성 방법은 중심을 갖는 터치 감지 디스플레이를 구비하는 전자 장치에서 수행된다. 방법은 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 제1 배율로 디스플레이하는 단계; 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출하는 단계 -제1 다중 손가락 제스처를 검출하 는 것은 터치 스크린 디스플레이 상에서 동시적인 다중 손가락 접촉들을 검출하는 것을 포함함- ; 동시적인 - 11 -
다중 손가락 접촉들을 위한 경계 박스(bounding box)를 결정하는 단계; 및 터치 스크린 디스플레이 상에서 제 1 다중 손가락 제스처를 검출한 것에 응답하여, 터치 스크린 디스플레이 상에서 경계 박스 내의 점 주위에서 사용자 인터페이스 내의 콘텐츠를 제1 배율보다 큰 제2 배율로 확대하는 단계를 포함한다. 경계 박스 내의 점는 경계 박스가 터치 스크린 디스플레이의 중심에 위치된 때 경계 박스 내의 디폴트 위치에 있다. 경계 박 스가 터치 스크린 디스플레이의 중심으로부터 벗어나서 위치될 때, 경계 박스 내의 점는 경계 박스 내의 디폴 트 위치로부터 경계 박스의 개별 에지를 향해, 터치 스크린 디스플레이의 중심으로부터 터치 스크린 디스플레 이의 대응하는 에지를 향한 경계 박스의 변위에 대응하는 양만큼 옮겨진다. [0027] [0028] [0029] [0030] 일부 실시예들에서, 중심을 갖는 터치 스크린 디스플레이를 구비하는 액세스가능한 전자 장치 상의 그래픽 사 용자 인터페이스는 터치 스크린 디스플레이 상에서 제1 배율로 디스플레이되는 콘텐츠를 포함한다. 터치 스 크린 디스플레이 상에서 제1 다중 손가락 제스처가 검출된다. 제1 다중 손가락 제스처를 검출하는 것은 터치 스크린 디스플레이 상에서 동시적인 다중 손가락 접촉들을 검출하는 것을 포함한다. 동시적인 다중 손가락 접촉들을 위한 경계 박스가 결정된다. 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출한 것 에 응답하여, 터치 스크린 디스플레이 상에서 경계 박스 내의 점 주위에서 사용자 인터페이스 내의 콘텐츠가 제1 배율보다 큰 제2 배율로 확대된다. 경계 박스 내의 점는 경계 박스가 터치 스크린 디스플레이의 중심에 위치된 때 경계 박스 내의 디폴트 위치에 있다. 경계 박스가 터치 스크린 디스플레이의 중심으로부터 벗어나 서 위치될 때, 경계 박스 내의 점는 경계 박스 내의 디폴트 위치로부터 경계 박스의 개별 에지를 향해, 터치 스크린 디스플레이의 중심으로부터 터치 스크린 디스플레이의 대응하는 에지를 향한 경계 박스의 변위에 대응 하는 양만큼 옮겨진다. 일부 실시예들에서, 액세스가능한 전자 장치는 중심을 갖는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 메모리 내에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 제1 배 율로 디스플레이하고; 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출하고 -제1 다중 손가락 제스처를 검출하는 것은 터치 스크린 디스플레이 상에서 동시적인 다중 손가락 접촉들을 검출하는 것을 포함 함- ; 동시적인 다중 손가락 접촉들을 위한 경계 박스를 결정하고; 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출한 것에 응답하여, 터치 스크린 디스플레이 상에서 경계 박스 내의 점 주위에서 사용자 인터페이스 내의 콘텐츠를 제1 배율보다 큰 제2 배율로 확대하기 위한 명령어들을 포함한다. 경계 박스 내의 점는 경계 박스가 터치 스크린 디스플레이의 중심에 위치된 때 경계 박스 내의 디폴트 위치에 있다. 경계 박 스가 터치 스크린 디스플레이의 중심으로부터 벗어나서 위치될 때, 경계 박스 내의 점는 경계 박스 내의 디폴 트 위치로부터 경계 박스의 개별 에지를 향해, 터치 스크린 디스플레이의 중심으로부터 터치 스크린 디스플레 이의 대응하는 에지를 향한 경계 박스의 변위에 대응하는 양만큼 옮겨진다. 일부 실시예들에서, 컴퓨터 판독가능한 저장 매체는 중심을 갖는 터치 스크린 디스플레이를 구비하는 액세스 가능한 전자 장치에 의해 실행될 때, 장치로 하여금, 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 제1 배율로 디스플레이하고; 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출하고 - 제1 다중 손가락 제스처를 검출하는 것은 터치 스크린 디스플레이 상에서 동시적인 다중 손가락 접촉들을 검 출하는 것을 포함함- ; 동시적인 다중 손가락 접촉들을 위한 경계 박스를 결정하고; 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출한 것에 응답하여, 터치 스크린 디스플레이 상에서 경계 박스 내의 점 주위에서 사용자 인터페이스 내의 콘텐츠를 제1 배율보다 큰 제2 배율로 확대하게 하는 명령어들을 저장한다. 경계 박스 내의 점는 경계 박스가 터치 스크린 디스플레이의 중심에 위치된 때 경계 박스 내의 디폴트 위치에 있다. 경계 박스가 터치 스크린 디스플레이의 중심으로부터 벗어나서 위치될 때, 경계 박스 내의 점는 경계 박스 내의 디폴트 위치로부터 경계 박스의 개별 에지를 향해, 터치 스크린 디스플레이의 중심으로부터 터치 스크린 디스플레이의 대응하는 에지를 향한 경계 박스의 변위에 대응하는 양만큼 옮겨진다. 일부 실시예들에서, 액세스가능한 전자 장치는 중심을 갖는 터치 스크린 디스플레이; 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 제1 배율로 디스플레이하기 위한 수단; 터치 스크린 디스플레이 상 에서 제1 다중 손가락 제스처를 검출하기 위한 수단 -제1 다중 손가락 제스처를 검출하는 것은 터치 스크린 디스플레이 상에서 동시적인 다중 손가락 접촉들을 검출하는 것을 포함함- ; 동시적인 다중 손가락 접촉들을 위한 경계 박스를 결정하기 위한 수단; 및 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출한 것에 응답하여, 터치 스크린 디스플레이 상에서 경계 박스 내의 점 주위에서 사용자 인터페이스 내의 콘텐츠 를 제1 배율보다 큰 제2 배율로 확대하기 위한 수단을 포함한다. 경계 박스 내의 점는 경계 박스가 터치 스 크린 디스플레이의 중심에 위치된 때 경계 박스 내의 디폴트 위치에 있다. 경계 박스가 터치 스크린 디스플 레이의 중심으로부터 벗어나서 위치될 때, 경계 박스 내의 점는 경계 박스 내의 디폴트 위치로부터 경계 박스 - 12 -
의 개별 에지를 향해, 터치 스크린 디스플레이의 중심으로부터 터치 스크린 디스플레이의 대응하는 에지를 향 한 경계 박스의 변위에 대응하는 양만큼 옮겨진다. [0031] [0032] [0033] [0034] [0035] 일부 실시예들에서, 액세스가능한 전자 장치에서 사용하기 위한 정보 처리 장치가 제공되는데, 여기에서 액세 스가능한 전자 장치는 중심을 갖는 터치 스크린 디스플레이를 포함한다. 정보 처리 장치는 터치 스크린 디스 플레이 상에서 사용자 인터페이스 내의 콘텐츠를 제1 배율로 디스플레이하기 위한 수단; 터치 스크린 디스플 레이 상에서 제1 다중 손가락 제스처를 검출하기 위한 수단 -제1 다중 손가락 제스처를 검출하는 것은 터치 스크린 디스플레이 상에서 동시적인 다중 손가락 접촉들을 검출하는 것을 포함함- ; 동시적인 다중 손가락 접 촉들을 위한 경계 박스를 결정하기 위한 수단; 및 터치 스크린 디스플레이 상에서 제1 다중 손가락 제스처를 검출한 것에 응답하여, 터치 스크린 디스플레이 상에서 경계 박스 내의 점 주위에서 사용자 인터페이스 내의 콘텐츠를 제1 배율보다 큰 제2 배율로 확대하기 위한 수단을 포함한다. 경계 박스 내의 점는 경계 박스가 터 치 스크린 디스플레이의 중심에 위치된 때 경계 박스 내의 디폴트 위치에 있다. 경계 박스가 터치 스크린 디 스플레이의 중심으로부터 벗어나서 위치될 때, 경계 박스 내의 점는 경계 박스 내의 디폴트 위치로부터 경계 박스의 개별 에지를 향해, 터치 스크린 디스플레이의 중심으로부터 터치 스크린 디스플레이의 대응하는 에지 를 향한 경계 박스의 변위에 대응하는 양만큼 옮겨진다. 일부 실시예들에서, 터치 스크린 디스플레이를 구비하는 액세스가능한 전자 장치에서 방법이 수행된다. 방법 은, 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 디스플레이하는 단계; 터치 스크린 디 스플레이 상에서 복수의 동시적인 손가락 접촉을 검출하는 단계; 터치 스크린 디스플레이 상에서 복수의 동시 적인 손가락 접촉의 이동을 검출하는 단계; 복수의 동시적인 손가락 접촉의 이동에 따라 사용자 인터페이스 내의 콘텐츠를 스크롤하는 단계; 남아있는 한 손가락 접촉을 계속하여 검출하면서, 복수의 동시적인 손가락 접촉 중 하나를 제외한 전부의 리프트오프를 검출하는 단계; 남아있는 한 손가락 접촉이 터치 스크린 디스플 레이의 미리 정의된 중심부에 위치될 때, 사용자 인터페이스 내의 콘텐츠의 스크롤을 중단하는 단계; 및 남아 있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 보더 부분에 위치될 때, 사용자 인터페이스 내 의 콘텐츠를 스크롤하는 단계를 포함한다. 일부 실시예들에서, 터치 스크린 디스플레이를 구비하는 액세스가능한 전자 장치 상의 GUI는 터치 스크린 상 에 디스플레이되는 콘텐츠를 포함한다. 복수의 동시적인 손가락 접촉이 터치 스크린 디스플레이 상에서 검출 된다. 터치 스크린 디스플레이 상에서의 복수의 동시적인 손가락 접촉의 이동이 검출된다. 사용자 인터페이 스 내의 콘텐츠는 복수의 동시적인 손가락 접촉의 이동에 따라 스크롤된다. 남아있는 한 손가락 접촉을 계속 하여 검출하면서, 복수의 동시적인 손가락 접촉 중 하나를 제외한 전부의 리프트오프가 검출된다. 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 중심 부분에 위치될 때, 사용자 인터페이스 내의 콘 텐츠의 스크롤이 중단된다. 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 보더 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠가 스크롤된다. 일부 실시예들에서, 액세스가능한 전자 장치는 터치 스크린 디스플레이, 하나 이상의 프로세서, 메모리, 및 메모리 내에 저장되고 하나 이상의 프로세서에 의해 실행되도록 구성된 하나 이상의 프로그램을 포함한다. 하나 이상의 프로그램은, 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 디스플레이하고; 터치 스크린 디스플레이 상에서 복수의 동시적인 손가락 접촉을 검출하고; 터치 스크린 디스플레이 상에서 복 수의 동시적인 손가락 접촉의 이동을 검출하고; 복수의 동시적인 손가락 접촉의 이동에 따라 사용자 인터페이 스 내의 콘텐츠를 스크롤하고; 남아있는 한 손가락 접촉을 계속하여 검출하면서, 복수의 동시적인 손가락 접 촉 중 하나를 제외한 전부의 리프트오프를 검출하고; 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 중심 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠의 스크롤을 중단하고; 남아있는 한 손가 락 접촉이 터치 스크린 디스플레이의 미리 정의된 보더 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠를 스크롤하기 위한 명령어들을 포함한다. 일부 실시예들에서, 컴퓨터 판독가능한 저장 매체에는, 터치 스크린 디스플레이를 구비하는 액세스가능한 전 자 장치에 의해 실행될 때, 장치로 하여금, 터치 스크린 디스플레이 상에서 사용자 인터페이스 내의 콘텐츠를 디스플레이하고; 터치 스크린 디스플레이 상에서 복수의 동시적인 손가락 접촉을 검출하고; 터치 스크린 디스 플레이 상에서 복수의 동시적인 손가락 접촉의 이동을 검출하고; 복수의 동시적인 손가락 접촉의 이동에 따라 사용자 인터페이스 내의 콘텐츠를 스크롤하고; 남아있는 한 손가락 접촉을 계속하여 검출하면서, 복수의 동시 적인 손가락 접촉 중 하나를 제외한 전부의 리프트오프를 검출하고; 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 중심 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠의 스크롤을 중단하고; 남 아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 보더 부분에 위치될 때, 사용자 인터페이스 - 13 -
내의 콘텐츠를 스크롤하게 하기 위한 명령어들이 저장되어 있다. [0036] [0037] [0038] 일부 실시예들에서, 액세스가능한 전자 장치는 터치 스크린 디스플레이; 터치 스크린 디스플레이 상에서 사용 자 인터페이스 내의 콘텐츠를 디스플레이하기 위한 수단; 터치 스크린 디스플레이 상에서 복수의 동시적인 손 가락 접촉을 검출하기 위한 수단; 터치 스크린 디스플레이 상에서 복수의 동시적인 손가락 접촉의 이동을 검 출하기 위한 수단; 복수의 동시적인 손가락 접촉의 이동에 따라 사용자 인터페이스 내의 콘텐츠를 스크롤하기 위한 수단; 남아있는 한 손가락 접촉을 계속하여 검출하면서, 복수의 동시적인 손가락 접촉 중 하나를 제외한 전부의 리프트오프를 검출하기 위한 수단; 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 중심 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠의 스크롤을 중단하기 위한 수단; 및 남아있는 한 손 가락 접촉이 터치 스크린 디스플레이의 미리 정의된 보더 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠 를 스크롤하기 위한 수단을 포함한다. 일부 실시예들에서, 액세스가능한 전자 장치 내에서 사용하기 위한 정보 처리 장치가 제공되는데, 액세스가능 한 전자 장치는 터치 스크린 디스플레이를 포함한다. 정보 처리 장치는 터치 스크린 디스플레이 상에서 사용 자 인터페이스 내의 콘텐츠를 디스플레이하기 위한 수단; 터치 스크린 디스플레이 상에서 복수의 동시적인 손 가락 접촉을 검출하기 위한 수단; 터치 스크린 디스플레이 상에서 복수의 동시적인 손가락 접촉의 이동을 검 출하기 위한 수단; 복수의 동시적인 손가락 접촉의 이동에 따라 사용자 인터페이스 내의 콘텐츠를 스크롤하기 위한 수단; 남아있는 한 손가락 접촉을 계속하여 검출하면서, 복수의 동시적인 손가락 접촉 중 하나를 제외한 전부의 리프트오프를 검출하기 위한 수단; 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 중심 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠의 스크롤을 중단하기 위한 수단; 남아있는 한 손가락 접촉이 터치 스크린 디스플레이의 미리 정의된 보더 부분에 위치될 때, 사용자 인터페이스 내의 콘텐츠를 스 크롤하기 위한 수단을 포함한다. 따라서, 디스플레이 및 터치 감지형 표면을 갖는 전자 장치들에 새롭고 개선된 접근성 방법 및 사용자 인터페 이스가 제공되고, 따라서 유효성, 효율성 및 그러한 장치들에 대한 사용자 만족도가 증가된다. 그러한 방법 및 인터페이스는 현존하는 접근성 방법들을 보완하거나 대체할 수 있다. [0039] 도면의 간단한 설명 본 발명의 상술한 실시예들 및 추가의 실시예들을 더 잘 이해하기 위해, 도면들 전체에서 유사한 참조 번호들 이 대응 부분들을 참조하고 있는 이하의 도면들과 함께, 아래의 실시예들의 설명이 참조되어야 한다. 도 1a 및 도 1b는 일부 실시예들에 따른 터치 감지 디스플레이를 갖는 휴대용 다기능 장치들을 도시한 블록도 이다. 도 2는 일부 실시예들에 따른 터치 스크린을 갖는 휴대용 다기능 장치를 도시한 것이다. 도 3은 일부 실시예들에 따른 디스플레이 및 터치 감지형 표면을 구비하는 예시적인 컴퓨팅 장치의 블록도이 다. 도 4a-4b는 일부 실시예들에 따른 휴대용 다기능 장치 상의 애플리케이션들의 메뉴를 위한 예시적인 사용자 인터페이스들을 도시한 것이다. 도 4c는 일부 실시예들에 따른 휴대용 전자 장치를 잠금해제하기 위한 예시적인 사용자 인터페이스를 도시한 것이다. 도 5a-5qq는 일부 실시예들에 따른 터치 감지형 표면을 구비하는 전자 장치를 위한 접근성 사용자 인터페이스 들을 도시한 것이다. 도 6a-6t는 일부 실시예들에 따라 개별 사용자 인터페이스 컨테이너들을 터치 감지형 표면에 맵핑하는 접근성 사용자 인터페이스들을 도시한 것이다. 도 7a-7c는 일부 실시예들에 따른 사용자 인터페이스 요소들 간에서의 터치 기반 네비게이션을 위한 접근성 방법을 도시한 흐름도들이다. 도 8a-8b는 일부 실시예들에 따라 문서 섹션 표시를 전달하기 위한 접근성 방법을 도시한 흐름도들이다. 도 9a-9b는 일부 실시예들에 따라 사용자 인터페이스 네비게이션 설정들을 조절하기 위해 위치 독립적인 제스 처들을 사용하는 접근성 방법을 도시한 흐름도들이다. - 14 -
도 10a-10c는 일부 실시예들에 따라 사용자 인터페이스 컨테이너들을 통해 네비게이트하기 위한 접근성 방법 을 도시한 흐름도들이다. 도 11a-11b는 일부 실시예들에 따라 다중 손가락 경계 박스 내의 점 주위에서 확대를 수행하기 위한 접근성 방법을 도시한 흐름도들이다. 도 12a-12b는 일부 실시예들에 따른 싱글손가락 푸시 패닝을 위한 접근성 방법을 도시한 흐름도들이다. [0040] [0041] [0042] [0043] [0044] [0045] 발명을 실시하기 위한 구체적인 내용 이하에서는, 실시예들이 상세하게 참조될 것이며, 그 실시예들의 예들이 첨부 도면들에 도시되어 있다. 이하 의 상세한 설명에서, 본 발명의 완전한 이해를 제공하기 위해, 다수의 구체적인 상세들이 제시된다. 그러나, 본 기술분야에 통상의 지식을 가진 자라면, 본 발명이 그러한 구체적인 상세 없이도 실시될 수 있음을 분명히 알 것이다. 다른 경우들에서, 공지된 방법들, 절차들, 컴포넌트들, 회로들 및 네트워크들은 실시예들의 양태 들을 불필요하게 모호하게 하지 않기 위해, 상세하게 설명되지 않는다. 또한, 다양한 요소들을 설명하기 위해 제1, 제2 등의 용어가 여기에서 이용될 수 있지만, 이러한 요소들은 이 러한 용어들에 의해 제한되어서는 안 된다는 점을 이해할 것이다. 이러한 용어들은 한 요소를 다른 요소로부 터 구별하기 위해서만 이용된다. 예를 들어, 본 발명의 범위를 벗어나지 않고서, 제1 접촉이 제2 접촉이라고 칭해질 수 있으며, 마찬가지로, 제2 접촉이 제1 접촉이라고 칭해질 수 있다. 제1 접촉 및 제2 접촉 둘 다가 접촉이지만, 이들은 동일한 접촉은 아니다. 여기에서의 발명의 설명에서 이용되는 용어들은 오직 특정 실시예들을 설명하기 위한 것이며, 발명을 제한하 도록 의도된 것이 아니다. 발명의 설명 및 첨부된 청구항들에서 이용될 때, 단수 형태("a", "an" 및 "the") 는 문맥상 명백하게 다르게 나타나지 않는 한은, 복수 형태도 물론 포함하도록 의도된 것이다. "표시 (indicia)"의 사용은 그 용어의 단수 용법("indicium") 또는 복수 형태("indicia") 중 어느 하나 또는 둘 다 를 나타낼 수 있으며, 그 반대도 마찬가지이다. 또한, 여기에서 사용될 때의 "및/또는"이라는 용어는 나열된 관련 항목들 중 하나 이상의 임의의 모든 가능한 조합들을 참조하며 그들을 포괄하는 것임을 이해할 것이다. 본 명세서에서 사용될 때의 "포함한다 (comprises)" 및/또는 "포함하는(comprising)"이라는 용어는 명시된 특징들, 정수들, 단계들, 동작들, 요소들 및/또는 컴포넌트들의 존재를 지정하지만, 하나 이상의 다른 특징들, 정수들, 단계들, 동작들, 요소들, 컴포 넌트들 및/또는 그들의 그룹의 존재 또는 추가를 배제하지 않음을 더 이해할 것이다. 여기에서 이용될 때, "~는 경우(if)"라는 용어는 "~할 때(when)" 또는 "~ 시(upon)", 또는 문맥에 따라 "결정 한 것에 응답하여(in response to determining)" 또는 "검출한 것에 응답하여"를 의미하는 것으로 해석될 수 있다. 마찬가지로, "결정된 경우" 또는 "[명시된 조건 또는 이벤트가] 검출된 경우"라는 구문은 문맥에 따라, "결정 시" 또는 "결정한 것에 응답하여" 또는 "[명시된 조건 또는 이벤트의] 검출 시", 또는 "[명시된 조건 또는 이벤트를] 검출한 것에 응답하여"를 의미하는 것으로 해석될 수 있다. 컴퓨팅 장치들, 그러한 장치들을 위한 사용자 인터페이스들, 및 그러한 장치들을 이용하기 위한 관련 프로세 스들의 실시예들이 설명된다. 일부 실시예들에서, 컴퓨팅 장치는 PDA 및/또는 음악 재생기 기능과 같은 기타 기능들도 포함하는 이동 전화와 같은 휴대용 통신 장치이다. 휴대용 다기능 장치의 예시적인 실시예들은, 제 한없이, 캘리포니아 쿠퍼티노의 Apple, Inc.로부터의 iphone 및 ipod Touch 장치를 포함한다. [0046] [0047] [0048] 이하의 논의에서, 디스플레이 및 터치 감지형 표면을 포함하는 컴퓨팅 장치가 설명된다. 그러나, 컴퓨팅 장 치는 물리적 키보드, 마우스 및/또는 조이스틱과 같은 하나 이상의 다른 물리적 사용자 인터페이스 장치를 포 함할 수 있음을 이해해야 한다. 장치는 드로잉 애플리케이션, 프레젠테이션 애플리케이션, 워드 프로세싱 애플리케이션, 웹사이트 생성 애플 리케이션, 디스크 조작 애플리케이션, 스프레드시트 애플리케이션, 게임 애플리케이션, 전화 애플리케이션, 화상 회의 애플리케이션, 이메일 애플리케이션, 인스턴트 메시징 애플리케이션, 음성 메모 애플리케이션, 사 진 관리 애플리케이션, 디지털 카메라 애플리케이션, 디지털 비디오 카메라 애플리케이션, 웹 브라우징 애플 리케이션, 디지털 음악 재생기 애플리케이션 및/또는 디지털 비디오 재생기 애플리케이션 중 하나 이상과 같 은 다양한 애플리케이션들을 지원한다. 장치 상에서 실행될 수 있는 다양한 애플리케이션들은 터치 감지형 표면과 같은 적어도 하나의 공통의 물리적 - 15 -
사용자 인터페이스 장치를 사용할 수 있다. 터치 감지형 표면의 하나 이상의 기능과 장치 상에 디스플레이되 는 대응하는 정보는 애플리케이션마다 및/또는 각각의 애플리케이션 내에서 조절될 수 있고/거나 변경될 수 있다. 이러한 방식으로, 장치의 (터치 감지형 표면과 같은) 공통의 물리적 아키텍처가 직관적이고 투명한 사 용자 인터페이스들로 다양한 애플리케이션들을 지원할 수 있다. [0049] [0050] [0051] [0052] [0053] [0054] [0055] 사용자 인터페이스들은 하나 이상의 소프트 키보드 구현을 포함할 수 있다. 소프트 키보드 구현은 표준 (QWERTY) 구성, 및/또는 2006년 7월 24일에 출원된 미국 특허 출원 제11/459,606호 "Keyboards For Portable Electronic Devices" 및 2006년 7월 24일에 출원된 제11/459,615호 "Touch Screen Keyboards For Portable Electronic Devices"에 기술된 것들과 같은 키보드의 디스플레이된 아이콘들 상의 심볼들의 비표준 구성을 포 함할 수 있으며, 이 출원들의 내용은 그 전체가 여기에 참조에 의해 포함된다. 키보드 구현들은 타자기를 위 한 것과 같은 현존하는 물리적 키보드들 내의 키의 개수에 비해 감소된 개수의 아이콘(또는 소프트 키)을 포 함할 수 있다. 이것은 사용자가 키보드 내에서 하나 이상의 아이콘, 그리고 따라서 하나 이상의 대응하는 심 볼을 선택하는 것을 더 쉽게 할 수 있다. 키보드 구현들은 적응적일 수 있다. 예를 들어, 디스플레이된 아 이콘들은 하나 이상의 아이콘 및/또는 하나 이상의 대응하는 심볼을 선택하는 것과 같은 사용자 액션에 따라 수정될 수 있다. 장치 상의 하나 이상의 애플리케이션은 공통의 및/또는 상이한 키보드 구현들을 이용할 수 있다. 따라서, 이용되는 키보드 구현은 애플리케이션들 중 적어도 일부에 맞춰질 수 있다. 일부 실시예들에 서, 하나 이상의 키보드 구현은 개별 사용자에게 맞춰질 수 있다. 예를 들어, 하나 이상의 키보드 구현은 개 별 사용자의 단어 사용 이력(사전편집(lexicography), 은어(slang), 개별 사용)에 기초하여 개별 사용자에게 맞춰질 수 있다. 키보드 구현들 중 일부는 소프트 키보드 구현들을 이용하는 경우, 하나 이상의 아이콘, 그 리고 따라서 하나 이상의 심볼을 선택할 때의 사용자 에러의 확률을 감소시키도록 조절될 수 있다. 이제, 터치 감지 디스플레이를 구비하는 휴대용 장치들의 실시예들에 주목하기로 한다. 도 1a 및 도 1b는 일 부 실시예들에 따른 터치 감지 디스플레이들(112)을 구비하는 휴대용 다기능 장치들(100)을 도시한 블록도들 이다. 터치 감지 디스플레이(112)는 때로는 편의상 "터치 스크린"이라고 불리우며, 또한 터치 감지 디스플레 이 시스템으로서 알려져 있거나 그와 같이 불리울 수 있다. 장치(100)는 메모리(102)(하나 이상의 컴퓨터 판 독가능한 저장 매체를 포함할 수 있음), 메모리 제어기(122), 하나 이상의 처리 유닛(CPU)(120), 주변장치 인 터페이스(118), RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 입력/출력(I/O) 서브시스템 (106), 다른 입력 또는 제어 장치들(116) 및 외부 포트(124)를 포함할 수 있다. 장치(100)는 하나 이상의 광 학 센서(164)를 포함할 수 있다. 이러한 컴포넌트들은 하나 이상의 통신 버스 또는 신호선(103)을 통해 통신 할 수 있다. 장치(100)는 휴대용 다기능 장치(100)의 일례일 뿐이며, 장치(100)는 도시된 것보다 더 많거나 더 적은 컴포 넌트들을 가질 수 있거나, 둘 이상의 컴포넌트를 결합할 수 있거나, 컴포넌트들의 상이한 구성 또는 배열을 가질 수 있음을 알아야 한다. 도 1a 및 도 1b에 도시된 다양한 컴포넌트들은 하나 이상의 신호 처리 및/또는 애플리케이션 특정 집적 회로를 포함하여, 하드웨어, 소프트웨어, 또는 하드웨어 및 소프트웨어 둘 다의 조합 으로 구현될 수 있다. 메모리(102)는 고속 랜덤 액세스 메모리를 포함할 수 있으며, 하나 이상의 자기 디스크 저장 장치, 플래시 메 모리 장치들, 또는 기타 비휘발성 고상 메모리 장치들과 같은 비휘발성 메모리도 포함할 수 있다. CPU(120) 및 주변장치 인터페이스(118)와 같은 장치(100)의 다른 컴포넌트들에 의한 메모리(102)에의 액세스는 메모리 제어기(122)에 의해 제어될 수 있다. 주변장치 인터페이스(118)는 장치의 입력 및 출력 주변장치를 CPU(120) 및 메모리(102)에 연결한다. 하나 이 상의 프로세서(120)는 장치(100)를 위해 다양한 기능들을 수행하고 데이터를 처리하기 위해 메모리(102) 내에 저장된 다양한 소프트웨어 프로그램들 및/또는 명령어들의 집합들을 실행 또는 수행한다. 일부 실시예들에서, 주변장치 인터페이스(118), CPU(120) 및 메모리 제어기(122)는 칩(104)과 같은 단일 칩 상에서 구현될 수 있다. 일부 다른 실시예들에서, 그들은 별개의 칩들 상에서 구현될 수 있다. RF(radio frequency) 회로(108)은 전자기 신호라고도 칭해지는 RF 신호를 수신하고 송신한다. RF 회로(108) 은 전기 신호와 전자기 신호를 상호변환하고, 전자기 신호를 통해 통신 네트워크 및 기타 통신 장치와 통신한 다. RF 회로(108)은 안테나 시스템, RF 송수신기, 하나 이상의 증폭기, 튜너, 하나 이상의 발진기, 디지털 신호 프로세서, CODEC 칩셋, SIM(subscriber identity module) 카드, 메모리 등을 포함하지만 그에 제한되지 는 않는, 이러한 기능들을 수행하기 위한 공지된 회로를 포함할 수 있다. RF 회로(108)은 WWW(World Wide Web)라고도 칭해지는 인터넷, 인트라넷, 및/또는 셀룰러 전화 네트워크, 무선 LAN(local area network) 및/또 - 16 -
는 MAN(metropolitan area network)과 같은 무선 네트워크와 같은 네트워크, 및 다른 장치들과 무선 통신에 의해 통신할 수 있다. 무선 통신은 GSM(Global System for Mobile Communications), EDGE(Enhanced Data GSM Environment), HSDPA(high-speed downlink packet access), W-CDMA(wideband code division multiple access), CDMA(code division multiple access), TDMA(time division multiple access), 블루투스, Wi- Fi(Wireless Fidelity)(예를 들어, IEEE 802.11a, IEEE 802.11b, IEEE 802.11g 및/또는 IEEE 802.11n), VoIP(voice over Internet Protocol), Wi-MAX, 이메일을 위한 프로토콜(예를 들어, IMAP(Internet message access protocol) 및/또는 POP(post office protocol)), 인스턴트 메시징(예를 들어, XMPP(extensible messaging and presence protocol), SIMPLE(Session Initiation Protocol for Instant Messaging and Presence Leveraging Extensions), IMPS(Instant Messaging and Presence Service) 및/또는 SMS(Short Message Service)), 또는 본 문서의 출원일 현재 아직 개발되지 않은 통신 프로토콜을 포함하는 임의의 다른 적합한 통신 프로토콜을 포함하지만 그에 제한되지는 않는 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것 을 이용할 수 있다. [0056] [0057] [0058] [0059] 오디오 회로(110), 스피커(111) 및 마이크로폰(113)은 사용자와 장치(100) 간의 오디오 인터페이스를 제공한 다. 오디오 회로(110)은 주변장치 인터페이스(118)로부터 오디오 데이터를 수신하고, 오디오 데이터를 전기 신호로 변환하고, 전기 신호를 스피커(111)에 전송한다. 스피커(111)는 전기 신호를 사람이 들을 수 있는 음 파로 변환한다. 오디오 회로(110)은 또한 마이크로폰(113)에 의해 음파로부터 변환된 전기 신호를 수신한다. 오디오 회로(110)은 전기 신호를 오디오 데이터로 변환하고, 오디오 데이터를 처리를 위하여 주변장치 인터페 이스(118)에 전송한다. 오디오 데이터는 주변장치 인터페이스(118)에 의해 메모리(102) 및/또는 RF 회로 (108)으로부터 검색되고/거나 그에 전송된다. 일부 실시예들에서, 오디오 회로(110)은 또한 헤드셋 잭(예를 들어, 도 2의 212)을 포함한다. 헤드셋 잭은 출력 전용 헤드폰, 또는 출력(예를 들어, 한쪽 또는 양쪽 귀를 위한 헤드폰) 및 입력(예를 들어, 마이크로폰) 둘 다를 갖는 헤드셋과 같은 분리가능한 오디오 입력/출력 주 변장치들과 오디오 회로(110) 간의 인터페이스를 제공한다. I/O 서브시스템(106)은 터치 스크린(112) 및 기타 입력/제어 장치들(116)과 같은 장치(100) 상의 입력/출력 주변장치들을 주변장치 인터페이스(118)에 연결한다. I/O 서브시스템(106)은 디스플레이 제어기(156), 및 기 타 입력 또는 제어 장치들을 위한 하나 이상의 입력 제어기(160)를 포함할 수 있다. 하나 이상의 입력 제어 기(160)는 다른 입력 또는 제어 장치들(116)로부터/로 전기 신호들을 수신/송신한다. 다른 입력/제어 장치들 (116)은 물리적 버튼(예를 들어, 푸시 버튼, 로커 버튼(rocker buttons) 등), 다이얼, 슬라이더 스위치, 조이 스틱, 클릭 휠 및 기타 등등을 포함할 수 있다. 일부 대안적인 실시예들에서, 입력 제어기(들)(160)는 키보 드, 적외선 포트, USB 포트, 및 마우스와 같은 포인터 장치 중 임의의 것에 연결될 수 있다 (또는 어떤 것에 도 연결되지 않을 수 있다). 하나 이상의 버튼(예를 들어, 도 2의 208)은 스피커(111) 및/또는 마이크로폰 (113)의 음량 제어를 위한 업/다운 버튼을 포함할 수 있다. 하나 이상의 버튼은 푸시 버튼(예를 들어, 도 2 의 206)을 포함할 수 있다. 푸시 버튼을 빠르게 누르는 것은 터치 스크린(112)의 잠금을 해제하거나, 또는 2005년 12월 23일에 출원된 미국 특허 출원 제11/322,549호 "Unlocking a Device by Performing Gestures on an Unlock Image"에 설명된 것과 같이, 장치를 잠금해제하기 위해 터치 스크린 상에서의 제스처들을 이용하는 프로세스를 시작할 수 있는데, 이 출원은 그 전체가 여기에 참조에 의해 포함된다. 푸시 버튼(예를 들어, 206)을 더 길게 누르는 것은 장치(100)의 전원을 온 또는 오프로 할 수 있다. 사용자는 버튼들 중 하나 이상 의 기능성을 커스터마이즈할 수 있을 수 있다. 터치 스크린(112)은 가상 또는 소프트 버튼들 및 하나 이상의 소프트 키보드를 구현하기 위해 이용된다. 터치 감지 터치 스크린(112)은 장치와 사용자 간의 입력 인터페이스 및 출력 인터페이스를 제공한다. 디스플 레이 제어기(156)는 터치 스크린(112)으로부터/으로 전기 신호들을 수신 및/또는 송신한다. 터치 스크린 (112)은 사용자에게 시각적 출력을 디스플레이한다. 시각적 출력은 그래픽, 텍스트, 아이콘, 비디오 및 그들 의 임의의 조합(총칭하여 "그래픽"이라고 함)을 포함할 수 있다. 일부 실시예들에서, 시각적 출력의 일부 또 는 전부는 사용자 인터페이스 개체들에 대응할 수 있다. 터치 스크린(112)은 햅틱 및/또는 촉각 접촉에 기초하는 사용자로부터의 입력을 받아들이는 터치 감지형 표면, 센서들 또는 센서들의 집합을 갖는다. 터치 스크린(112) 및 디스플레이 제어기(156)는 (메모리(102) 내의 임의의 관련 모듈들 및/또는 명령어들의 집합과 함께) 터치 스크린(112) 상의 접촉(및 접촉의 임의의 이 동 또는 단절)을 검출하고, 검출된 접촉을 터치 스크린 상에 디스플레이된 사용자 인터페이스 개체들(예를 들 어, 하나 이상의 소프트 키, 아이콘, 웹 페이지 또는 이미지들)과의 상호작용으로 변환한다. 예시적인 실시 예에서, 터치 스크린(112)과 사용자 간의 접촉의 점는 사용자의 손가락에 대응한다. - 17 -
[0060] [0061] [0062] [0063] [0064] [0065] [0066] 다른 실시예들에서는 다른 디스플레이 기술들이 이용될 수 있긴 하지만, 터치 스크린(112)은 LCD(liquid crystal display) 기술, 또는 LPD(light emitting polymer display) 기술을 이용할 수 있다. 터치 스크린 (112) 및 디스플레이 제어기(156)는, 터치 스크린(112)과의 하나 이상의 접촉 점를 결정하기 위해, 정전용량 식, 저항식, 적외선 및 표면 음향파 기술들과, 기타 근접 센서 어레이들 또는 기타 요소들을 포함하지만 그에 제한되지는 않는, 현재 알려져 있거나 추후에 개발될 복수의 터치 감지 기술 중 임의의 것을 이용하여, 접촉 및 그것의 임의의 이동 또는 단절을 검출할 수 있다. 예시적인 실시예에서, 캘리포니아 쿠퍼티노의 Apple Computer, Inc.로부터의 iphone 및 ipod Touch 에서 발견되는 것과 같은 투영 상호 정전용량식 감지 기술 (projected mutual capacitance sensing technology)이 이용된다. 터치 스크린(112)의 일부 실시예들에서의 터치 감지 디스플레이는 미국 특허 제6,323,846호(Westerman 등), 제6,570,557호(Westerman 등) 및/또는 제6,677,932호(Westerman), 및/또는 미국 특허 공개 제2002/0015024A1 호에 설명되어 있는 멀티터치 감지 태블릿과 유사할 수 있으며, 이 문헌들 각각은 그 전체가 여기에 참조에 의해 포함된다. 그러나, 터치 스크린(112)은 휴대용 장치(100)로부터의 시각적 출력을 디스플레이하는 반면, 터치 감지 태블릿들은 시각적 출력을 제공하지 않는다. 터치 스크린(112)의 일부 실시예들에서의 터치 감지 디스플레이는 (1) 2006년 5월 2일에 출원된 미국 특허 출 원 제11/381,313호 "Multipoint Touch Surface Controller"; (2) 2004년 5월 6일에 출원된 미국 특허 출원 제 10/840,862호 "Multipoint Touchscreen"; (3) 2004년 7월 30일에 출원된 미국 특허 출원 제10/903,964호 "Gestures For Touch Sensitive Input Devices"; (4) 2005년 1월 31일에 출원된 미국 특허 출원 제11/048,264 호 "Gestures For Touch Sensitive Input Devices"; (5) 2005년 1월 18일에 출원된 미국 특허 출원 제 11/038,590호 "Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices"; (6) 2005년 9월 16일에 출원된 미국 특허 출원 제11/228,758호 "Virtual Input Device Placement On A Touch Screen User Interface"; (7) 2005년 9월 16일에 출원된 미국 특허 출원 제11/228,700호 "Operation Of A Computer With A Touch Screen Interface"; (8) 2005년 9월 16일에 출원된 미국 특허 출원 제11/228,737호 "Activating Virtual Keys Of A Touch-Screen Virtual Keyboard"; 및 (9) 2006년 3월 3일에 출원된 미국 특허 출원 제 11/367,749호 "Multi-Functional Hand-Held Device"에 설명된 것과 같을 수 있다. 이 출원들 전부는 그 전체 가 여기에 참조에 의해 포함된다. 터치 스크린(112)은 100dpi를 초과하는 해상도를 가질 수 있다. 예시적인 실시예에서, 터치 스크린은 약 160dpi의 해상도를 갖는다. 사용자는 스타일러스, 손가락 및 기타 등등과 같은 임의의 적합한 개체 또는 부 속물을 이용하여 터치 스크린(112)과 접촉할 수 있다. 일부 실시예들에서, 사용자 인터페이스는 터치 스크린 상에서의 손가락의 넓은 접촉 면적으로 인해 스타일러스 기반 입력보다 훨씬 덜 정밀한 손가락 기반 접촉 및 제스처를 주로 이용하여 작업하도록 설계된다. 일부 실시예들에서, 장치는 대강의 손가락 기반 입력을 사용 자가 원하는 액션들을 수행하기 위한 정밀한 포인터/커서 위치 또는 커맨드로 변환한다. 일부 실시예들에서, 터치 스크린에 더하여, 장치(100)는 특정 기능을 활성화 또는 비활성화하기 위한 터치패 드(도시되지 않음)를 포함할 수 있다. 일부 실시예들에서, 터치패드는 터치 스크린과 달리, 시각적 출력을 디스플레이하지 않는 장치의 터치 감지 영역이다. 터치패드는 터치 스크린(112)으로부터 분리된 터치 감지형 표면일 수도 있고, 아니면 터치 스크린에 의해 형성된 터치 감지형 표면의 연장부일 수도 있다. 일부 실시예들에서, 장치(100)는 입력 제어 장치(116)로서 물리적 또는 가상 클릭 휠을 포함할 수 있다. 사 용자는 클릭 휠을 회전시키거나 클릭 휠과의 접촉 점를 이동시킴으로써(예를 들어, 여기에서 접촉 점의 이동 의 양은 클릭 휠의 중심 점에 대한 접촉 점의 각도 변위에 의해 측정됨), 터치 스크린(112) 내에 디스플레이 된 하나 이상의 그래픽 개체(예를 들어, 아이콘들) 간을 네비게이트하거나 그와 상호작용할 수 있다. 클릭 휠은 또한 디스플레이된 아이콘 중 하나 이상을 선택하기 위해 이용될 수 있다. 예를 들어, 사용자는 클릭 휠의 적어도 일부분 또는 연관된 버튼을 누를 수 있다. 클릭 휠을 통해 사용자에 의해 제공되는 사용자 커맨 드들 및 네비게이션 커맨드들은 입력 제어기(160)와, 메모리(102) 내의 모듈들 및/또는 명령어들의 집합들 중 하나 이상에 의해 처리될 수 있다. 가상 클릭 휠에 있어서, 클릭 휠 및 클릭 휠 제어기는 각각 터치 스크린 (112) 및 디스플레이 제어기(156)의 일부분일 수 있다. 가상 클릭 휠에 있어서, 클릭 휠은 장치와의 사용자 상호작용에 응답하여 터치 스크린 디스플레이 상에 나타나거나 사라지는 불투명 또는 반투명 개체일 수 있다. 일부 실시예들에서, 가상 클릭 휠은 휴대용 다기능 장치의 터치 스크린 상에 디스플레이되고, 터치 스크린과 의 사용자 접촉에 의해 조작된다. 장치(100)는 또한 다양한 컴포넌트들에 전력을 공급하기 위한 전력 시스템(162)을 포함한다. 전력 시스템 - 18 -
(162)은 전력 관리 시스템, 하나 이상의 전원(예를 들어, 배터리, AC(alternating current)), 재충전 시스템, 전력 고장 검출 회로, 전력 변환기 또는 인버터, 전력 상태 표시기(예를 들어, LED(light-emitting diode)), 및 휴대용 장치들 내에서의 전력의 생성, 관리 및 분산에 연관된 임의의 다른 컴포넌트들을 포함할 수 있다. [0067] [0068] [0069] [0070] [0071] [0072] 장치(100)는 또한 하나 이상의 광학 센서(164)를 포함할 수 있다. 도 1a 및 도 1b는 I/O 서브시스템(106) 내 의 광학 센서 제어기(158)에 연결된 광학 센서를 도시하고 있다. 광학 센서(164)는 CCD(charge-coupled device) 또는 CMOS(complementary metal-oxide semiconductor) 포토트랜지스터를 포함할 수 있다. 광학 센서 (164)는 하나 이상의 렌즈를 통해 투영된 주변환경으로부터의 광을 수신하고, 그 광을 이미지를 나타내는 데 이터로 변환한다. 광학 센서(164)는 이미징 모듈(143)(카메라 모듈이라고도 칭해짐)과 함께, 정지 이미지 또 는 비디오를 캡처할 수 있다. 일부 실시예들에서, 터치 스크린 디스플레이가 정지 및/또는 비디오 이미지 획 득을 위한 뷰파인더로서 이용될 수 있도록, 광학 센서는 장치 정면 상의 터치 스크린 디스플레이(112)에 반대 되게, 장치(100)의 뒤에 위치된다. 일부 실시예들에서, 사용자의 이미지가 화상회의를 위해 획득될 수 있으 면서, 사용자가 터치 스크린 디스플레이 상에서 다른 화상 회의 참가자들을 보도록, 광학 센서가 장치의 정면 에 위치된다. 일부 실시예들에서, 단일의 광학 센서(164)가 화상회의, 및 정지 및/또는 비디오 이미지 획득 둘 다를 위해 터치 스크린 디스플레이와 함께 이용될 수 있도록, 광학 센서(164)의 위치는 사용자에 의해 (예 를 들어, 장치 하우징 내의 렌즈 및 센서를 회전시킴으로써) 변경될 수 있다. 장치(100)는 또한 하나 이상의 근접 센서(166)를 포함할 수 있다. 도 1a 및 도 1b는 주변장치 인터페이스 (118)에 연결된 근접 센서(166)를 도시하고 있다. 대안적으로, 근접 센서(166)는 I/O 서브시스템(106) 내의 입력 제어기(160)에 연결될 수 있다. 근접 센서(166)는 미국 특허 출원 제11/241,839호 "Proximity Detector In Handheld Device"; 제11/240,788호 "Proximity Detector In Handheld Device"; 제11/620,702호 "Using Ambient Light Sensor To Augment Proximity Sensor Output"; 제11/586,862호 "Automated Response To And Sensing Of User Activity In Portable Devices"; 및 제11/638,251호 "Methods And Systems For Automatic Configuration Of Peripherals"에 설명된 것과 같이 작동할 수 있으며, 이들은 그 전체가 참조에 의해 여기에 포함된다. 일부 실시예들에서, 근접 센서는 다기능 장치가 사용자의 귀 근처에 위치된 때(예를 들어, 사용자 가 전화 통화를 하고 있을 때), 터치 스크린(112)을 턴오프하고 불능으로 한다. 일부 실시예들에서, 근접 센 서는 장치가 잠금 상태일 때 불필요한 배터리 누출을 방지하기 위해, 장치가 사용자의 주머니, 지갑 또는 기 타 어두운 영역에 있을 때 스크린을 오프로 유지한다. 장치(100)는 또한 하나 이상의 가속도계(168)를 포함할 수 있다. 도 1a 및 도 1b는 주변장치 인터페이스 (118)에 연결된 가속도계(168)를 도시하고 있다. 대안적으로, 가속도계(168)는 I/O 서브시스템(106) 내의 입 력 제어기(160)에 연결될 수 있다. 가속도계(168)는 미국 특허 공개 제20050190059호 "Acceleration-based Theft Detection System for Portable Electronic Devices" 및 미국 특허 공개 제20060017692호 "Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer"에 설명된 것과 같이 작동할 수 있 으며, 이들은 둘 다 그 전체가 참조에 의해 여기에 포함된다. 일부 실시예들에서, 정보는 하나 이상의 가속 도계로부터 수신된 데이터의 분석에 기초하여 터치 스크린 디스플레이 상에 세로보기 또는 가로보기로 디스플 레이된다. 일부 실시예들에서, 메모리(102) 내에 저장된 소프트웨어 컴포넌트들은 운영 체제(126), 통신 모듈(또는 명령 어들의 집합)(128), 접근성 모듈(129), 접촉/이동 모듈(또는 명령어들의 집합)(130), 그래픽 모듈(또는 명령 어들의 집합)(132), 첨부 파일 편집 모듈(133), 텍스트 입력 모듈(또는 명령어들의 집합)(134), GPS(Global Positioning System) 모듈(또는 명령어들의 집합)(135), 및 애플리케이션들(또는 명령어들의 집합)(136)을 포 함할 수 있다. 운영 체제(126)(예를 들어, Darwin, RTXC, LINUX, UNIX, OS X, WINDOWS, 또는 VxWorks와 같은 내장된 운영 체 제)는 일반적인 시스템 태스크들(예를 들어, 메모리 관리, 저장 장치 제어, 전력 관리 등)을 제어 및 관리하 기 위한 다양한 소프트웨어 컴포넌트들 및/또는 드라이버들을 포함하고, 다양한 하드웨어 및 소프트웨어 컴포 넌트들 간의 통신을 용이하게 한다. 통신 모듈(128)은 하나 이상의 외부 포트(124)를 통한 다른 장치들과의 통신을 용이하게 하고, RF 회로(108) 및/또는 외부 포트(124)에 의해 수신되는 데이터를 다루기 위한 다양한 소프트웨어 컴포넌트들도 포함한다. 외부 포트(124)(예를 들어, USB(Universal Serial Bus), FIREWIRE 등)는 다른 장치들에 직접 또는 네트워크 (예를 들어, 인터넷, 무선 LAN 등)를 통해 간접적으로 연결하도록 적응된다. 일부 실시예들에서, 외부 포트 는 ipod(apple Computer, Inc.의 트레이드마크) 장치들에서 이용되는 30pin 커넥터와 동일 또는 유사하고/거 - 19 -
나 호환가능한 멀티핀(예를 들어, 30pin) 커넥터이다. [0073] [0074] [0075] [0076] [0077] [0078] [0079] 오디오 회로(110), 스피커(111), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈 (132) 및 텍스트 입력 모듈(134)과 함께, 접근성 모듈(129)은 사용자 인터페이스 요소들 간에서의 터치 기반 네비게이션을 용이하게 하여, 사용자가 사용자 인터페이스를 반드시 보지 않고서도 사용자 인터페이스 내의 요소들을 네비게이트하고, 선택하고, 활성화하고, 다르게 상호작용할 수 있게 한다. 일부 실시예들에서, 접 근성 모듈(129)은 사용자 인터페이스 내의 사용자 인터페이스 요소들을 직접 선택하거나 접촉하지 않고서도 그러한 사용자 인터페이스 요소들을 선택하고 활성화하는 것을 용이하게 한다. 예시적인 사용자 인터페이스 요소들은 제한없이, 사용자 인터페이스 아이콘 및 위젯, 애플리케이션 아이콘, 애플리케이션 인터페이스, 메 뉴, 웹 브라우저, 월드 와이드 웹으로부터의 웹 페이지 및 애플리케이션들, 애플리케이션 컨트롤들, 문서들, 소프트/가상 키보드 및 숫자 패드들, 계산기들, 캘린더들, 리스트들, 테이블들, 이메일들, HTML 텍스트, XML 텍스트, 리치 텍스트, 서식없는 텍스트, 맵들, 게임 인터페이스들 등을 포함한다. 사용자 인터페이스 요소들 은, 사용자가 사용자 인터페이스가 실행되고 있는 전자 장치를 이용할 때 상호작용하거나 조작할 수 있는 그 래픽 또는 텍스트 사용자 인터페이스의 임의의 양태를 포함한다. 접촉/이동 모듈(130)은 (디스플레이 제어기(156)와 함께) 터치 스크린(112), 및 다른 터치 감지 장치들(예를 들어, 터치패드 또는 물리적 클릭 휠)과의 접촉을 검출할 수 있다. 접촉/이동 모듈(130)은 접촉이 발생했는 지를 결정하는 것(예를 들어, 손가락-다운 이벤트를 검출), 접촉의 이동이 있는지를 결정하고 터치 감지형 표 면을 가로지르는 이동을 추적하는 것(예를 들어, 하나 이상의 손가락-드래그 이벤트를 검출), 및 접촉이 중단 되었는지를 결정하는 것(예를 들어, 손가락-업 이벤트 또는 접촉 단절을 검출)과 같은, 접촉의 검출에 관련된 다양한 동작들을 수행하기 위한 다양한 소프트웨어 컴포넌트들을 포함한다. 접촉/이동 모듈(130)은 터치 감 지형 표면으로부터 접촉 데이터를 수신한다. 일련의 접촉 데이터에 의해 표현되는 접촉 점의 이동을 결정하 는 것은 접촉 점의 속력(크기), 속도(크기 및 방향) 및/또는 가속도(크기 및/또는 방향의 변화)를 결정하는 것을 포함할 수 있다. 이러한 동작들은 싱글 접촉들(예를 들어, 한 손가락 접촉들)에, 또는 복수의 동시적인 접촉들(예를 들어, "멀티터치"/복수의 손가락 접촉들)에 적용될 수 있다. 일부 실시예들에서, 접촉/이동 모 듈(130) 및 디스플레이 제어기(156)는 터치패드 상의 접촉을 검출한다. 일부 실시예들에서, 접촉/이동 모듈 (130) 및 제어기(160)는 클릭 휠 상의 접촉을 검출한다. 접촉/이동 모듈(130)은 사용자에 의한 제스처 입력을 검출할 수 있다. 터치 감지형 표면 상의 상이한 제스처 들은 상이한 접촉 패턴들을 갖는다. 따라서, 제스처는 특정한 접촉 패턴을 검출함으로써 검출될 수 있다. 예를 들어, 손가락 탭 제스처를 검출하는 것은 손가락 다운 이벤트를 검출한 다음, 손가락 다운 이벤트와 동 일한 위치(또는 실질적으로 동일한 위치)(예를 들어, 아이콘의 위치)에서 손가락 업 이벤트를 검출하는 것을 포함한다. 다른 예로서, 터치 감지형 표면 상에서 손가락 스와이프(swipe) 제스처를 검출하는 것은, 손가락 다운 이벤트를 검출한 다음, 하나 이상의 손가락 드래그 이벤트를 검출하고, 그에 후속하여 손가락 업 이벤트 를 검출하는 것을 포함한다. 그래픽 모듈(132)은 디스플레이되는 그래픽의 강도를 변경하기 위한 컴포넌트들을 포함하여, 터치 스크린 (112) 또는 기타 디스플레이 상에 그래픽을 렌더링 및 디스플레이하기 위한 다양한 알려진 소프트웨어 컴포넌 트들을 포함한다. 여기에서 이용될 때, "그래픽"이라는 용어는, 제한없이, 텍스트, 웹 페이지들, 아이콘들 (예를 들어, 소프트 키들을 포함하는 사용자 인터페이스 개체들), 디지털 이미지들, 비디오들, 애니메이션들 및 그와 유사한 것을 포함하여, 사용자에게 디스플레이될 수 있는 임의의 개체를 포함한다. 일부 실시예들에서, 그래픽 모듈(132)은 사용될 그래픽을 나타내는 데이터를 저장한다. 각각의 그래픽에는 대응하는 코드가 할당될 수 있다. 그래픽 모듈(132)은 애플리케이션 등으로부터, 디스플레이될 그래픽을 지 정하는 하나 이상의 코드를, 필요한 경우 좌표 데이터 및 기타 그래픽 속성 데이터와 함께 수신한 다음, 디스 플레이 제어기(156)에 출력할 스크린 이미지 데이터를 생성한다. 그래픽 모듈(132)의 컴포넌트일 수 있는 텍스트 입력 모듈(134)은 다양한 애플리케이션들(예를 들어, 연락처 (137), 이메일(140), IM(141), 브라우저(147), 및 텍스트 입력을 필요로 하는 임의의 다른 애플리케이션)에 텍스트를 입력하기 위한 소프트 키보드들을 제공한다. GPS 모듈(135)은 장치의 위치를 결정하고, 이 정보를 다양한 애플리케이션들에서의 사용을 위해 (예를 들어, 위치 기반 다이얼링에서의 사용을 위해 전화(138)에, 사진/비디오 메타데이터로서 카메라(143)에, 및 날씨 위 젯, 지역 옐로 페이지 위젯 및 맵/네비게이션 위젯과 같은 위치 기반 서비스를 제공하는 애플리케이션들에) 제공한다. - 20 -
[0080] [0081] [0082] [0083] [0084] [0085] [0086] [0087] [0088] [0089] [0090] [0091] [0092] [0093] [0094] [0095] [0096] [0097] [0098] [0099] [0100] [0101] [0102] [0103] 애플리케이션들(136)은 이하의 모듈들(또는 명령어들의 집합), 또는 그들의 부분집합 또는 확대집합을 포함할 수 있다:?연락처 모듈(137)(때로는, 주소록 또는 연락처 리스트라고 칭해짐);?전화 모듈(138);?화상 회의 모듈(139);?이메일 클라이언트 모듈(140);?인스턴트 메시징(IM) 모듈(141);?음성 메모 모듈(142);?정지 및/또는 비디오 이미지를 위한 카메라 모듈(143);?이미지 관리 모듈(144);?비디오 재생기 모듈(145);?음악 재생기 모듈(146);?브라우저 모듈(147);?캘린더 모듈(148);?날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4), 사전 위젯(149-5), 및 사용자에 의해 획득되는 기타 위젯들과, 사용자 생성 위젯들(149-6)을 포함할 수 있는 위젯 모듈(149);?사용자 생성 위젯들(149-6)을 만들기 위한 위젯 생성기 모듈(150);?검색 모듈(151);?비디오 재생기 모듈(145) 및 음악 재생기 모듈(146)을 병합하는 비디오 및 음악 재생기 모듈(152);?노트 모듈(153);?지도 모듈(154); 및/또는?온라인 비디오 모듈(155) 메모리(102) 내에 저장될 수 있는 기타 애플리케이션들(136)의 예시들은 기타 워드 프로세싱 애플리케이션들, 기타 이미지 편집 애플리케이션들, 드로잉 애플리케이션들, 프레젠테이션 애플리케이션들, JAVA-인에이블드 애플리케이션들, 암호화, 디지털 권한 관리, 음성 인식 및 음성 복제를 포함한다. 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 연락처 모듈(137)은 주소록에 이름(들)을 추가하는 것; 주소록으로부터 이름(들)을 삭제하는 것; 전화 번호(들), 이메일 주소(들), 물리적 주소(들) 또는 기타 정보를 이름과 연관시키는 것; 이미지를 이름과 연관 시키는 것; 이름들을 범주화하고 정렬하는 것; 전화(138), 화상 회의(139), 이메일(140) 또는 IM(141)에 의한 통신을 개시하고/거나 용이하게 하기 위해 전화번호들 또는 이메일 주소들을 제공하는 것; 및 기타 등등을 포 함하여, 주소록 또는 연락처 리스트를 관리하기 위해 이용될 수 있다. RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치 스크린(112), 디스플레이 제어기 (156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입력 모듈(134)과 함께, 전화 모듈(138)은 전화 번호에 대응하는 캐릭터들의 시퀀스를 입력하고, 주소록(137) 내의 하나 이상의 전화 번호에 액세스하고, 입력된 전 화 번호를 수정하고, 개별 전화 번호를 다이얼링하고, 대화를 시행하고, 대화가 완료된 때 접속을 해제하거나 끊기 위해 이용될 수 있다. 위에서 언급된 바와 같이, 무선 통신은 복수의 통신 표준, 프로토콜 및 기술 중 임의의 것을 이용할 수 있다. RF 회로(108), 오디오 회로(110), 스피커(111), 마이크로폰(113), 터치스크린(112), 디스플레이 제어기(156), 광학 센서(164), 광학 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 연락처 리스트(137) 및 전화 모듈(138)과 함께, 화상회의 모듈(139)은 사용자와 한명 이상의 다른 참가자 간의 화상 회의를 개시하고 시행하고 종료하기 위해 이용될 수 있다. - 21 -
[0104] [0105] [0106] [0107] [0108] [0109] [0110] [0111] [0112] [0113] RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입 력 모듈(134)과 함께, 이메일 클라이언트 모듈(140)은 이메일을 생성하고, 보내고, 수신하고, 관리하기 위해 이용될 수 있다. 이미지 관리 모듈(144)과 함께, 이메일 모듈(140)은 카메라 모듈(143)로 촬영된 정지 또는 비디오 이미지들을 갖는 이메일을 작성하고 보내는 것을 매우 쉽게 한다. RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍스트 입 력 모듈(134)과 함께, 인스턴트 메시징 모듈(141)은 인스턴트 메시지에 대응하는 캐릭터들의 시퀀스를 입력하 고, 이전에 입력된 캐릭터들을 수정하고, (예를 들어, 전화 기반 인스턴트 메시지들을 위한 SMS(Short Message Service) 또는 MMS(Multimedia Message Service) 프로토콜을 이용하여, 또는 인터넷 기반 인스턴트 메시지를 위한 XMPP, SIMPLE 또는 IMPS를 이용하여) 개별 인스턴트 메시지를 전송하고, 인스턴트 메시지들을 수신하고, 수신된 인스턴트 메시지들을 보기 위해 이용될 수 있다. 일부 실시예들에서, 전송된 및/또는 수신 된 인스턴트 메시지들은 그래픽, 사진, 오디오 파일, 비디오 파일 및/또는 MMS 및/또는 EMS(Enhanced Messaging Service)에서 지원되는 대로의 기타 첨부물을 포함할 수 있다. 여기에서 이용될 때, "인스턴트 메 시징"은 전화 기반 메시지(예를 들어, SMS 또는 MMS를 이용하여 보내진 메시지) 및 인터넷 기반 메시지(예를 들어, XMPP, SIMPLE 또는 IMPS를 이용하여 보내진 메시지) 둘 다를 칭한다. RF 회로(108), 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134), 이메일 클라이언트 모듈(140) 및 인스턴트 메시징 모듈(141)과 함께, 음성 메모 모듈(142)은 강의, 구술(dictation), 전화 통화, 대화, 공연 등의 오디오를 기록하고, 이메일 또는 인스턴트 메시지 내에 그 오디오를 보내기 위해 이용될 수 있다. 터치 스크린(112), 디스플레이 제어기(156), 광학 센서(들)(164), 광학 센서 제어기(158), 접촉 모듈(130), 그래픽 모듈(132) 및 이미지 관리 모듈(144)과 함께, 카메라 모듈(143)은 정지 이미지 또는 비디오(비디오 스 트림을 포함)를 캡처하여 그들을 메모리(102) 내에 저장하거나, 정지 이미지 또는 비디오의 특성을 수정하거 나, 메모리(102)로부터 정지 이미지 또는 비디오를 삭제하기 위해 이용될 수 있다. 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스트 입력 모듈(134) 및 카메라 모듈(143)과 함께, 이미지 관리 모듈(144)은 정지 및/또는 비디오 이미지들을 정리하고, 수정(예를 들 어, 편집)하거나 다르게 조작하고, 레이블링하고, 삭제하고, (예를 들어, 디지털 슬라이드 쇼 또는 앨범 내에 서) 표시하고, 저장하기 위해 이용될 수 있다. 터치 스크린(112), 디스플레이 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110) 및 스피커 (111)와 함께, 비디오 재생기 모듈(145)은 (예를 들어, 터치 스크린 상에, 또는 외부 포트(124)를 통해 외부 의 접속된 디스플레이 상에) 비디오를 디스플레이, 표시 또는 다르게 재생하기 위해 이용될 수 있다. 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 오디오 회로(110), 스피커(111), RF 회로(108) 및 브라우저 모듈(147)과 함께, 음악 재생기 모듈(146)은 사용자가 MP3 또는 AAC 파일과 같은 하나 이상의 파일 포맷으로 저장된 기록된 음악 또는 기타 사운드 파일을 다운로드하고 재생하는 것을 허용한다. 일부 실시예들에서, 장치(100)는 ipod(apple Computer, Inc.의 트레이드마크)와 같은 MP3 재 생기의 기능성을 포함할 수 있다. RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132) 및 텍 스트 입력 모듈(134)과 함께, 브라우저 모듈(147)은 웹 페이지들 또는 그들의 일부분과, 웹 페이지들에 링크 된 첨부물 및 기타 파일들을 검색하고, 그에 링크하고, 수신하고, 디스플레이하는 것을 포함하여, 인터넷을 브라우징하기 위해 이용될 수 있다. RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스 트 입력 모듈(134), 이메일 모듈(140) 및 브라우저 모듈(147)과 함께, 캘린더 모듈(148)은 캘린더 및 캘린더 에 관련된 데이터(예를 들어, 캘린더 엔트리, 할 일 목록 등)를 생성하고, 디스플레이하고, 수정하고, 저장하 기 위해 이용될 수 있다. RF 회로(108), 터치 스크린(112), 디스플레이 시스템 제어기(156), 접촉 모듈(130), 그래픽 모듈(132), 텍스 트 입력 모듈(134) 및 브라우저 모듈(147)과 함께, 위젯 모듈들(149)은 사용자에 의해 다운로드되고 사용될 수 있거나(예를 들어, 날씨 위젯(149-1), 주식 위젯(149-2), 계산기 위젯(149-3), 알람 시계 위젯(149-4) 및 사전 위젯(149-5)), 또는 사용자에 의해 생성되는(예를 들어, 사용자 생성 위젯(149-6)) 미니 애플리케이션들 이다. 일부 실시예들에서, 위젯은 HTML(Hypertext Markup Language) 파일, CSS(Cascading Style Sheets) 파 - 22 -