JP5771243B2 - 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス - Google Patents

絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス Download PDF

Info

Publication number
JP5771243B2
JP5771243B2 JP2013144822A JP2013144822A JP5771243B2 JP 5771243 B2 JP5771243 B2 JP 5771243B2 JP 2013144822 A JP2013144822 A JP 2013144822A JP 2013144822 A JP2013144822 A JP 2013144822A JP 5771243 B2 JP5771243 B2 JP 5771243B2
Authority
JP
Japan
Prior art keywords
response
default
touch screen
screen display
incoming message
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2013144822A
Other languages
English (en)
Other versions
JP2014002755A (ja
Inventor
ブラッドフォード アレン ムーア
ブラッドフォード アレン ムーア
バス オルディング
バス オルディング
エリザベス キャロライン ファーチェス
エリザベス キャロライン ファーチェス
スティーブン ジェイ チック
スティーブン ジェイ チック
ケニス コシェンダ
ケニス コシェンダ
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Apple Inc
Original Assignee
Apple Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Apple Inc filed Critical Apple Inc
Publication of JP2014002755A publication Critical patent/JP2014002755A/ja
Application granted granted Critical
Publication of JP5771243B2 publication Critical patent/JP5771243B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202—Constructional details or processes of manufacture of the input device
    • G06F3/0219—Special purpose keyboards
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G06F3/0236—Character input methods using selection techniques to select from displayed items
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/725—Cordless telephones
    • H04M1/73—Battery saving arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/42—Graphical user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • General Business, Economics & Management (AREA)
  • Business, Economics & Management (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephone Function (AREA)
  • Input From Keyboards Or The Like (AREA)
  • Information Transfer Between Computers (AREA)
  • Power Sources (AREA)
  • Position Input By Displaying (AREA)

Description

本発明は、一般的に、電子メッセージ及びドキュメント用の絵文字キャラクタを発生するポータブル電子装置に係り、より特定すれば、電子メッセージ及びドキュメント用の絵文字キャラクタを発生するタッチスクリーンディスプレイを備えたポータブル電子装置に係る。
ポータブル電子装置が益々コンパクトになり、所与の装置により遂行される機能の数が増加するにつれて、ユーザが多機能装置と容易に対話できるようにするユーザインターフェイスを設計することが意義深い挑戦となってきた。この挑戦は、スクリーンがデスクトップ又はラップトップコンピュータより非常に小さいタッチ感知ディスプレイを伴うハンドヘルドポータブル装置に対して特に意義深いものである。この状況は、不都合なものである。というのは、ユーザインターフェイスは、それを通してユーザがコンテンツを受け取るだけでなく、装置の特徴、ツール及び機能にアクセスするユーザの試みを含むユーザアクション又は振る舞いに対する応答も受け取るゲートウェイだからである。あるポータブル通信装置（例えば、時々、モバイルホン、セルホン、セルラー電話、等とも称される移動電話）は、ユーザがデータにアクセスし、データを記憶し、データを操作できるようにするために、より多くのプッシュボタンを追加し、プッシュボタンの密度を高め、プッシュボタンの機能を過負荷にし、又は複雑なメニューシステムを使用することに依存している。これらの従来のユーザインターフェイスは、多くの場合に、複雑なキーシーケンス及びメニューハイアラーキーをユーザが覚えねばならないようにしている。
又、従来の多くのユーザインターフェイス、例えば、物理的なプッシュボタンを含むものは、融通性もない。これは、ポータブル装置で実行されるアプリケーション又はユーザによりユーザインターフェイスが構成され及び／又は適応されるのを妨げることがある。このように融通性のないことは、多数のキーシーケンス及びメニューハイアラーキーを覚えるための時間のかかる要求や、希望のプッシュボタンをアクチベートする困難さと結び付くと、ほとんどのユーザを苛立たせることになる。
最近、絵文字キャラクタの使用をサポートするポータブル電子装置が開発された。絵文字キャラクタは、ウェブフォーラム、ｅ−メールメッセージ、インスタントメッセージ（例えば、ＳＭＳテキストメッセージ）、ノート、及びオンラインゲームにしばしば使用される。多数のそして益々増加する数の絵文字キャラクタが存在する。しかし、小型ディスプレイスクリーンを伴う既存のポータブル電子装置において多数の絵文字キャラクタを表示し、編成し及び使用することは、かなり厄介である。
従って、絵文字キャラクタを使用するためのより透過的で且つ効率のよいユーザインターフェイスを有するタッチスクリーンディスプレイを伴うポータブル電子装置が要望される。このようなインターフェイスは、絵文字キャラクタを含むタスクをユーザにより迅速且つ効率的に遂行できるようにし、それにより、電力を保存すると共に、ポータブル電子装置のバッテリ充電間の時間を延長できるようにする。更に、このようなインターフェイスは、ポータブル電子装置の有効性及びそのような装置でのユーザの満足度を高めるものである。
ポータブル装置に絵文字を発生し且つそれを使用するためのユーザインターフェイスに関連した前記欠点及び他の問題は、ここに開示するポータブル多機能装置によって緩和される。ある実施形態では、この装置は、グラフィックユーザインターフェイス（ＧＵＩ）を伴うタッチ感知ディスプレイ（「タッチスクリーン」としても知られた）と、１つ以上のプロセッサと、メモリと、複数の機能を遂行するためにメモリに記憶された１つ以上のモジュール、プログラム又はインストラクションセットとを有する。ある実施形態では、ユーザは、主として、タッチ感知ディスプレイにおける指接触及びジェスチャーを通して
ＧＵＩと対話する。ある実施形態では、機能は、電話通話、ビデオ会議、ｅ−メール、インスタントメッセージング、ブログ、デジタル写真、デジタルビデオ、ウェブブラウジング、デジタル音楽再生、及び／又はデジタルビデオ再生を含む。これらの機能を遂行するためのインストラクションは、１つ以上のプロセッサにより実行するように構成されたコンピュータプログラム製品に含まれる（例えば、インストラクションが記憶されたコンピュータ読み取り可能な記憶媒体）。
ある実施形態によれば、コンピュータ実施方法は、タッチスクリーンディスプレイを伴うポータブル電子装置において遂行される。コンピュータ実施方法は、ユーザにより選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示するよう動作できるキャラクタ入力エリア、キーボード表示エリア、及び複数の絵文字カテゴリアイコンを同時に表示することを含む。本明細書及び特許請求の範囲で使用する「テキストキャラクタ」とは、アルファニューメリックキャラクタ、サイノグラフ、日本語の漢字又は仮名記号、及び／又はその他、人間の書記言語キャラクタを指す。又、本明細書及び特許請求の範囲で使用する「絵文字キャラクタ」とは、人間の書記言語におけるテキストキャラクタではない静止及びアニメ化絵文字を指す。絵文字カテゴリアイコンは、複数の絵文字カテゴリに対応する。又、コンピュータ実施方法は、複数の絵文字カテゴリアイコンの各絵文字カテゴリアイコンにおけるジェスチャーを検出し、そして各絵文字カテゴリアイコンにおけるジェスチャーの検出に応答して、キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットと、各絵文字カテゴリに対する複数のサブセットシーケンス印アイコンとを同時に表示することを含み、各絵文字カテゴリは、絵文字キャラクタキーのサブセットのシーケンスとしてキーボード表示エリアに個別に表示されるように構成された絵文字キャラクタキーの多数のサブセットを含み、そしてサブセットシーケンス印アイコンは、各絵文字カテゴリにおけるサブセットの数と、キーボード表示エリアにおける絵文字キャラクタキーのサブセットのシーケンスの中の表示されるサブセットの位置とに関する情報を与える。又、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットをキーボード表示エリアに表示する間に、このコンピュータ実施方法は、キーボード表示エリアにおけるジェスチャーを検出し、そしてキーボード表示エリアにおけるジェスチャーの検出に応答して、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第２サブセットの表示と置き換え、更に、サブセットシーケンス印アイコンによって与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第１サブセットとの置き換えを反映するように更新することを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、１つ以上のプロセッサと、メモリと、１つ以上のプログラムとを備えている。１つ以上のプログラムは、メモリに記憶され、１つ以上のプロセッサによって実行されるように構成される。１つ以上のプログラムは、ユーザによって選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示するように動作できるキャラクタ入力エリア、キーボード表示エリア、及び複数の絵文字カテゴリアイコンを同時に表示するためのインストラクションを含み、絵文字カテゴリアイコンは、複数の絵文字カテゴリに対応する。又、１つ以上のプログラムは、複数の絵文字カテゴリアイコンの各絵文字カテゴリアイコンにおけるジェスチャーを検出し、そして各絵文字カテゴリアイコンにおけるジェスチャーの検出に応答して、キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットと、各絵文字カテゴリに対する複数のサブセットシーケンス印アイコンとを同時に表示するためのインストラクションも含み、各絵文字カテゴリは、絵文字キャラクタキーのサブセットのシーケンスとしてキーボード表示エリアに個別に表示されるように構成された絵文字キャラクタキーの多数のサブセットを含み、そしてサブセットシーケンス印アイコンは、各絵文字カテゴリにおけるサブセットの数と、キーボード表示エリアにおける絵文字キャラクタキーのサブセットのシーケンスの中の表示されるサブセットの位置とに関する情報を与える。又、このプログラムは、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットをキーボード表示エリアに表示する間に、キーボード表示エリアにおけるジェスチャーを検出し、そしてキーボード表示エリアにおけるジェスチャーの検出に応答して、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第２サブセットの表示と置き換え、更に、サブセットシーケンス印アイコンによって与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第１サブセットとの置き換えを反映するように更新するためのインストラクションも含む。
ある実施形態によれば、コンピュータ読み取り可能な記憶媒体は、タッチスクリーンディスプレイを伴うポータブル電子装置で実行されたときに、そのポータブル電子装置が、ユーザによって選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示するように動作できるキャラクタ入力エリア、キーボード表示エリア、及び複数の絵文字カテゴリアイコンを同時に表示し、絵文字カテゴリアイコンは、複数の絵文字カテゴリに対応するものであり、複数の絵文字カテゴリアイコンの各絵文字カテゴリアイコンにおけるジェスチャーを検出し、そして各絵文字カテゴリアイコンにおけるジェスチャーの検出に応答して、キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットと、各絵文字カテゴリに対する複数のサブセットシーケンス印アイコンとを同時に表示し、各絵文字カテゴリは、絵文字キャラクタキーのサブセットのシーケンスとしてキーボード表示エリアに個別に表示されるように構成された絵文字キャラクタキーの多数のサブセットを含み、そしてサブセットシーケンス印アイコンは、各絵文字カテゴリにおけるサブセットの数と、キーボード表示エリアにおける絵文字キャラクタキーのサブセットのシーケンスの中の表示されるサブセットの位置とに関する情報を与え、又、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットをキーボード表示エリアに表示する間に、キーボード表示エリアにおけるジェスチャーを検出し、そしてキーボード表示エリアにおけるジェスチャーの検出に応答して、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第２サブセットの表示と置き換え、更に、サブセットシーケンス印アイコンによって与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第１サブセットとの置き換えを反映するように更新するようにさせるインストラクションを記憶している。
ある実施形態によれば、タッチスクリーンディスプレイを伴うポータブル電子装置のグラフィックユーザインターフェイスは、ユーザにより選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示するように動作できるキャラクタ入力エリア、キーボード表示エリア、及び複数の絵文字カテゴリアイコンを備えている。絵文字カテゴリアイコンは、複数の絵文字カテゴリに対応する。各絵文字カテゴリは、絵文字キャラクタキーのサブセットのシーケンスとしてキーボード表示エリアに個別に表示されるように構成された絵文字キャラクタキーの多数のサブセットを含む。又、グラフィックユーザインターフェイスは、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットと、各絵文字カテゴリに対する絵文字キャラクタキーの第２サブセットと、各絵文字カテゴリに対する複数のサブセットシーケンス印アイコンとを含む。このサブセットシーケンス印アイコンは、各絵文字カテゴリにおけるサブセットの数と、キーボード表示エリアにおける絵文字キャラクタキーのサブセットのシーケンスの中の表示されるサブセットの位置とに関する情報を与える。キャラクタ入力エリア、キーボード表示エリア及び複数の絵文字カテゴリアイコンは、同時に表示される。複数の絵文字カテゴリアイコンの各絵文字カテゴリアイコンにおけるジェスチャーの検出に応答して、キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットが各絵文字カテゴリに対する複数のサブセットシーケンス印アイコンと同時に表示される。キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットを表示する間にキーボード表示エリアでジェスチャーを検出するのに応答して、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットの表示が、キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第２サブセットの表示と置き換えられ、更に、サブセットシーケンス印アイコンにより与えられる情報が、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第１サブセットとの置き換えを反映するように更新される。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、ユーザにより選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示するように動作できるキャラクタ入力エリア、キーボード表示エリア、及び複数の絵文字カテゴリアイコンを同時に表示するための手段とを備え、絵文字カテゴリアイコンは、複数の絵文字カテゴリに対応する。又、この装置は、複数の絵文字カテゴリアイコンの各絵文字カテゴリアイコンにおけるジェスチャーを検出するための手段と、各絵文字カテゴリアイコンにおけるジェスチャーの検出に応答して、キーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットと、各絵文字カテゴリに対する複数のサブセットシーケンス印アイコンとを同時に表示するための手段とを備え、各絵文字カテゴリは、絵文字キャラクタキーのサブセットのシーケンスとしてキーボード表示エリアに個別に表示されるように構成された絵文字キャラクタキーの多数のサブセットを含み、そしてサブセットシーケンス印アイコンは、各絵文字カテゴリにおけるサブセットの数と、キーボード表示エリアにおける絵文字キャラクタキーのサブセットのシーケンスの中の表示されるサブセットの位置とに関する情報を与える。又、この装置は、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットをキーボード表示エリアに表示する間に、キーボード表示エリアにおけるジェスチャーを検出するための手段と、キーボード表示エリアにおけるジェスチャーの検出に応答して、各絵文字カテゴリに対する絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリに対する絵文字キャラクタキーの第２サブセットの表示と置き換え、更に、サブセットシーケンス印アイコンによって与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第１サブセットとの置き換えを反映するように更新
するための手段とを備えている。
ある実施形態によれば、タッチスクリーンディスプレイを伴うポータブル電子装置においてそのポータブル電子装置がユーザインターフェイスロックモードにある間にコンピュータ実施方法が遂行される。この方法は、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、その到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、そして当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示することを含む。又、この方法は、絵文字キャラクタに対応するタッチスクリーンディスプレイ上の１つ以上の既定の指ジェスチャーを検出し、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出し、そしてその到来するメッセージに対する応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する応答を送信することも含む。その応答は、タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、１つ以上のプロセッサと、メモリと、１つ以上のプログラムとを備えている。１つ以上のプログラムは、メモリに記憶されて、１つ以上のプロセッサにより実行されるように構成される。１つ以上のプログラムは、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、その到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、そして当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、絵文字キャラクタに対応するタッチスクリーンディスプレイ上の１つ以上の既定の指ジェスチャーを検出し、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出し、そしてその到来するメッセージに対する応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する応答を送信するためのインストラクションを含む。その応答は、タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む。
ある実施形態によれば、コンピュータ読み取り可能な記憶媒体は、タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、そのポータブル電子装置が、それがユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取るようにさせるインストラクションを記憶している。又、このインストラクションは、そのポータブル電子装置が、それがユーザインターフェイスロックモードにある間に、その到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、そして当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、絵文字キャラクタに対応するタッチスクリーンディスプレイ上の１つ以上の既定の指ジェスチャーを検出し、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出し、そしてその到来するメッセージに対する応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する応答を送信するようにさせる。その応答は、タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む。
ある実施形態によれば、タッチスクリーンディスプレイを伴うポータブル電子装置のグラフィックユーザインターフェイスは、当事者からポータブル電子装置のユーザへ到来するメッセージの少なくとも一部分を含む。ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、そして当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示する。ポータブル電子装置がユーザインターフェイスロックモードにある間に、絵文字キャラクタに対応するタッチスクリーンディスプレイ上の１つ以上の既定の指ジェスチャーを検出する。ポータブル電子装置がユーザインターフェイスロックモードにある間に、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する応答を送信する。その応答は、タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取る手段と、到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンする手段と、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示する手段と、絵文字キャラクタに対応するタッチスクリーンディスプレイ上の１つ以上の既定の指ジェスチャーを検出する手段と、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出する手段と、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する応答を送信する手段とを備えている。その応答は、タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む。
ある実施形態によれば、コンピュータ実施方法は、タッチスクリーンディスプレイを伴うポータブル電子装置において、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答を表示し、その規定の応答は、複数の絵文字キャラクタを含み、更に、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出し、そして到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する選択された既定の応答を送信することを含む。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、１つ以上のプロセッサと、メモリと、１つ以上のプログラムとを備え、１つ以上のプログラムは、メモリに記憶されて、１つ以上のプロセッサにより実行されるように構成される。１つ以上のプログラムは、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答を表示し、その規定の応答は、複数の絵文字キャラクタを含み、更に、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出し、そして到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する選択された既定の応答を送信するためのインストラクションを含む。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、コンピュータ読み取り可能な記憶媒体は、タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、そのポータブル電子装置が、それがユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答を表示し、その規定の応答は、複数の絵文字キャラクタを含み、更に、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出し、そして到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションの検出に応答して、到来するメッセージに対する選択された既定の応答を送信するようにさせるインストラクションを記憶している。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、タッチスクリーンディスプレイを伴うポータブル電子装置のグラフィックユーザインターフェイスは、当事者からポータブル電子装置のユーザへ到来するメッセージの少なくとも一部分と、その到来するメッセージに対する複数の既定の応答とを含む。その規定の応答は、複数の絵文字キャラクタを含む。ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答を表示し、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信する。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取る手段と、到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンする手段と、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示する手段と、到来するメッセージに対する複数の既定の応答を表示する手段であって、その規定の応答が複数の絵文字キャラクタを含むような手段と、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出する手段と、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出する手段と、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信する手段とを備えている。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、コンピュータ実施方法は、タッチスクリーンディスプレイを伴うポータブル電子装置において、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、その到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出し、その規定の応答は、複数の絵文字キャラクタを含み、更に、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するのに応答して、複数の既定の応答を表示し、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出し、そして到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信することを含む。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、１つ以上のプロセッサと、メモリと、１つ以上のプログラムとを備え、１つ以上のプログラは、メモリに記憶されて、１つ以上のプロセッサにより実行されるように構成される。１つ以上のプログラムは、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、その到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出し、その規定の応答は、複数の絵文字キャラクタを含み、更に、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するのに応答して、複数の既定の応答を表示し、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出し、そして到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信するためのインストラクションを含む。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、コンピュータ読み取り可能な記憶媒体は、タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、そのポータブル電子装置が、それがユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取り、その到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出し、その規定の応答は、複数の絵文字キャラクタを含み、更に、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するのに応答して、複数の既定の応答を表示し、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出し、そして到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信するためのインストラクションを記憶している。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、タッチスクリーンディスプレイを伴うポータブル電子装置のグラフィックユーザインターフェイスは、当事者からポータブル電子装置のユーザへ到来するメッセージの少なくとも一部分と、その到来するメッセージに対する複数の既定の応答とを含む。その規定の応答は、複数の絵文字キャラクタを含む。ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来
するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示し、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するのに応答して、複数の既定の応答を表示し、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出し、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信する。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、ポータブル電子装置がユーザインターフェイスロックモードにある間に、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受け取る手段と、到来するメッセージを受け取るのに応答して、タッチスクリーンディスプレイを電源オンする手段と、当事者からユーザへ到来するメッセージの少なくとも一部分をタッチスクリーンディスプレイに表示する手段と、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出する手段であって、その規定の応答が複数の絵文字キャラクタを含むような手段と、到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するのに応答して、複数の既定の応答を表示する手段と、複数の既定の応答の中の既定の応答を選択するための既定のユーザアクションを検出する手段と、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出する手段と、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、到来するメッセージに対する選択された既定の応答を送信する手段と、を備えている。その選択された既定の応答は、複数の絵文字キャラクタの中の絵文字キャラクタを含む。
ある実施形態によれば、コンピュータ実施方法は、タッチスクリーンディスプレイを伴うポータブル電子装置において、ポータブル電子装置がユーザ定義ジェスチャー記録モードにある間にタッチスクリーンディスプレイ上でのユーザ定義ジェスチャーを検出し、そのユーザ定義ジェスチャーの表現を生成し、そのユーザ定義ジェスチャーの表現を絵文字キャラクタに関連付け、そしてユーザ定義ジェスチャーの表現、及びユーザ定義ジェスチャーの表現と絵文字キャラクタとの関連付けを記憶することを含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、１つ以上のプロセッサと、メモリと、１つ以上のプログラムとを備え、１つ以上のプログラムは、メモリに記憶されて、１つ以上のプロセッサにより実行されるように構成される。１つ以上のプログラムは、ポータブル電子装置がユーザ定義ジェスチャー記録モードにある間にタッチスクリーンディスプレイ上でのユーザ定義ジェスチャーを検出し、そのユーザ定義ジェスチャーの表現を生成し、そのユーザ定義ジェスチャーの表現を絵文字キャラクタに関連付け、そしてユーザ定義ジェスチャーの表現、及びユーザ定義ジェスチャーの表現と絵文字キャラクタとの関連性を記憶するためのインストラクションを含む。
ある実施形態によれば、コンピュータ読み取り可能な記憶媒体は、タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、そのポータブル電子装置が、それがユーザ定義ジェスチャー記録モードにある間にタッチスクリーンディスプレイ上でのユーザ定義ジェスチャーを検出し、そのユーザ定義ジェスチャーの表現を生成し、そのユーザ定義ジェスチャーの表現を絵文字キャラクタに関連付け、そしてユーザ定義ジェスチャーの表現、及びユーザ定義ジェスチャーの表現と絵文字キャラクタとの関連性を記憶するようにさせるインストラクションを記憶している。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、ポータブル電子装置がユーザ定義ジェスチャー記録モードにある間にタッチスクリーンディスプレイ上でのユーザ定義ジェスチャーを検出する手段と、そのユーザ定義ジェスチャーの表現を生成する手段と、そのユーザ定義ジェスチャーの表現を絵文字キャラクタに関連付ける手段と、ユーザ定義ジェスチャーの表現、及びユーザ定義ジェスチャーの表現と絵文字キャラクタとの関連性を記憶する手段と、を備えている。
ある実施形態によれば、コンピュータ実施方法は、タッチスクリーンディスプレイを伴うポータブル電子装置において、電子メッセージを受信することを含む。この電子メッセージは、地理マップアプリケーションを開始するためのインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含む。絵文字データは、位置データに関連付けられる。又、この方法は、タッチスクリーンディスプレイ上に電子メッセージを表示し、地理マップアプリケーションを開始するためにその表示された電子メッセージに対する既定のユーザアクションを検出し、そして地理マップアプリケーションを開始するための既定のユーザアクションを検出するのに応答して、地理マップアプリケーションにおける地理マップを表示し、更に、位置データに対応する地理マップ上の位置に絵文字キャラクタを表示することも含む。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、１つ以上のプロセッサと、メモリと、１つ以上のプログラムとを備え、１つ以上のプログラムは、メモリに記憶されて、１つ以上のプロセッサにより実行されるように構成される。１つ以上のプログラムは、電子メッセージを受信するためのインストラクションを含み、電子メッセージは、地理マップアプリケーションを開始するインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含む。絵文字データは、位置データに関連付けられる。又、１つ以上のプログラムは、タッチスクリーンディスプレイ上に電子メッセージを表示し、地理マップアプリケーションを開始するためにその表示された電子メッセージに対する既定のユーザアクションを検出し、そして地理マップアプリケーションを開始するための既定のユーザアクションを検出するのに応答して、地理マップアプリケーションにおける地理マップを表示し、更に、位置データに対応する地理マップ上の位置に絵文字キャラクタを表示するためのインストラクションも含む。
ある実施形態によれば、コンピュータ読み取り可能な記憶媒体は、タッチスクリーンディスプレイを伴うポータブル電子装置によって実行されたときに、その装置が、電子メッセージを受信するようにさせるインストラクションを記憶している。電子メッセージは、地理マップアプリケーションを開始するインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含む。絵文字データは、位置データに関連付けられる。又、インストラクションは、その装置が、タッチスクリーンディスプレイ上に電子メッセージを表示し、地理マップアプリケーションを開始するためにそ
の表示された電子メッセージに対する既定のユーザアクションを検出し、そして地理マップアプリケーションを開始するための既定のユーザアクションを検出するのに応答して、地理マップアプリケーションにおける地理マップを表示し、更に、位置データに対応する地理マップ上の位置に絵文字キャラクタを表示するようにもさせる。
ある実施形態によれば、タッチスクリーンディスプレイを伴うポータブル電子装置のグラフィックユーザインターフェイスは、電子メッセージと、地理マップと、絵文字キャラクタとを含む。電子メッセージは、ポータブル電子装置により受信される。電子メッセージは、地理マップアプリケーションを開始するためのインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含む。絵文字データは、位置データに関連付けられる。電子メッセージは、タッチスクリーンディスプレイ上に表示される。地理マップアプリケーションを開始するためにその表示された電子メッセージに対する既定のユーザアクションを検出するのに応答して、地理マップアプリケーションにおける地理マップを表示され、更に、位置データに対応する地理マップ上の位置に絵文字キャラクタが表示される。
ある実施形態によれば、ポータブル電子装置は、タッチスクリーンディスプレイと、電子メッセージを受信する手段とを備え、電子メッセージは、地理マップアプリケーションを開始するインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含み、絵文字データは、位置データに関連付けられる。又、この装置は、タッチスクリーンディスプレイ上に電子メッセージを表示する手段と、地理マップアプリケーションを開始するためにその表示された電子メッセージに対する既定のユーザアクションを検出する手段と、地理マップアプリケーションを開始するための既定のユーザアクションを検出するのに応答して、地理マップアプリケーションにおける地理マップを表示する手段と、位置データに対応する地理マップ上の位置に絵文字キャラクタを表示する手段と、を備えている。
従って、本発明は、タッチ感知ディスプレイを伴うポータブル電子装置に絵文字を使用するための簡単で、効率的で且つ使い易いインターフェイスを提供する。このようなインターフェイスは、ユーザがタスクをより速く完了させて、バッテリ充電とバッテリ充電との間の時間を延長できることで、電力を保存する。又、このようなインターフェイスは、ポータブル電子装置でのユーザの満足度を高める。
本発明の以上の実施形態及び付加的な実施形態を良く理解するため、全体を通して対応部分を同じ参照番号で示した添付図面を参照して実施形態の詳細な説明をする。
ある実施形態によるタッチ感知ディスプレイを伴うポータブル多機能装置を示すブロック図である。 ある実施形態によるタッチ感知ディスプレイを伴うポータブル多機能装置を示すブロック図である。 ある実施形態によるタッチスクリーンを有するポータブル多機能装置を示す。 ある実施形態によりポータブル電子装置をアンロックするための規範的ユーザインターフェイスを示す。 ある実施形態によるポータブル多機能装置におけるアプリケーションのメニューのための規範的ユーザインターフェイスを示す。 ある実施形態によるポータブル多機能装置におけるアプリケーションのメニューのための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において特定の絵文字カテゴリの絵文字キャラクタサブセット間をナビゲートしそしてある絵文字キャラクタを入力するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において特定の絵文字カテゴリの絵文字キャラクタサブセット間をナビゲートしそしてある絵文字キャラクタを入力するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において特定の絵文字カテゴリの絵文字キャラクタサブセット間をナビゲートしそしてある絵文字キャラクタを入力するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において特定の絵文字カテゴリの絵文字キャラクタサブセット間をナビゲートしそしてある絵文字キャラクタを入力するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において特定の絵文字カテゴリの絵文字キャラクタサブセット間をナビゲートしそしてある絵文字キャラクタを入力するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタを入力しそして絵文字キャラクタを含む電子メッセージを送信するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタを入力しそして絵文字キャラクタを含む電子メッセージを送信するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタを入力しそして絵文字キャラクタを含む電子メッセージを送信するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタを入力しそして絵文字キャラクタを含む電子メッセージを送信するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタを入力しそして絵文字キャラクタを含む電子メッセージを送信するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置においてソフトウェアキーボードの絵文字キャラクタキーを再構成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置においてソフトウェアキーボードの絵文字キャラクタキーを再構成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置においてソフトウェアキーボードの絵文字キャラクタキーを再構成するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタにユーザ定義ジェスチャーを指定するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタにユーザ定義ジェスチャーを指定するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタにユーザ定義ジェスチャーを指定するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタにユーザ定義ジェスチャーを指定するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタにユーザ定義ジェスチャーを指定するための規範的ユーザインターフェイスを示す。 ある実施形態により電子メッセージを経て絵文字キャラクタをマップ上の位置指示子として使用するための規範的ユーザインターフェイスを示す。 ある実施形態により電子メッセージを経て絵文字キャラクタをマップ上の位置指示子として使用するための規範的ユーザインターフェイスを示す。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための方法を示すフローチャートである。 ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字にユーザ定義ジェスチャーを指定する方法を示すフローチャートである。 ある実施形態により電子メッセージを経て絵文字をマップ上の位置指示子として使用する方法を示すフローチャートである。
添付図面に示した実施形態を以下に詳細に説明する。以下の詳細な説明において本発明を完全に理解するために多数の特定の細部について述べる。しかしながら、当業者であれば、これらの特定の細部なしに本発明を実施できることが明らかであろう。その他の点については、実施形態の観点を不必要に不明瞭にしないために、良く知られた方法、手順、コンポーネント、回路及びネットワークは、詳細に述べない。
又、第１、第２、等の語は、ここでは、種々の要素を記述するのに使用されるが、これらの要素は、これらの語によって限定されないことも理解されたい。これらの語は、ある要素を別の要素と区別するためにだけ使用される。例えば、本発明の範囲から逸脱せずに、第１のジェスチャーを第２のジェスチャーと称してもよく、同様に、第２のジェスチャーを第１のジェスチャーと称してもよい。
本発明の説明で使用される用語は、単に特定の実施形態を説明するためのものであり、本発明を何ら限定するものではない。本発明の説明及び特許請求の範囲で使用される単数形“ａ”“an”及び“the”は、特に明確な指示がない限り、複数形も含むものとする。又、ここで使用する「及び／又は」という語は、列挙された１つ以上の関連品目のいずれかの及び全ての考えられる組み合わせを指し及びそれらを包含するものと理解されたい。更に、本書で使用する「備える(comprises)」及び／又は「備えている(comprising)」という語は、記述された特徴、整数、ステップ、動作、エレメント、及び／又はコンポーネントの存在を特定するが、１つ以上の他の特徴、整数、ステップ、動作、エレメント、コンポーネント、及び／又はそのグループの存在又は追加を除外するものではない。
ここで使用する「〜場合には(if)」という語は、状況に応じて、「〜ときには(when)」又は「〜際には(upon)」又は「決定に応答して」又は「検出に応答して」を意味するものと解釈される。同様に、「〜決定された場合には」又は「［記述された条件又は事象］が検出された場合には」という句は、状況に応じて、「決定する際に」又は「決定するのに応答して」又は「［記述された条件又は事象］を検出する際に」又は「［記述された条件又は事象］を検出するのに応答して」を意味するものと解釈される。
ポータブルの多機能装置、そのような装置のためのユーザインターフェイス、及びそのような装置を使用するための関連プロセスについて述べる。ある実施形態では、装置は、他の機能、例えば、ＰＤＡ、及び／又は音楽プレーヤ機能も含む移動電話のようなポータブル通信装置である。ポータブルの多機能装置の規範的実施形態は、カリフォルニア州クパチーノのアップルコンピュータ社から入手できるｉＰｈｏｎｅ（登録商標）及びｉＰｏｄ Ｔｏｕｃｈ（登録商標）装置を含むが、これに限定されない。
ユーザインターフェイスは、タッチスクリーン又はタッチスクリーンに表示される仮想クリックホイールに加えて物理的なクリックホイールを含むことができる。クリックホイールは、ホイールの角度的変位、又は装置のユーザによるホイールとの接触点に基づいてナビゲーションコマンドを与えるユーザインターフェイス装置である。又、クリックホイールは、例えば、装置のユーザがホイールの少なくとも一部分又はホイールの中心を押圧したときに、１つ以上のアイテムの選択に対応するユーザコマンドを与えるのにも使用される。或いは又、タッチスクリーン表面上のクリックホイール映像との接触が遮断することは、選択に対応するユーザコマンドを指示する。簡単化のために、以下の説明では、タッチスクリーンを含むポータブル多機能装置が規範的実施形態として使用される。しかしながら、ユーザインターフェイス及び関連プロセスの幾つかを他のポータブル装置に適用できることを理解されたい。
装置は、種々のアプリケーション、例えば、次のアプリケーション１つ以上をサポートすることができる。即ち、電話アプリケーション、ビデオ会議アプリケーション、ｅ−メールアプリケーション、インスタントメッセージングアプリケーション、ブログアプリケーション、写真マネージメントアプリケーション、デジタルカメラアプリケーション、デジタルビデオカメラアプリケーション、ウェブブラウジングアプリケーション、デジタル音楽プレーヤアプリケーション、及び／又はデジタルビデオプレーヤアプリケーション。
装置で実行できる種々のアプリケーションは、少なくとも１つの共通の物理的ユーザインターフェイス装置、例えば、タッチスクリーンを使用する。タッチスクリーンの１つ以上の機能、並びに装置に表示される対応する情報は、あるアプリケーションから次のアプリケーションへ及び／又は各アプリケーション内で調整され及び／又は変更される。このように、装置の共通の物理的アーキテクチャー（タッチスクリーンのような）は、直観的で且つ透過的なユーザインターフェイスで種々のアプリケーションをサポートすることができる。
ユーザインターフェイスは、テキストキャラクタ及び絵文字キャラクタを入力し、又は入力するように動作できるソフトキーボード実施形態を含む。ソフトキーボード実施形態は、キーボードの表示アイコンに標準（ＱＷＥＲＴＹ）構成及び／又は非標準構成の記号を含み、これは、例えば、２００６年７月２４日に出願された“Keyboards For Portable Electronic Devices”と題する米国特許出願第１１／４５９，６０６号、及び２００６年７月２４日に出願された“Touch Screen Keyboards For Portable Electronic Devices”と題する米国特許出願第１１／４５９，６１５号に説明されており、これら特許出願の内容を参考としてここにそのまま援用する。キーボード実施形態は、タイプライター用のもののような既存の物理的キーボードにおけるキーの数に対して少数のアイコン（又はソフトキー）を含む。これは、ユーザがキーボードにおいて１つ以上のアイコン、ひいては、１つ以上の対応する記号を選択し易くする。このキーボード実施形態は、適応性のものである。例えば、表示アイコンは、１つ以上のアイコン及び／又は１つ以上の対応する記号を選択するようなユーザアクションに基づいて変更することができる。ポータブル装置における１つ以上のアプリケーションは、共通の及び／又は異なるキーボード実施形態を使用することができる。従って、使用されるキーボード実施形態は、少なくとも幾つかのアプリケーションに対して調整することができる。ある実施形態では、各ユーザに対して１つ以上のキーボード実施形態を調整することができる。例えば、各ユーザのワード使用履歴（辞書、俗語、個々の使用）に基づいて各ユーザに対して１つ以上のキーボード実施形態を調整することができる。１つ以上のアイコンを選択するとき、従って、ソフトキーボード実施形態を使用するときには１つ以上の記号を選択するときに、ユーザのエラーの確率を減少するために幾つかのキーボード実施形態を調整することができる。絵文字キャラクタを入力するか又は入力するように動作するソフトキーボードについて以下に詳細に述べる。
装置の実施形態に注意を向けることにする。図１Ａ及び１Ｂは、ある実施形態によるタッチ感知ディスプレイ１１２を伴うポータブル多機能装置１００を示すブロック図である。タッチ感知ディスプレイ１１２は、便宜上「タッチスクリーン」とも称され、又、タッチ感知ディスプレイシステムとしても知られ又はそのように称される。装置１００は、メモリ１０２（１つ以上のコンピュータ読み取り可能な記憶媒体を含む）と、メモリコントローラ１２２と、１つ以上の処理ユニット（ＣＰＵ）１２０と、周辺インターフェイス１１８と、ＲＦ回路１０８と、オーディオ回路１１０と、スピーカ１１１と、マイクロホン１１３と、入力／出力（Ｉ／Ｏ）サブシステム１０６と、他の入力又はコントロール装置１１６と、外部ポート１２４とを備えている。装置１００は、１つ以上の光学的センサ１６４を含む。これらのコンポーネントは、１つ以上の通信バス又は信号ライン１０３を経て通信することができる。
装置１００は、ポータブル多機能装置１００の一例に過ぎず、そして装置１００は、図示された以上又は以下のコンポーネントを有してもよく、２つ以上のコンポーネントを結合してもよく、或いはコンポーネントの異なる構成又は配列を有してもよいことが明らかであろう。図１及び１Ｂに示す種々のコンポーネントは、１つ以上の信号処理回路及び／又は特定用途向け集積回路を含めて、ハードウェア、ソフトウェア、又はその両方の組み合わせで具現化されてもよい。
メモリ１０２は、高速ランダムアクセスメモリを含んでもよく、又、不揮発性メモリ、例えば、１つ以上の磁気ディスク記憶装置、フラッシュメモリ装置、又は他の不揮発性ソリッドステートメモリデバイスを含んでもよい。装置１００の他のコンポーネント、例えば、ＣＰＵ１２０及び周辺インターフェイス１１８によるメモリ１０２へのアクセスは、メモリコントローラ１２２によりコントロールすることができる。
周辺インターフェイス１１８は、装置の入力及び出力周辺装置をＣＰＵ１２０及びメモリ１０２へ結合する。１つ以上のプロセッサ１２０は、メモリ１０２に記憶された種々のソフトウェアプログラム及び／又はインストラクションセットを走らせ又は実行し、装置１００の種々の機能を遂行し、データを処理する。
ある実施形態では、周辺インターフェイス１１８、ＣＰＵ１２０、及びメモリコントローラ１２２は、チップ１０４のような単一チップにおいて具現化される。他の実施形態では、それらは、個別のチップにおいて具現化されてもよい。
ＲＦ（高周波）回路１０８は、電磁信号とも称されるＲＦ信号を受信し送信する。ＲＦ回路１０８は、電気信号を電磁信号へ及びその逆に変換し、そして電磁信号により通信ネットワーク及び他の通信装置と通信する。ＲＦ回路１０８は、これらの機能を遂行するための良く知られた回路を含み、これに限定されないが、アンテナシステム、ＲＦトランシーバ、１つ以上の増幅器、チューナ、１つ以上の発振器、デジタル信号プロセッサ、ＣＯＤＥＣチップセット、加入者アイデンティティモジュール（ＳＩＭ）カード、メモリ、等を含む。ＲＦ回路１０８は、ワールドワイドウェブ（ＷＷＷ）とも称されるインターネットのようなネットワーク、イントラネット及び／又はワイヤレスネットワーク、例えば、セルラー電話ネットワーク、ワイヤレスローカルエリアネットワーク（ＬＡＮ）、及び／又はメトロポリタンエリアネットワーク（ＭＡＮ）、及び他の装置と、ワイヤレス通信により通信することができる。ワイヤレス通信は、複数の通信規格、プロトコル、及び技術のいずれかを使用し、これは、移動通信用のグローバルシステム（ＧＳＭ）、エンハンストデータＧＳＭ環境（ＥＤＧＥ）、高速ダウンリンクパケットアクセス（ＨＳＤＰＡ）、ワイドバンドコード分割多重アクセス（Ｗ−ＣＤＭＡ）、コード分割多重アクセス（ＣＤＭＡ）、時分割多重アクセス（ＴＤＭＡ）、ブルーツース、ワイヤレスフィデリティ（Ｗｉ−Ｆｉ）（例えば、ＩＥＥＥ８０２．１１ａ、ＩＥＥＥ８０２．１１ｂ、ＩＥＥＥ８０２．１１ｇ及び／又はＩＥＥＥ８０２．１１ｎ）、ボイスオーバーインターネットプロトコル（ＶｏＩＰ）、Ｗｉ−ＭＡＸ、ｅ−メール用プロトコル（例えば、インターネットメッセージアクセスプロトコル（ＩＭＡＰ）及び／又はポストオフィスプロトコル（ＰＯＰ））、インスタントメッセージング（例えば、エクステンシブルメッセージング及びプレゼンスプロトコル（ＸＭＰＰ）、インスタントメッセージング及びプレゼンスレバレッジエクステンションのためのセッションイニシエーションプロトコル（ＳＩＭＰＬＥ）、インスタントメッセージング及びプレゼンスサービス（ＩＭＰＳ））、及び／又はショートメッセージングサービス（ＳＭＳ）、或いは本出願の出願日にまだ開発されていない通信プロトコルを含む他の適当な通信プロトコルを含むが、それらに限定されない。
オーディオ回路１１０、スピーカ１１１、及びマイクロホン１１３は、ユーザと装置１００との間のオーディオインターフェイスをなす。オーディオ回路１１０は、周辺インターフェイス１１８からオーディオデータを受信し、そのオーディオデータを電気的信号へ変換し、そしてその電気的信号をスピーカ１１１へ送信する。スピーカ１１１は、電気的信号を人間に聞こえる音波へ変換する。又、オーディオ回路１１０は、音波からマイクロホン１１３により変換された電気信号も受信する。オーディオ回路１１０は、電気信号をオーディオデータへ変換し、そのオーディオデータを処理のために周辺インターフェイス１１８へ送信する。オーディオデータは、周辺インターフェイス１１８によりメモリ１０２及び／又はＲＦ回路１０８から検索され及び／又はそこへ送信される。ある実施形態では、オーディオ回路１１０は、ヘッドセットジャック（例えば、図２の２１２）も含む。ヘッドセットジャックは、オーディオ回路１１０と、取り外し可能なオーディオ入力／出力周辺装置、例えば、出力のみのヘッドホン、又は出力（例えば、片耳又は両耳用のヘッドホン）及び入力（例えば、マイクロホン）の両方を伴うヘッドセット、との間のインターフェイスをなす。
Ｉ／Ｏサブシステム１０６は、装置１００の入力／出力周辺装置、例えば、タッチスクリーン１１２及び他の入力／出力装置１１６を、周辺インターフェイス１１８へ結合する。Ｉ／Ｏサブシステム１０６は、ディスプレイコントローラ１５６と、他の入力又はコントロール装置のための１つ以上の入力コントローラ１６０とを含む。１つ以上の入力コントローラ１６０は、他の入力又はコントロール装置１１６から電気信号を受信し／そこへ電気信号を送信する。他の入力／コントロール装置１１６は、物理的なボタン（例えば、プッシュボタン、ロッカーボタン、等）、ダイヤル、スライダースイッチ、ジョイスティック、クリックホイール、等を含む。ある別の実施形態では、入力コントローラ１６０は、次のいずれかに結合される（又はいずれにも結合されない）。即ち、キーボード、赤外線ポート、ＵＳＢポート、及びマウスのようなポインタ装置。１つ以上のボタン（例えば、図２の２０８）は、スピーカ１１１及び／又はマイクロホン１１３のボリュームコントロールのためのアップ／ダウンボタンを含む。１つ以上のボタンは、プッシュボタン（例えば、図２の２０６）を含む。プッシュボタンを素早く押すと、タッチスクリーン１１２のロックが解離するか、又はタッチスクリーンにジェスチャーを使用して装置をアンロックするプロセスが開始し、これは、参考としてここに援用する２００５年１２月２３日に出願された“Unlocking a Device by Performing Gestures on an Unlock Image”と題する米国特許出願第１１／３２２，５４９号に説明されている。プッシュボタン（例えば、２０６）を長押しすると、装置１００への電力をターンオン又はオフすることができる。ユーザは、１つ以上のボタンの機能をカスタマイズすることができる。タッチスクリーン１１２は、仮想又はソフトボタン及び１つ以上のソフトキーボードを具現化するのに使用される。
タッチ感知タッチスクリーン１１２は、装置とユーザとの間に入力インターフェイス及び出力インターフェイスを与える。ディスプレイコントローラ１５６は、タッチスクリーン１１２から電気信号を受信し／タッチスクリーン１１２へ電気信号を送信する。タッチスクリーン１１２は、ユーザに視覚出力を表示する。視覚出力は、グラフィック、テキスト、アイコン、ビデオ、及びその組み合わせを含む（総体的に「グラフィック」と称される）。ある実施形態では、視覚出力の幾つか又は全部がユーザインターフェイスオブジェクトに対応する。
タッチスクリーン１１２は、触覚及び／又は触感接触に基づいてユーザからの入力を受け入れるタッチ感知面、センサ、又はセンサのセットを有する。タッチスクリーン１１２及びディスプレイコントローラ１５６（並びに関連モジュール及び／又はメモリ１０２におけるインストラクションのセット）は、タッチスクリーン１１２上での接触（及び接触の移動又は切断）を検出し、そしてその検出された接触を、タッチスクリーンに表示されたユーザインターフェイスオブジェクト（例えば、１つ以上のソフトキー、アイコン、ウェブページ又は映像）との相互作用へと変換する。規範的実施形態では、タッチスクリーン１１２とユーザとの間の接触点は、ユーザの指に対応する。
タッチスクリーン１１２は、ＬＣＤ（液晶ディスプレイ）技術、又はＬＰＤ（光放射ポリマーディスプレイ）技術を使用するが、他の実施形態では、他の表示技術が使用されてもよい。タッチスクリーン１１２及びディスプレイコントローラ１５６は、現在知られている又は今後開発される複数のタッチ感知技術のいずれかを使用して接触及びその移動又は切断を検出することができ、それらの技術は、容量性、抵抗性、赤外線、及び表面音波技術、並びに他の接近センサアレイ、又はタッチスクリーン１１２との１つ以上の接触点を決定するための他の要素を含むが、それに限定されない。規範的実施形態では、カリフォルニア州クパチーノのアップルコンピュータ社から入手できるｉＰｈｏｎｅ（登録商標）及びｉＰｏｄ Ｔｏｕｃｈ（登録商標）に見られるような投影相互キャパシタンス感知技術が使用される。
タッチスクリーン１１２のある実施形態におけるタッチ感知ディスプレイは、各々参考としてここに援用する次の米国特許に説明されたマルチタッチ感知タブレットと同様である。第６，３２３，８４６号（ウェスターマン氏等）、第６，５７０，５５７号（ウェスターマン氏等）、及び／又は第６，６７７，９３２号（ウェスターマン氏）、及び／又は米国特許公告第２００２／００１５０２４Ａ１号。しかしながら、タッチスクリーン１１２は、ポータブル装置１００からの視覚出力を表示するが、タッチ感知タブレットは、視覚出力を与えない。
タッチスクリーン１１２のある実施形態におけるタッチ感知ディスプレイは、次の特許出願に説明されている。（１）２００６年５月２日に出願された“Multipoint Touch Surface Controller”と題する米国特許出願第１１／３８１，３１３号；（２）２００４年５月６日に出願された“Multipoint Touch screen”と題する米国特許出願第１０／８４０，８６２号；（３）２００４年７月３０日に出願された“Gestures For Touch Sensitive Input Devices”と題する米国特許出願第１０／９０３，９６４号；（４）２００５年１月３１日に出願された“Gestures For Touch Sensitive Input Devices”と題する米国特許出願第１１／０４８，２６４号；（５）２００５年１月１８日に出願された“Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices”と題する米国特許出願第１１／０３８，５９０号；（６）２００５年９月１６日に出願された“Virtual Input Device Placement On A Touch Screen User Interface”と題する米国特許出願第１１／２２８，７５８号；（７）２００５年９月１６日に出願された“Operation Of A Computer With A Touch Screen Interface”と題する米国特許出願第１１／２２８，７００号；（８）２００５年９月１６日に出願された“Activating Virtual Keys Of A Touch-Screen Virtual Keyboard”と題する米国特許出願第１１／２２８，７３７号；及び（９）２００６年３月３日に出願された“Multi-Functional Hand-Held Device”と題する米国特許出願第１１／３６７，７４９号。これらの特許出願は、全て、参考としてここにそのまま援用する。
タッチスクリーン１１２は、解像度が１００ｄｐｉ以上である。規範的実施形態では、タッチスクリーンは、解像度が約１６０ｄｐｉである。ユーザは、適当な物体又は付属物、例えば、スタイラス、指、等を使用して、タッチスクリーン１１２に接触することができる。ある実施形態では、ユーザインターフェイスは、主として、指に基づく接触及びジェスチャーで機能するように設計され、これは、タッチスクリーンに対する指の接触面積が大きいためにスタイラスに基づく入力よりかなり精度が低い。ある実施形態では、装置は、指に基づく粗い入力を、正確なポインタ／カーソル位置、又はユーザが希望するアクションを遂行するためのコマンドへと変換する。
ある実施形態では、タッチスクリーンに加えて、装置１００は、特定の機能をアクチベート又はデアクチベートするためのタッチパッド（図示せず）を備えている。ある実施形態では、タッチパッドは、タッチスクリーンとは異なり、視覚出力を表示しない装置のタッチ感知エリアである。タッチパッドは、タッチスクリーン１１２とは個別のタッチ感知面でもよいし、又はタッチスクリーンにより形成されたタッチ感知面の延長部でもよい。
ある実施形態では、装置１００は、物理的又は仮想クリックホイールを入力コントロール装置１１６として含む。ユーザは、クリックホイールを回転するか又はクリックホイールとの接触点を移動することにより（例えば、接触点の移動量がクリックホイールの中心点に対するその角度変位により測定される）、タッチスクリーン１１２に表示される１つ以上のグラフィックオブジェクト（以下、アイコンと称される）の間でナビゲートし及びそれと対話することができる。又、クリックホイールは、表示されたアイコンの１つ以上を選択するのに使用されてもよい。例えば、ユーザは、クリックホイール又は関連ボタンの少なくとも一部分を押圧することができる。ユーザによりクリックホイールを経て与えられるユーザコマンド及びナビゲーションコマンドは、入力コントローラ１６０、並びにメモリ１０２におけるモジュール及び／又はインストラクションセットの１つ以上によって処理することができる。仮想クリックホイールの場合には、クリックホイール及びクリックホイールコントローラは、各々、タッチスクリーン１１２及びディスプレイコントローラ１５６の一部分である。仮想クリックホイールの場合、クリックホイールは、ユーザと装置との対話に応答してタッチスクリーンディスプレイに現れたり消えたりする不透明又は半透明のいずれかのオブジェクトである。ある実施形態では、仮想クリックホイールは、ポータブル多機能装置のタッチスクリーンに表示されて、タッチスクリーンとのユーザ接触により操作される。
又、装置１００は、種々のコンポーネントに電力供給するための電源システム１６２も備えている。この電源システム１６２は、電源マネージメントシステム、１つ以上の電源（例えば、バッテリ、交流（ＡＣ））、再充電システム、停電検出回路、電力コンバータ又はインバータ、電力状態インジケータ（例えば、発光ダイオード（ＬＥＤ））、並びにポータブル装置における電力の発生、管理及び配電に関連した他のコンポーネントを備えている。
又、装置１００は、１つ以上の光学的センサ１６４も備えている。図１Ａ及び１Ｂは、Ｉ／Ｏサブシステム１０６における光学的センサコントローラ１５８に結合された光学的センサを示している。光学的センサ１６４は、電荷結合デバイス（ＣＣＤ）又は相補的金属酸化物半導体（ＣＭＯＳ）ホトトランジスタを含む。光学的センサ１６４は、１つ以上のレンズを通して投影される環境からの光を受け取り、そしてその光を、映像を表すデータへと変換する。像形成モジュール１４３（カメラモジュールとも称される）に関連して、光学的センサ１６４は、静止映像又はビデオを捕獲することができる。ある実施形態で
は、光学的センサは、装置１００の前方のタッチスクリーンディスプレイ１１２とは反対に、装置１００の背面に配置され、タッチスクリーンディスプレイを静止映像及び／又はビデオ映像取得のためのビューファインダーとして使用できるようにしている。ある実施形態では、光学的センサが装置の前方に配置されて、ユーザの映像をビデオ会議のために得る一方、ユーザが他のビデオ会議参加者をタッチスクリーンディスプレイで見ることができるようにする。ある実施形態では、光学的センサ１６４の位置をユーザにより変更して（例えば、装置ハウジングにおいてレンズ及びセンサを回転することにより）、単一の光学的センサ１６４をビデオ会議と静止及び／又はビデオ映像取得の両方のためにタッチスクリーンディスプレイと共に使用できるようにする。
又、装置１００は、１つ以上の接近センサ１６６も備えている。図１Ａ及び１Ｂは、周辺インターフェイス１１８に結合された接近センサ１６６を示している。或いは又、接近センサ１６６は、Ｉ／Ｏサブシステム１０６の入力コントローラ１６０に結合されてもよい。接近センサ１６６は、参考としてここにそのまま援用する“Proximity Detector In Handheld Device”と題する米国特許出願第１１／２４１，８３９号；“Proximity Detector In Handheld Device”と題する第１１／２４０，７８８号；“Using Ambient Light Sensor To Augment Proximity Sensor Output”と題する第１１／６２０，７０２号；“Automated Response To And Sensing Of User Activity In Portable Devices”と題する第１１／５８６，８６２号；及び“Methods And Systems For Automatic Configuration Of Peripherals”と題する第１１／６３８，２５１号に説明されたように機能する。ある実施形態では、接近センサは、多機能装置がユーザの耳の近くに置かれたとき（例えば、ユーザが電話コールを発信するとき）タッチスクリーン１１２をターンオフし、ディスエイブルする。ある実施形態では、接近センサは、装置がロック状態であるときに不必要なバッテリ消費を防止するために、装置がユーザのポケット、ハンドバッグ、又は他の暗いエリアにあるときにスクリーンをオフに保持する。
又、装置１００は、１つ以上の加速度計１６８も備えている。図１Ａ及び１Ｂは、周辺インターフェイス１１８に結合された加速度計１６８を示す。或いは又、加速度計１６８は、Ｉ／Ｏサブシステム１０６の入力コントローラ１６０に結合されてもよい。加速度計１６８は、参考としてここにそのまま援用する“Acceleration-based Theft Detection System for Portable Electronic Devices”と題する米国特許公告第２００５０１９００５９号、及び“Methods And Apparatuses For Operating A Portable Device Based On An Accelerometer”と題する米国特許公告第２００６００１７６９２号に説明されたように機能する。ある実施形態では、情報は、１つ以上の加速度計から受け取ったデータの分析に基づいて肖像ビュー又は風景ビューでタッチスクリーンディスプレイに表示される。
ある実施形態では、メモリ１０２に記憶されたソフトウェアコンポーネントは、オぺレーティングシステム１２６、通信モジュール（又はインストラクションセット）１２８、接触／運動モジュール（又はインストラクションセット）１３０、グラフィックモジュール（又はインストラクションセット）１３２、テキスト入力モジュール（又はインストラクションセット）１３４、グローバルポジショニングシステム（ＧＰＳ）モジュール（又はインストラクションセット）１３５、及びアプリケーション（又はインストラクションセット）１３６を含む。
オペレーティングシステム１２６（例えば、Ｄａｒｗｉｎ、ＲＴＸＣ、ＬＩＮＵＸ、ＯＳ Ｘ、ＷＩＮＤＯＷＳ、又は埋め込み型オペレーティングシステム、例えば、ＶｘＷｏｒｋｓ）は、一般的なシステムタスク（例えば、メモリマネージメント、記憶装置コントロール、電力マネージメント、等）をコントロールし及び管理するための種々のソフトウェアコンポーネント及び／又はドライバを備え、そして種々のハードウェア及びソフトウェアコンポーネント間の通信を容易にする。通信モジュール１２８は、１つ以上の外部ポート１２４を経て行われる他の装置との通信を容易にし、そしてＲＦ回路１０８及び／又は外部ポート１２４により受け取られるデータを取り扱うための種々のソフトウェアコンポーネントも含む。外部ポート１２４（例えば、ユニバーサルシリアルバス（ＵＳＢ）、ＦＩＲＥＷＩＲＥ、等）は、他の装置に直結されるか、又はネットワーク（例えば、インターネット、ワイヤレスＬＡＮ、等）を経て間接的に結合される。ある実施形態では、外部ポートは、ｉＰｏｄ（アップルコンピュータ社の商標）装置に使用される３０ピンコネクタと同じであるか、同様であるか、及び／又はそれに適合するマルチピン（例えば、３０ピン）コネクタである。
接触／運動モジュール１３０は、タッチスクリーン１１２（ディスプレイコントローラ１５６に関連する）及び他のタッチ感知装置（例えば、タッチパッド又は物理的クリックホイール）との接触を検出することができる。接触／運動モジュール１３０は、接触が生じたかどうか決定し（例えば、指ダウン事象を検出し）、接触の移動があるかどうか決定しそしてタッチスクリーン１１２を横切る移動を追跡し（例えば、１つ以上の指ドラグ事象を検出し）、接触が止んだかどうか決定し（例えば、指アップ事象又は接触の切断を検出し）、等の、接触の検出に関連した種々のオペレーションを遂行するための種々のソフトウェアコンポーネントを含む。接触／運動モジュール１３０は、タッチスクリーン１１２から接触データを受け取る。一連の接触データにより表される接触点の移動を決定することは、接触点の速さ（大きさ）、速度（大きさと方向）、及び／又は加速度（大きさ及び／又は方向の変化）を決定することを含む。これらのオペレーションは、単一の接触（例えば、１つの指の接触）、又は複数の同時接触（例えば、「マルチタッチ」／複数の指の接触）に適用される。又、ある実施形態では、接触／運動モジュール１３０及びディスプレイコントローラ１５６がタッチパッド上の接触を検出する。ある実施形態では、接触／運動モジュール１３０及びコントローラ１６０がクリックホイール上の接触を検出する。
接触／運動モジュール１３０は、ユーザにより入力されるジェスチャーを検出することができる。タッチスクリーン１１２上の異なるジェスチャーは、異なる接触パターンを有する。従って、特定の接触パターンを検出することによりジェスチャーを検出することができる。例えば、指タップジェスチャーを検出することは、指ダウン事象の検出に続いて、指ダウン事象と同じ位置（又は実質的に同じ位置）において（例えば、ソフトキーボードではテキストキャラクタキー又は絵文字キャラクタキーのようなボタン型ユーザインターフェイスオブジェクトの位置において）指アップ事象を検出することを含む。別の例として、タッチスクリーン上で指スワイプジェスチャーを検出することは、指ダウン事象の検出に続いて、１つ以上の指ドラグ事象を検出し、その後、指アップ事象を検出することを含む。ある実施形態では、接触／運動モジュール１３０は、ユーザ定義ジェスチャーを検出する。
グラフィックモジュール１３２は、表示されるグラフィックの輝度を変化させるコンポーネントを含めて、タッチスクリーン１１２にグラフィックをレンダリングし表示するための種々の既知のソフトウェアコンポーネントを含む。ここで使用する「グラフィック」という語は、ユーザに表示できるオブジェクトを含み、テキスト、ウェブページ、アイコン（ソフトキーを含むユーザインターフェイスオブジェクトのような）、デジタル映像、ビデオ、アニメ、等を含むが、これに限定されない。
ある実施形態では、グラフィックモジュール１３２は、使用されるグラフィックを表すデータを記憶する。各グラフィックには、対応するコードが指定される。グラフィックモジュール１３２は、表示されるグラフィックを特定する１つ以上のコードを、必要に応じて、座標データ及び他のグラフィックプロパティデータと共に、アプリケーション、等から受け取り、そしてスクリーン映像データを発生して、ディスプレイコントローラ１５６へ出力する。
グラフィックモジュール１３２のコンポーネントであるテキスト入力モジュール１３４は、種々のアプリケーション（例えば、連絡先１３７、ｅ−メール１４０、ＩＭ１４１、ブラウザ１４７、及びテキスト入力を必要とする他のアプリケーション）においてテキストを入力するためのソフトキーボードを与える。又、テキスト入力モジュール１３４は、種々のアプリケーション（例えば、ｅ−メール１４０、ＩＭ１４１、及び絵文字キャラクタ入力を使用する他のアプリケーション）において絵文字キャラクタを入力するための絵文字ソフトキーボードを与えるようにも構成される。ある実施形態では、テキスト入力モジュール１３４は、テキストを入力するためのソフトキーボード及び絵文字ソフトキーボードを表すデータを記憶する。
ＧＰＳモジュール１３５は、装置の位置を決定し、そしてこの情報を種々のアプリケーション（例えば、ローカルベースダイヤルに使用するための電話１３８、写真／ビデオメタデータとしてのカメラ１４３、並びに天気ウィジット、ローカルイエローページウィジット、及びマップ／ナビゲーションウィジットのような位置ベースサービスを提供するアプリケーション）に使用するために与える。
アプリケーション１３６は、次のモジュール（又はインストラクションセット）、或いはそのサブセット又はスーパーセットを含む。
・連絡先モジュール１３７（アドレス帳又は連絡先リストとも称される）；
・電話モジュール１３８；
・ビデオ会議モジュール１３９；
・ｅ−メールクライアントモジュール１４０；
・インスタントメッセージング（ＩＭ）モジュール１４１；
・トレーニングサポートモジュール１４２；
・静止及び／又はビデオ映像のためのカメラモジュール１４３；
・映像マネージメントモジュール１４４；
・ビデオプレーヤモジュール１４５；
・音楽プレーヤモジュール１４６；
・ブラウザモジュール１４７；
・カレンダーモジュール１４８；
・ウィジットモジュール１４９、これは、天気ウィジット１４９−１、株ウィジット１４９−２、計算器ウィジット１４９−３、アラームクロックウィジット１４９−４、辞書ウィジット１４９−５、及びユーザにより得られる他のウィジット、並びにユーザ生成ウィジット１４９−６を含む；
・ユーザ生成ウィジット１４９−６を作るためのウィジット生成モジュール１５０；
・サーチモジュール１５１；
・ビデオ及び音楽プレーヤモジュール１５２、これは、ビデオプレーヤモジュール１４５及び音楽プレーヤモジュール１４６を合体したもの；
・ノートモジュール１５３；
・マップモジュール１５４；及び／又は
・オンラインビデオモジュール１５５。
メモリ１０２に記憶される他のアプリケーション１３６は、例えば、他のワード処理アプリケーション、ＪＡＶＡイネーブルアプリケーション、暗号化、デジタルライツマネージメント、音声認識、及び音声複写を含む。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、連絡先モジュール１３７は、アドレス帳又は連絡先リストを管理するのに使用され、これは、アドレス帳に名前（１つ又は複数）を追加すること、アドレス帳から名前（１つ又は複数）を削除すること、電話番号（１つ又は複数）、ｅ−メールアドレス（１つ又は複数）、物理的アドレス（１つ又は複数）又は他の情報を名前に関連付けること、映像を名前に関連付けること、名前を分類し区分けすること、電話１３８、ビデオ会議１３９、ｅ−メール１４０又はＩＭ１４１による通信を開始し及び／又は容易にするために電話番号又はｅ−メールアドレスを与えること、等を含む。
ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロホン１１３、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、電話モジュール１３８は、電話番号に対応するキャラクタのシーケンスを入力し、アドレス帳１３７の１つ以上の電話番号にアクセスし、入力された電話番号を変更し、各電話番号をダイヤルし、会話を行い、そして会話が完了したときに切断又はハングアップするのに使用される。上述したように、ワイヤレス通信は、複数の通信規格、プロトコル及び技術のいずれを使用してもよい。
ＲＦ回路１０８、オーディオ回路１１０、スピーカ１１１、マイクロホン１１３、タッチスクリーン１１２、ディスプレイコントローラ１５６、光学的センサ１６４、光学的センサコントローラ１５８、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、連絡先リスト１３７、及び電話モジュール１３８に関連して、ビデオ会議モジュール１３９は、ユーザと１つ以上の他の参加者との間のビデオ会議を開始し、実行しそして終了するのに使用される。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、ｅ−メールクライアントモジュール１４０は、ｅ−メールを生成し、送信し、受信し及び管理するのに使用される。映像マネージメントモジュール１４４に関連して、ｅ−メールモジュール１４０は、カメラモジュール１４３で撮影された静止又はビデオ映像と共にｅ−メールを生成して送信するのを非常に容易にする。更に、テキスト入力モジュール１３４は、ｅ−メールクライアントモジュール１４０に関連して機能して、ｅ−メールへの絵文字の挿入を容易にする。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、インスタントメッセージングモジュール１４１は、インスタントメッセージに対応するキャラクタのシーケンスを入力し、以前に入力されたキャラクタを変更し、各インスタントメッセージを送信し（例えば、電話ベースのインスタントメッセージについてはショートメッセージサービス（ＳＭＳ）又はマルチメディアメッセージサービス（ＭＭＳ）プロトコルプロトコルを使用して、或いはインターネットベースのインスタントメッセージについてはＸＭＰＰ、ＳＩＭＰＬＥ、又はＩＭＰＳを使用して）、インスタントメッセージを受信し、そして受信したインスタントメッセージを見るのに使用される。ある実施形態では、送信及び／又は受信されるインスタントメッセージは、グラフィック、写真、オーディオファイル、ビデオファイルを含み、及び／又はＭＭＳ及び／又はエンハンストメッセージングサービス（ＥＭＳ）でサポートされる他のアタッチメントも含む。ここで使用する「インスタントメッセージング」とは、電話ベースのメッセージ（例えば、ＳＭＳ又はＭＭＳを使用して送信されるメッセージ）と、インターネットベースのメッセージ（例えば、ＸＭＰＰ、ＳＩＭＰＬＥ又はＩＭＰＳを使用して送信されるメッセージ）の両方を指す。更に、テキスト入力モジュール１３４は、インスタントメッセージングモジュール１４１に関連して機能して、各インスタントメッセージへの絵文字の挿入を容易にする。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ＧＰＳモジュール１３５、マップモジュール１５４、及び音楽プレーヤモジュール１４６に関連して、トレーニングサポートモジュール１４２は、トレーニング（例えば、時間、距離及び／又はカロリー燃焼目標をもつ）を生成し、トレーニングセンサ（スポーツ器具）と通信し、トレーニングセンサデータを受信し、トレーニングを監視するのに使用されるセンサを校正し、トレーニング用の音楽を選択して再生し、そしてトレーニングデータを表示し、記憶し及び送信するのに使用される。
タッチスクリーン１１２、ディスプレイコントローラ１５６、光学的センサ１６４、光学的センサコントローラ１５８、接触モジュール１３０、グラフィックモジュール１３２、及び映像マネージメントモジュール１４４に関連して、カメラモジュール１４３は、静止映像又はビデオ（ビデオストリームを含む）を捕獲してメモリ１０２へ記憶し、静止映像又はビデオの特性を変更し、又はメモリ１０２から静止映像又はビデオを削除するのに使用される。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びカメラモジュール１４３に関連して、映像マネージメントモジュール１４４は、静止及び／又はビデオ映像をアレンジし、変更し、さもなければ、操作し、ラベル添付し、削除し、提示し（例えば、デジタルスライドショー又はアルバムで）、そして記憶するのに使用される。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０及びスピーカ１１１に関連して、ビデオプレーヤモジュール１４５は、ビデオを（例えば、タッチスクリーンに、又は外部ポート１２４を経て接続された外部ディスプレイに）表示し、提示し、さもなければ、再生するのに使用される。
タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０、スピーカ１１１、ＲＦ回路１０８、及びブラウザモジュール１４７に関連して、音楽プレーヤモジュール１４６は、録音された音楽及び１つ以上のファイルフォーマットで記憶された他のサウンドファイル、例えば、ＭＰ３又はＡＡＣファイルをユーザがダウンロードして再生できるようにする。ある実施形態では、装置１００は、ｉＰｏｄ（アップルコンピュータ社の商標）のような、ＭＰ３プレーヤの機能を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、ブラウザモジュール１４７は、ウェブページ又はその一部分、並びにウェブページにリンクされたアタッチメント及び他のファイルをサーチし、それにリンクし、それを受信し及び表示することを含めて、インターネットをブラウズするのに使用される。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ｅ−メールモジュール１４０、及びブラウザモジュール１４７に関連して、カレンダーモジュール１４８は、カレンダー及びカレンダーに関連したデータ（例えば、カレンダーエントリー、ツードゥ(to do)リスト、等）を生成し、表示し、変更し、そして記憶するのに使用される。更に、テキスト入力モジュール１３４は、カレンダーモジュール１４８に関連して機能して、カレンダーエントリー、ツードゥリスト、等への絵文字の挿入を容易にする。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びブラウザモジュール１４７に関連して、ウィジットモジュール１４９は、ユーザによりダウンロードされて使用されるミニアプリケーション（例えば、天気ウィジット１４９−１、株ウィジット１４９−２、計算器ウィジット１４９−３、アラームクロックウィジット１４９−４、及び辞書ウィジット１４９−５）であるか、又はユーザにより生成されるミニアプリケーション（例えば、ユーザ生成ウィジット１４９−６）である。ある実施形態では、ウィジットは、ＨＴＭＬ（ハイパーテキストマークアップ言語）ファイル、ＣＳＳ（カスケーディングスタイルシート）ファイル、及びＪａｖａＳｃｒｉｐｔファイルを含む。ある実施形態では、ウィジットは、ＸＭＬ（エクステンシブルマークアップ言語）ファイル、及びＪａｖａＳｃｒｉｐｔファイル（例えば、Ｙａｈｏｏ！ウィジット）を含む。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、及びブラウザモジュール１４７に関連して、ウィジット生成モジュール１５０は、ユーザによりウィジットを生成するのに使用される（例えば、ウェブページのユーザ指定部分をウィジットへと転化させる）。
タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、サーチモジュール１５１は、１つ以上のサーチ基準（例えば、１つ以上のユーザ指定サーチ用語）に一致するテキスト、音楽、サウンド、映像、ビデオ、及び又は他のファイルをメモリ１０２においてサーチするのに使用される。
タッチスクリーン１１２、ディスプレイコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、及びテキスト入力モジュール１３４に関連して、ノートモジュール１５３は、ノート、ツードゥリスト、等を生成し管理するのに使用される。更に、テキスト入力モジュール１３４は、ノートモジュール１５３に関連して機能し、ノート、ツードゥリスト、等への絵文字の挿入を容易にする。
ＲＦ回路１０８、タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、テキスト入力モジュール１３４、ＧＰＳモジュール１３５、及びブラウザモジュール１４７に関連して、マップモジュール１５４は、マップ及びマップに関連したデータ（例えば、運転方向、特定の場所又はその付近の店舗及び他の交差点に関するデータ、及び場所に基づく他のデータ）を受け取り、表示し、変更し及び記憶するのに使用される。更に、テキスト入力モジュール１３４は、マップモジュール１５４に関連して機能し、マップへの絵文字の挿入を容易にする。
タッチスクリーン１１２、ディスプレイシステムコントローラ１５６、接触モジュール１３０、グラフィックモジュール１３２、オーディオ回路１１０、スピーカ１１１、ＲＦ回路１０８、テキスト入力モジュール１３４、ｅ−メールクライアントモジュール１４０、及びブラウザモジュール１４７に関連して、オンラインビデオモジュール１５５は、ユーザが、アクセス、ブラウズ、受信（例えば、ストリーミング及び／又はダウンロードにより）、再生（例えば、タッチスクリーンに、又は外部ポート１２４を経て接続された外部ディスプレイに）を行えるようにし、更に、特定のオンラインビデオへのリンクと共にｅ−メールを送信し、その他、オンラインビデオをＨ．２６４のような１つ以上のファイルフォーマットで管理できるようにする。ある実施形態では、ｅ−メールクライアントモジュール１４０ではなくインスタントメッセージングモジュール１４１を使用して、特定のオンラインビデオへのリンクを送信する。オンラインビデオアプリケーションの付加的な説明は、２００７年６月２０日に出願された“Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos”と題する米国プロビジョナル特許出願第６０／９３６，５６２号、及び２００７年１２月３１日に出願された“Portable Multifunction Device, Method, and Graphical User Interface for Playing Online Videos”と題する米国特許出願第１１／９６８，０６７号に見ることができ、それらの内容を参考としてここに援用する。
上述したモジュール及びアプリケーションの各々は、上述した１つ以上の機能を遂行するためのインストラクションのセットに対応する。これらのモジュール（即ち、インストラクションのセット）は、個別のソフトウェアプログラム、手順又はモジュールとして具現化される必要がなく、従って、これらモジュールの種々のサブセットを種々の実施形態において結合し、さもなければ、再アレンジすることができる。例えば、ビデオプレーヤモジュール１４５は、音楽プレーヤモジュール１４６と共に単一のモジュール（例えば、図１Ｂのビデオ及び音楽プレーヤモジュール１５２）へと結合することができる。ある実施形態では、メモリ１０２は、上述したモジュール及びデータ構造体のサブセットを記憶することができる。更に、メモリ１０２は、上述しなかった付加的なモジュール及びデータ構造体を記憶することもできる。
ある実施形態では、装置１００は、その機能の既定セットの動作がタッチスクリーン１１２及び／又はタッチパッドを通して排他的に実行される装置である。タッチスクリーン及び／又はタッチパッドを装置１００の動作のための一次入力／コントロール装置として使用することにより、装置１００における物理的入力／コントロール装置（プッシュボタン、ダイヤル、等）の数を減少することができる。
タッチスクリーン及び／又はタッチパッドを通して排他的に遂行される機能の既定セットは、ユーザインターフェイス間のナビゲーションを含む。ある実施形態では、タッチパッドは、ユーザがタッチすると、装置１００を、装置１００に表示されるユーザインターフェイスから、メイン、ホーム又はルートメニューへとナビゲートする。このような実施形態では、タッチパッドは、「メニューボタン」と称される。他の実施形態では、メニューボタンは、タッチパッドではなく、物理的なプッシュボタン又は他の物理的な入力／コントロール装置である。
図２は、ある実施形態によるタッチスクリーン１１２を有するポータブル多機能装置１００を示す。タッチスクリーンは、ユーザインターフェイス（ＵＩ）２００内に１つ以上のグラフィックを表示する。この実施形態及び他の実施形態では、ユーザは、例えば、１本以上の指２０２（図には適切な縮尺率で描かれていない）でグラフィックに接触又はタッチすることにより、１つ以上のグラフィックを選択することができる。ある実施形態では、１つ以上のグラフィックの選択は、ユーザが１つ以上のグラフィックとの接触を切断したときに生じる。ある実施形態では、接触は、装置１００に接触する１つ以上のタップ、１つ以上のスワイプ（左から右、右から左、アップ方向及び／又はダウン方向）、及び／又は指の回転（右から左、左から右、アップ方向及び／又はダウン方向）のようなジェスチャーを含む。ある実施形態では、グラフィックとの偶発的な接触でグラフィックが選択されることはない。例えば、選択に対応するジェスチャーがタップであるときに、アプリケーションアイコンの上をスイープするスワイプジェスチャーでは、対応するアプリケーションが選択されることがない。
又、装置１００は、「ホーム」又はメニューボタン２０４のような１つ以上の物理的なボタンも含む。上述したように、メニューボタン２０４は、装置１００で実行されるアプリケーションのセットにおいて任意のアプリケーション１３６へナビゲートするのに使用される。或いは又、ある実施形態では、メニューボタンは、タッチスクリーン１１２においてＧＵＩのソフトキーとして具現化される。
一実施形態において、装置１００は、タッチスクリーン１１２と、メニューボタン２０４と、装置の電源をオン／オフし及び装置をロックするためのプッシュボタン２０６と、ボリューム調整ボタン２０８と、加入者アイデンティティモジュール（ＳＩＭ）カードスロット２１０と、ヘッドセットジャック２１２と、ドッキング／充電外部ポート１２４とを備えている。プッシュボタン２０６は、これを押して、所定時間インターバル中、押圧状態に保持することにより装置の電源をターンオン／オフし、又、このボタンを押して、所定時間インターバルが経過する前に放すことにより装置をロックし、及び／又は装置をアンロックするか又はアンロックプロセスを開始するのに使用される。又、別の実施形態では、装置１００は、マイクロホン１１３を通してある機能をアクチベート又はデアクチベートするために口頭入力を受け入れることもできる。
図３は、ある実施形態によりポータブル電子装置をアンロックするための規範的ユーザインターフェイスを示す。ある実施形態では、ユーザインターフェイス３００は、次の要素、或いはそのサブセット又はスーパーセットを含む。
・装置をアンロックするためにフィンガージェスチャーと共に移動するアンロック映像
３０２；
・アンロックジェスチャーに対して視覚キューを与える矢印３０４；
・アンロックジェスチャーに対して付加的なキューを与えるチャンネル３０６；
・時刻３０８；
・曜日３１０；
・日付３１２；及び
・壁紙映像３１４。
ある実施形態では、装置は、それがユーザインターフェイスロック状態にある間にタッチ感知ディスプレイとの接触（例えば、ユーザの指がアンロック映像３０２又はその付近に接触する）を検出する。装置は、接触に基づいてアンロック映像３０２を移動させる。装置は、検出された接触が、チャンネル３０６にわたってアンロック映像を移動するような規定のジェスチャーに対応する場合には、ユーザインターフェイスアンロック状態へと移行する。逆に、装置は、検出された接触が既定のジェスチャーに対応しない場合には、ユーザインターフェイスをロック状態に保持する。上述したように、タッチスクリーンにおけるジェスチャーを使用して装置をアンロックするプロセスは、２００５年１２月２３日に出願された“Unlocking A Device By Performing Gestures On An Unlock Image”と題する米国特許出願第１１／３２２，５４９号；及び２００５年１２月２３日に出願された“Indication Of Progress Towards Satisfaction Of A User Input Condition”と題する第１１／３２２，５５０号に説明されており、これらは、参考としてここにそのまま援用する。
図４Ａ及び４Ｂは、ある実施形態によるポータブル多機能装置におけるアプリケーションのメニューのための規範的ユーザインターフェイスを示す。ある実施形態では、ユーザインターフェイス４００Ａは、次の要素、或いはそのサブセット又はスーパーセットを含む。
・セルラー及びＷｉ−Ｆｉ信号のような、ワイヤレス通信用の信号強度インジケータ４０２；
・時刻４０４；
・バッテリ状態インジケータ４０６；
・次のような頻繁に使用するアプリケーションのためのアイコンを伴うトレイ４０８：
・逸したコール又はボイスメールメッセージの数のインジケータ４１４を含む電話１３８；
・未読ｅ−メールの数のインジケータ４１０を含むｅ−メールクライアント１４０；
・ブラウザ１４７；及び
・音楽プレーヤ１４６；並びに
・次のような他のアプリケーションのためのアイコン：
・ＩＭ１４１；
・映像マネージメント１４４；
・カメラ１４３；
・ビデオプレーヤ１４５；
・天気１４９−１；
・株１４９−２；
・トレーニングサポート１４２；
・カレンダー１４８；
・計算器１４９−３；
・アラームクロック１４９−４；
・辞書１４９−５；及び
・ユーザ生成ウィジット１４９−６。
ある実施形態では、ユーザインターフェイス４００Ｂは、次の要素、或いはそのサブセット又はスーパーセットを含む。
・上述した４０２、４０４、４０６、１４１、１４８、１４４、１４３、１４９−３、１４９−２、１４９−１、１４９−４、４１０、４１４、１３８、１４０及び１４７；
・マップ１５４；
・ノート１５３；
・以下に述べるように、装置１００の設定及びその種々のアプリケーション１３６へのアクセスを与える設定４１２；
・ｉＰｏｄ（アップルコンピュータ社の商標）モジュール１５２とも称されるビデオ及び音楽プレーヤモジュール１５２；及び
・ＹｏｕＴｕｂｅ（グーグル社の商標）モジュール１５５とも称されるオンラインビデオモジュール１５５。
ある実施形態では、ＵＩ４００Ａ又は４００Ｂは、ウィジットベースアプリケーション及び非ウィジットベースアプリケーションの両方へ一体的アクセスを与える。ある実施形態では、ユーザ生成であるかどうかに関わらず、全てのウィジットがＵＩ４００Ａ又は４００Ｂに表示される。他の実施形態では、ユーザ生成ウィジット１４９−６のアイコンをアクチベートすると、ユーザ生成ウィジット又はユーザ生成ウィジットに対応するアイコンを含む別のＵＩを導く。
ある実施形態では、ユーザは、例えば、参考としてここにそのまま援用する２００６年７月２４日に出願された“Portable Electronic Device With Interface Reconfiguration Mode”と題する米国特許出願第１１／４５９，６０２号説明されたプロセスを使用して、ＵＩ４００Ａ又は４００Ｂにおけるアイコンを再アレンジすることができる。例えば、ユーザは、指ジェスチャーを使用して、アプリケーションアイコンをトレイ４０８に入れたり出したりすることができる。
図５Ａ−５Ｇは、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００に絵文字キャラクタキーを設けて編成するための規範的ユーザインターフェイスを示す。これらの図の概略をここに述べる。
図５Ａは、インスタントメッセージングアプリケーション１４１におけるユーザインターフェイス５００Ａを示す。この例で述べるように、ユーザにより選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示し又は表示するよう動作できるキャラクタ入力エリア５０００が設けられる。上述したように、明細書及び特許請求の範囲で使用されるテキストキャラクタとは、アルファニューメリックキャラクタ、サイノグラフ、日本語の漢字又は仮名記号、及び／又はその他、人間の書記言語キャラクタを指し、一方、絵文字キャラクタとは、人間の書記言語におけるテキストキャラクタではない静止及びアニメ化絵文字を指す。ユーザインターフェイス５００Ａには、複数の絵文字カテゴリアイコン５０１０を含むキーボードディスプレイエリア５００５も設けられる。絵文字カテゴリアイコン５０１０は、複数の絵文字カテゴリ、例えば、最も最近及び頻繁に使用されるもの、人、自然、物体、旅行、記号、及び／又は季節的な絵文字カテゴリに対応する。ＵＩ５００Ａに表示される規範的な実施形態では、絵文字カテゴリアイコン５０１０−１は、最も最近及び頻繁に使用されるものに対応し、絵文字カテゴリアイコン５０１０−２は、人に対応し、絵文字カテゴリアイコン５０１０−３は、自然に対応し、絵文字カテゴリアイコン５０１０−４は、物体に対応し、絵文字カテゴリアイコン５０１０−５は、旅行に対応し、そして絵文字カテゴリアイコン５０１０−６は、記号に対応する。
又、ＵＩ５００Ａは、表示される各絵文字カテゴリに対してキーボード表示エリア５００５内に規範的な絵文字キャラクタキー５０１５も含む。規範的なＵＩ５００Ａでは、表示される絵文字キャラクタキー（即ち、５０１５−１、５０１５−２及び５０１５−３）は、絵文字カテゴリ「最も最近及び頻繁に使用されるもの」に対応する。というのは、絵文字カテゴリアイコン５０１０−１、最も最近及び頻繁に使用されるもの、が現在選択されているからである。現在選択されている絵文字カテゴリアイコン５０１０は、典型的に、例えば、その背景カラーを未選択の絵文字カテゴリアイコンに対しハイライトにするか又は変更することにより、未選択の絵文字カテゴリアイコンとは視覚上区別される。
ある実施形態では、絵文字カテゴリアイコン５０１０−１、最も最近及び頻繁に使用される絵文字キャラクタ、に対応する絵文字カテゴリの絵文字キャラクタキーが、使用された絵文字キャラクタの使用の最新性及び使用の頻度を分析するアルゴリズムに基づいて、表示のために選択される。このアルゴリズムは、絵文字キャラクタ使用の履歴リストを生成する。履歴リストの各エントリは、履歴リストにおけるエントリの位置に基づいて相対的な重みが与えられる。例えば、最も最近使用された絵文字キャラクタは、最も高い重みを得、２番目に最近使用された絵文字キャラクタは、最も最近使用された絵文字キャラクタより小さな重みを得、３番目に最近使用された絵文字キャラクタは、２番目に最近使用された絵文字キャラクタより小さい重みを得、等々となる。次いで、各々の個別の絵文字キャラクタに対して、その絵文字キャラクタの相対的な重みを合成（例えば、総計）することにより全体的なスコアが決定される。例えば、履歴リストにおいて２番目、１０番目及び２０番目の位置を占有する絵文字キャラクタの場合、その絵文字キャラクタの全体的スコアは、履歴リストの第２、第１０及び第２０番目の位置に与えられた相対的な重みの和となる。次いで、全体的スコアが最も高い絵文字キャラクタが、絵文字カテゴリ「最も最近及び頻繁に使用される」に表示される（例えば、スコアが小さくなる順序で）。
又、この規範的実施形態において、ＵＩ５００Ａは、キーボード選択アイコン５０２０も含む。ある実施形態では、キーボード選択アイコン５０２０は、例えば、タッチスクリーンディスプレイの底部に沿った既定のエリア５００９において、複数の絵文字カテゴリアイコン５０１０と同時に表示される。キーボード選択アイコン５０２０は、ある実施形態では、キーボード表示エリア５００５において絵文字キャラクタキーの表示をテキストキャラクタ入力キーボードの表示（例えば、図５Ｇの５０５５）と置き換えるのに使用される。更に、ＵＩ５００Ａは、第２のアイコン５０２５も備え、これは、（例えば、指タップジェスチャーにより）アクチベートされたときに、エリア５０００に入力された電子メッセージの送信を開始する。又、ＵＩ５００Ａは、削除アイコン５０１１も備え、これは、（例えば、指タップジェスチャーにより）アクチベートされたとき、入力エリア５０００における１つ以上のキャラクタを削除する。
ＵＩ５００Ｂ（図５Ｂ）は、各絵文字カテゴリ、ここでは、絵文字カテゴリアイコン５０１０−２をハイライトにすることで選択されたときに目に見えるように指示される人、に対するサブセットシーケンス印アイコン５０４０を含むキーボード表示エリア５００５を示す。サブセットシーケンス印アイコン５０４０は、現在表示されている絵文字カテゴリにおけるサブセットの数と、キーボード表示エリア５００５内の絵文字キャラクタキーのサブセットのシーケンスにおける表示されたサブセットの位置とに関する情報を与える。ここで、サブセットシーケンス印アイコン５０４０は、人絵文字カテゴリに絵文字キャラクタキーのサブセットが６つあり、且つ人絵文字カテゴリの第１サブセットが現在表示されていることを指示する。別の例としては、図６Ａ−６Ｃのサブセットシーケンス印アイコン６０００についての以下の説明を参照されたい。
図５Ｃないし５Ｆに各々示されたＵＩ５００Ｃ、ＵＩ５００Ｄ、ＵＩ５００Ｅ及びＵＩ５００Ｆは、他の規範的絵文字カテゴリ及び絵文字キャラクタキーボードとのユーザインターフェイスを示す。
ＵＩ５００Ｇ（図５Ｇ）は、キーボード表示エリア５００５におけるテキストキャラクタ入力キーボード５０５５を示す。ある実施形態では、キーボード５０５５は、テキストキャラクタ入力カテゴリアイコン５０６０を備え、これは、（例えば、アイコン上での指タップジェスチャーにより）アクチベートされたとき、数字キー及び他のテキストキャラクタ入力キーを伴う別のテキストキャラクタキーボードを表示させる。ある実施形態では、キーボード５０５５は、スペースキャラクタを入力するように動作すると共に、テキストキャラクタ入力時に自動完了及び／又は自動修正を確認するようにも動作するハイブリッド目的キー５０６２を備えている。例えば、日本語のテキストを入力するときには、ある実施形態では、音声テキストを使用することができる。装置が、ユーザにより入力されたテキストキャラクタを評価するときに、既に入力されたテキストに対して、１つ以上のワードの推奨完了候補が提示される。例えば、ユーザがキャラクタ“ra”をタイプした場合には、完了候補として“rain”が推奨される。その後、“rain”完了候補が表示されている間に（図示せず）、（例えば、キー５０６２上での指タップジェスチャーにより）ハイブリッド目的キー５０６２をアクチベートし、“rain”が入力を意図したテキストであることを確認し、装置は、キャラクタストリング“rain”をキャラクタ入力エリア５０００へ挿入する。ある実施形態では、サイノグラフ又は日本語の仮名キャラクタを完了候補として提示してもよい。ある実施形態では、キーボード５０５５は、改行キャラクタを入力するよう動作すると共に、アクションに対して自動完了を確認するようにも動作できるハイブリッド目的キー５０６３を含む。例えば、ユーザがキャラクタ“goo”をタイプした場合に、装置は、アクション完了候補としてＧｏｏｇｌｅサーチエンジンへ進むことを推奨する。その後、（例えば、キー５０６３上での指タップジェスチャーにより）ハイブリッド目的キー５０６３をアクチベートし、装置が、ブラウジングモジュール１４７をオープンして、Ｇｏｏｇｌｅサーチエンジンのウェブページを表示するようにさせる。又、キーボード５０５５は、キーボード選択アイコン５０２０も含む。更に、キーボード５０５５は、とりわけ、５０６５−１（Ｑ）、５０６５−２（Ａ）、及び５０６５−３（Ｓ）のようなテキストキャラクタ入力キー５０６５も含む。
図６Ａ−６Ｅは、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００において特定の絵文字カテゴリの絵文字キャラクタサブセット間をナビゲートしそしてある絵文字キャラクタを入力するための規範的ユーザインターフェイスを示す。これらの図の概略をここに述べる。
ＵＩ６００Ａ（図６Ａ）は、現在表示されている絵文字カテゴリ、ここでは、絵文字カテゴリアイコン５０１０−３をハイライトにすることで選択されたときに目に見えるように指示される自然、に対するサブセットシーケンス印アイコン６０００−１、６０００−２及び６０００−３を示す。このサブセットシーケンス印アイコン６０００−１、６０００−２及び６０００−３は、現在表示されている絵文字カテゴリにおけるサブセットの数と、キーボード表示エリア５００５内の絵文字キャラクタキーのサブセットのシーケンスにおける表示されたサブセットの位置とに関する情報を与える。例えば、ＵＩ６００Ａにおいて、印アイコン６０００の数は、この絵文字カテゴリ（自然）に３つのサブセットがあることを指示する。更に、アイコン６０００−２及び６０００−３に対してアイコン６０００−１を視覚上ハイライトにすることは、このカテゴリの第１サブセット６０１５が表示されることを指示する。
ある実施形態では、キーボード表示エリア５００５においてジェスチャー（例えば、ジェスチャー６０１０（図６Ａ）、水平又は実質的に水平の指スワイプジェスチャー）を検出すると、絵文字キャラクタキーの第１サブセット６０１５が、キーボード表示エリア５００５において絵文字キャラクタキーの第２サブセット６０２０（図６Ｂ）に置き換えられる。更に、ある実施形態では、サブセットシーケンス印アイコンにより与えられる情報は、絵文字キャラクタキーの表示された第１サブセット６０１５が絵文字キャラクタキーの第２サブセット６０２０に置き換えられたことを反映するように更新される。この例では、サブセットシーケンス印アイコン６０００−１がＵＩ６００Ａにおいてハイライトにされる。というのは、自然カテゴリにおける絵文字キャラクタキーの第１サブセット６０１５が表示されるからである。絵文字キャラクタキーの第１サブセット６０１５が絵文字キャラクタキーの第２サブセット６０２０（図６Ｂ）に置き換えられると、サブセットシーケンス印アイコン６０００−２がハイライトにされる。ある実施形態では、現在表示されている絵文字キャラクタキーのサブセットに対応するサブセットシーケンス印アイコンがハイライトにされるか、さもなければ、視覚上区別される一方、表示されていた絵文字キャラクタキーのサブセットに対応する別のサブセットシーケンス印アイコンをハイライトにするか、さもなければ、視覚上区別することが停止される。
既にある程度説明したＵＩ６００Ｂ（図６Ｂ）は、キーボード表示エリア５００５における別のジェスチャー（例えば、ジェスチャー６０２５、水平又は実質的に水平の指スワイプジェスチャー）の検出を示す。ジェスチャー６０２５の検出に応答して、絵文字キャラクタキーの第２サブセット６０２０が、キーボード表示エリア５００５における絵文字キャラクタキーの第３サブセット６０４０（図６Ｃ）の表示に置き換えられる。対応的に、ＵＩ６００Ｃ（図６Ｃ）に示すように、サブセットシーケンス印アイコン６０００−２ではなく、サブセットシーケンス印アイコン６０００−３がハイライトにされる。
ＵＩ６００Ｃ（図６Ｃ）は、キーボード表示エリア５００５における別のジェスチャー（例えば、ジェスチャー６０３０、即ち、ジェスチャー６０２５の方向とは実質的に逆の水平又は実質的に水平の指スワイプジェスチャー）の検出を示す。ジェスチャー６０３０の検出に応答して、絵文字キャラクタキーの第３サブセット６０４０が、キーボード表示エリア５００５における絵文字キャラクタキーの第２サブセット６０２０（図６Ｂ）の表示に置き換えられる。対応的に、サブセットシーケンス印アイコン６０００−３ではなく、サブセットシーケンス印アイコン６０００−２がハイライトにされる（図６Ｂ）。
ＵＩ６００Ｃ（図６Ｃ）は、絵文字キー６０５０におけるユーザジェスチャー６０４５（例えば、指タップジェスチャー）も示す。ＵＩ６００Ｄ（図６Ｄ）は、ユーザジェスチャー６０４５の指接触が、（図６Ｃに示した）絵文字キー６０５０上に依然ある間に表示されるキー選択アイコン６０６０を示す。このキー選択アイコン６０６０は、ユーザの指が、タッチスクリーンディスプレイ上の指接触の現在位置においてタッチスクリーンディスプレイから持ち上げられる（接触を中止する）場合に選択されるキーを示す。ある実施形態では、選択された絵文字キャラクタ、この場合は、絵文字キー６０５０に対応する絵文字キャラクタの映像６０６１が、キー選択アイコン６０６０内に表示される。
ＵＩ６００Ｅ（図６Ｅ）は、選択された絵文字キャラクタ、この場合は、ジェスチャー６０４５の検出に応答してキャラクタ入力エリア５０００内に表示される、絵文字キー６０５０に対応する絵文字キャラクタキーの映像６０７０を示す。
図７Ａ−７Ｅは、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００において絵文字キャラクタを入力しそして絵文字キャラクタを含む電子メッセージを送信するための規範的ユーザインターフェイスを示す。これらの図の概略をここに述べる。
ＵＩ７００ＡないしＵＩ７００Ｃは、上述したのと同様の形態での絵文字キャラクタのユーザ選択を示す。ＵＩ７００Ａにおいて、絵文字キー７０００が、ユーザジェスチャー７００１（例えば、指タップジェスチャー）の検出に応答して選択される。ＵＩ７００Ｂ（図７Ｂ）は、ジェスチャー７００１に使用される指が、絵文字キー７０００に対応するエリアにまだ接触している間に表示されるキー選択アイコン７０１０を示す。
ＵＩ７００Ｃ（図７Ｃ）は、ジェスチャー７００１の検出に応答してキャラクタ入力エリア５０００内に表示される選択された絵文字キャラクタの映像７０２５を示す。送信アイコン５０２５（図７Ｄ）におけるユーザジェスチャー（例えば、図７Ｄの指タップジェスチャー７０２６）の検出に応答して、エリア５０００に入力されたテキストキャラクタ及び絵文字キャラクタが別の当事者（例えば、図７Ｄ及び７Ｅのjohn appleseed）へ電子メッセージとして送信される。
この例では、絵文字キャラクタがインスタントメッセージで入力され送信される。しかし、当業者であれば、絵文字キャラクタは、ｅ−メール１４０のような他の形式の電子メッセージ及びドキュメントで入力され送信されてもよいことが理解されよう。
図８Ａ−８Ｃは、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００においてソフトウェアキーボードの絵文字キャラクタキーを再構成するための規範的ユーザインターフェイスを示す。このプロセスは、ユーザが、ポータブル電子装置において絵文字キャラクタキーを再アレンジするための（例えば、絵文字キャラクタキーの位置を、ユーザがより効率的に入力するように最適化するための）簡単で効率的なメカニズムを与える。
ＵＩ８００Ａ（図８Ａ）は、絵文字キー８００１−１及び８００１−２を含む複数の絵文字キャラクタキー８００２を伴うキーボード表示エリア５００５を示す。ユーザインターフェイスは、既定のユーザインターフェイス再構成プロセスを開始するために既定のユーザアクション（例えば、絵文字キャラクタキー８００１を指で押して指接触８００５を所定時間以上保持する）を検出するように構成される。
ＵＩ８００Ｂ（図８Ｂ）は、ある実施形態において、既定のユーザアクション８００５を検出した際に、キーボード表示エリア５００５内の絵文字キャラクタキー８００１が、各絵文字キャラクタキーの各平均位置を実質的に中心とする領域において振動する（例えば、振動８０２０−１、８０２０−２、８０２０−３、等）ことを示している。これらの振動は、装置が現在インターフェイス再構成モードにあり且つ振動アイコンが再アレンジされるという簡単な視覚指示を与える。
又、ＵＩ８００Ｂに示すように、ある実施形態において、装置は、複数の絵文字キャラクタキー８００２の第１絵文字キャラクタキー８００１−２に対応する第１位置でユーザがタッチスクリーンディスプレイ１１２とで接触点８０５０を形成することを検出し、更に、その接触点８０５０がタッチスクリーンディスプレイ１１２上を第２位置８０２５へ移動することを検出する。ある実施形態において、ユーザインターフェイスは、接触点８０５０の検出された移動に基づき第１の絵文字キャラクタキー８００１−２がタッチスクリーンディスプレイ１１２上を第２位置８０２５へ移動することを表示する。
ＵＩ８００Ｃ（図８Ｃ）において、ユーザインターフェイスは、既定のユーザインターフェイス再構成プロセスを終了するための第２の既定のユーザアクションを検出する（例えば、ホームボタン２０４のアクチベーションを検出する）のに応答して、第１の絵文字キャラクタキー８００１−２の位置を第２位置に固定する。ここに示す例では、その正味の結果として、絵文字キャラクタキー８００１−１及び８００１−２は、ＵＩ８００Ａと比較したときにＵＩ８００Ｃにおいて位置が交換されている。
図９Ａ−９Ｈは、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための規範的ユーザインターフェイスを示す。これらの図の概略をここに述べる。
ＵＩ９００（図９Ａ）は、ユーザインターフェイスロックモードにある規範的ユーザインターフェイスを示す。上述した図３の説明も参照されたい。ユーザインターフェイスアンロックモードでは、装置１００は、その通常の動作状態にあり、ユーザインターフェイスとの対話に対応するユーザ入力を検出しそしてそれに応答する。アンロックモードにある装置１００は、アンロック状態装置１００として説明する。アンロック状態装置１００は、ユーザインターフェイスの間をナビゲートするユーザ入力、データのエントリ、及び機能のアクチベーション又はデアクチベーションを検出し、それに応答する。ユーザインターフェイスアンロックモードとは対照的に、ユーザインターフェイスロックモードでは、コントロールアイコンの限定されたサブセットだけが表示され、装置１００は、指ジェスチャーの限定されたセットだけに応答する。例えば、アンロック映像３０２、矢印３０４、及びチャンネル３０６だけが、壁紙映像３１４と共に表示される（ＵＩ９００Ａ）。更に、以下に述べるように、絵文字キャラクタを含む少数の既定の応答が表示され、及び／又はユーザインターフェイスロックモードにある間に受信したメッセージに応答するために少数のジェスチャーが使用される。
ＵＩ９００（図９Ｂ）は、ユーザインターフェイスがユーザインターフェイスロックモードにある間にある当事者２２１０（ここでは、“Jane Doe”）からポータブル電子装置のユーザへ到来するメッセージを受け取ることを示し、当事者２２１から到来するメッセージ２２１２の少なくとも一部分は、タッチスクリーンディスプレイ１１２においてユーザに表示される。
ＵＩ９００Ｃ（図９Ｃ）は、タッチスクリーンディスプレイ１１２において絵文字キャラクタに対応する１つ以上の既定の指ジェスチャー（例えば、タップジェスチャー９１００−１、９１００−２、及びスワイプジェスチャー９１００−３）をユーザインターフェイスが検出することを示している。ある実施形態では、図１０Ａ−１０Ｅ及び図１６を参照して以下に述べるように、１つ以上の既定の指ジェスチャーを絵文字キャラクタに指定することにより、これら１つ以上の既定の指ジェスチャーと絵文字キャラクタとの間の対応性が形成される。又、ある実施形態では、ユーザインターフェイスは、到来するメッセージ２２１２に対する応答の送信を開始するための既定のユーザアクション（例えば、スワイプジェスチャー２２１３）を検出し、次いで、到来するメッセージ２２１２に対する応答を送信し、この応答は、タッチスクリーンディスプレイ１１２で検出された１つ以上の既定の指ジェスチャー（例えば、９１００−１、９１００−２及び９１００−３）に対応する絵文字キャラクタを含む。
ＵＩ９００Ｄ（図９Ｄ）は、ある実施形態において、ユーザインターフェイスが、到来するメッセージ２２１２に対する複数の既定の応答９１１０を表示することを示し、これら既定の応答（例えば、９１１０−１、９１１０−２及び９１１０−３）は、複数の絵文字キャラクタキー（例えば、９１１１−１、９１１１−２及び９１１１−３）を含む。ＵＩ９００Ｄにおいて、各既定の応答９１１０は、単一の絵文字キャラクタ９１１１を含む。より詳細には、他の既定の応答９１１０は、２つ以上の絵文字キャラクタを含み、そしてある既定の応答９１１０は、絵文字キャラクタを含まなくてもよい（図示せず）。
ＵＩ９００Ｅ（図９Ｅ）は、既定の応答（例えば、応答９１１０−１）を選択するためのユーザアクション（例えば、タップジェスチャー９１２０）の検出を示す。ユーザは、絵文字キャラクタを含む既定の応答のリストから素早く選択を行い、そしてその選択された応答を、装置をアンロックせずに、送信することができる。ある実施形態では、既定の応答９１１０の選択を検出すると、ユーザによる更なるアクションを検出せずに、既定の応答の送信を開始する。ある実施形態では、既定の応答９１１０の選択を検出した後に、応答の送信を開始するための更なる既定のユーザアクションが検出され、例えば、ホームボタン２０４のアクチベーションが検出され、「送信」ボタン（図示せず）のアクチベーションが検出され、或いは見掛け上チャンネル３０６にわたってアンロック映像３０２を移動するスライド指ジェスチャー２２１３が検出される（この場合、チャンネル３０６におけるメッセージ「スライドして見る」は、図９Ｅのメッセージ「スライドして応答を送信する」又は同様のメッセージに切り換えられる）。
ＵＩ９００Ｆ（図９Ｆ）は、装置がその後にアンロックされた後のメッセージングアプリケーションにおいてユーザインターフェイスを示し、これは、装置がロック状態にあった間に送信された既定の応答９１１０−１を示している。
ＵＩ９００Ｇ及びＵＩ９００Ｈ（各々図９Ｇ及び９Ｈ）は、ＵＩ９００Ｅ及びＵＩ９００Ｆ（各々図９Ｅ及び９Ｆ）と同様であるが、既定の応答９１１０−４、９１１０−５、及び９１１０−６は、テキストキャラクタ及び絵文字キャラクタの組み合わせではなく、絵文字キャラクタのみで構成される。同様に、図９Ｈの既定応答送信９１１０−４は、図９Ｇの既定応答９１１０−４に対応し、絵文字キャラクタ９２２５のみで構成される。
図１０Ａ−１０Ｅは、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００において絵文字キャラクタにユーザ定義ジェスチャーを指定するための規範的ユーザインターフェイスを示す。これらの図の概略をここに述べる。
ＵＩ１０００Ａ（図１０Ａ）は、ユーザ定義ジェスチャーを記録するための規範的ユーザインターフェイスを示す。ＵＩ１０００Ａは、記録アイコン１００１、関連付けアイコン１０１０、記憶アイコン１０１５、及びキャンセルアイコン１０１６を含む。記録アイコン１００１におけるユーザジェスチャー１０２０を検出すると、ユーザインターフェイスは、ジェスチャー記録モードに入る。ＵＩ１０００Ｂ（図１０Ｂ）は、ジェスチャー記録モードにある間にタッチスクリーン１１２において検出されるユーザ定義ジェスチャー１０３０を示す。ある実施形態では、関連付けアイコン１０１０におけるジェスチャー（例えば、図１０Ｃの指タップジェスチャー１０４０）の検出に応答して、ユーザ定義ジェスチャー１０３０の表現を絵文字キャラクタに関連付けるためのプロセスが開始され、これは、絵文字キャラクタキーを伴う１つ以上のユーザインターフェイス（例えば、図１０ＤのＵＩ１０００Ｄ）を表示することを含む。ある実施形態では、絵文字キャラクタキーを伴うユーザインターフェイスは、ＵＩ５００Ａ−５００Ｆ（図５Ａ−Ｆ）と同様であるが、ユーザインターフェイスは、ここでは、電子メッセージ又はドキュメントに入力するために絵文字キャラクタを選択するのではなく、絵文字をユーザ定義ジェスチャー１０３０に関連付けるために使用される。絵文字キャラクタキーにおけるジェスチャー（例えば、図１０Ｄの絵文字キー１０６０における指タップジェスチャー１０７０）を検出するのに応答して、ユーザ定義ジェスチャー１０３０の表現が、絵文字キャラクタキー１０６０に対応する絵文字キャラクタに関連付けられる（又はユーザ確認保留中は、仮に関連付けられる）。ある実施形態では、確認ＵＩ（例えば、図１０ＥのＵＩ１０００Ｅ）は、記憶アイコン１０１５のアクチベーションが（例えば、図１０Ｅの指タップジェスチャー１０８０により）検出された場合にユーザ定義ジェスチャー１０３０に関連付けられる絵文字キャラクタ１０７５を表示する。（例えば、指タップジェスチャーによる）キャンセルアイコン１０１６のアクチベーションに応答して、ユーザ定義ジェスチャーを絵文字キャラクタに指定するプロセスが終了される。
図１１Ａ−１１Ｂは、ある実施形態により電子メッセージを経て絵文字キャラクタをマップ上の位置指示子として使用するための規範的ユーザインターフェイスを示す。これらの図の概略をここに述べる。
ＵＩ１１００Ａ（図１１Ａ）は、インスタントメッセージングアプリケーション１４１に表示される電子メッセージ２２１６を示す。電子メッセージは、地理マップアプリケーションを開始するためのインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含む。絵文字データは、位置データに関連付けられる。メッセージに対する既定のユーザアクション（例えば、Lake Tahoeへのリンク２２２０上での指タップジェスチャー）を検出するのに応答して、装置は、地理マップアプリケーション１５４において地理マップ（例えば、図１１Ｂのマップ１１１５）を表示し、そして装置は、位置データに対応する地理マップ１１１５上の位置に絵文字キャラクタ１１２０（図１１Ｂ）を表示する。
図５Ａ−１１Ｃにおけるユーザインターフェイスの幾つかを使用して、図１２Ａ−１２Ｆ及び図１３−１７に示すプロセスを以下に説明する。
図１２Ａ−１２Ｆは、ある実施形態によりタッチ感知ディスプレイを装備したポータブル電子装置において絵文字キャラクタキーボードを操作する方法を示すフローチャートである。この方法１２００は、タッチスクリーンディスプレイを有するポータブル電子装置（例えば、ポータブル多機能装置１００）において遂行される。この方法は、ポータブル電子装置において絵文字キャラクタを編成し選択するためのより効率的な仕方を与え、それにより、電力を保存し、バッテリ充電と充電との間の時間を延長し、且つ装置でのユーザの満足度を高める。
ポータブル電子装置は、キャラクタ入力エリア（例えば、図６Ａのエリア５０００）、キーボード表示エリア（例えば、図６Ａのエリア５００５）、及び複数の絵文字カテゴリアイコン（例えば、図６Ａのアイコン５０１０）を同時に表示する（１２０２）。キャラクタ入力エリア５００５は、ユーザにより選択されたテキストキャラクタ入力及び絵文字キャラクタ入力を表示し、又は表示するように動作できる。
絵文字カテゴリアイコンは、複数の絵文字カテゴリ（例えば、図６Ａの５０１０−１ないし５０１０−６）に対応する。ある実施形態では、複数の絵文字カテゴリアイコンは、ユーザにより最近及び頻繁に選択された複数の絵文字キャラクタに対応する最近及び頻繁に使用される絵文字カテゴリアイコン（例えば、図６Ａの最近及び頻繁に使用される絵文字カテゴリアイコン５０１０−１）を含む（１２０４）。ある実施形態では、複数の絵文字カテゴリアイコンは、特定の季節（例えば、春、夏、秋又は冬）に関連した複数の絵文字キャラクタに対応する季節絵文字キャラクタアイコンを含む（１２０６）。ある実施形態では、複数の絵文字カテゴリアイコンは、複数の休日（例えば、クリスマス又は新年）に関連した複数の絵文字キャラクタに対応する休日絵文字カテゴリアイコンを含む（１２０８）。
ある実施形態では、複数の絵文字カテゴリアイコン５０１０が、キーボード表示エリア５００５（図６Ａ）に表示される（１２１０）。
装置は、複数の絵文字カテゴリアイコンの各絵文字カテゴリアイコン５０１０においてジェスチャーを検出する（１２１２）。ある実施形態では、ジェスチャーは、指タップジェスチャー（例えば、図５Ａのカテゴリアイコン５０１０−３におけるタップジェスチャー５００７）である。
各絵文字カテゴリアイコンにおけるジェスチャーの検出に応答して、装置は、キーボード表示エリア５００５における各絵文字カテゴリの絵文字キャラクタキーの第１サブセット（例えば、図６Ａのサブセット６０１５）と、各絵文字カテゴリの複数のサブセットシーケンス印アイコン（例えば、図６Ａのサブセットシーケンス印アイコン６０００）とを同時に表示する（１２１４）。
各絵文字カテゴリは、キーボード表示エリアにおける絵文字キャラクタキーのサブセットのシーケンスとして別々に表示されるよう構成された絵文字キャラクタキーの多数のサブセットを含む。例えば、図６Ａ−６Ｃの自然絵文字カテゴリは、キーボード表示エリア５００５における絵文字キャラクタキーのサブセットのシーケンスとして別々に表示されるよう構成された絵文字キャラクタキーの３つのサブセット、即ち図６Ａの第１サブセット６０１５、図６Ｂの第２サブセット６０２０、及び図６Ｃの第３サブセット６０４０を含む。
サブセットシーケンス印アイコンは、各絵文字カテゴリにおけるサブセットの数、及びキーボード表示エリア内の絵文字キャラクタキーのサブセットのシーケンスにおける表示されたサブセットの位置に関する情報を与える。例えば、図６Ａ−６Ｃでは、サブセットシーケンス印アイコン６０００−１、６０００−２及び６０００−３は、自然絵文字カテゴリ５０１０−３に絵文字キャラクタキーの３つのサブセットがあることを指示する。更に、アイコン６０００−１は、第１サブセット６０１５が表示されるときにハイライトにされ（図６Ａ）、アイコン６０００−２は、第２サブセット６０２０が表示されるときにハイライトにされ（図６Ｂ）、そしてアイコン６０００−３は、第３サブセット６０４０が表示されるときにハイライトにされる（図６Ｃ）。ある実施形態では、サブセットシーケンス印アイコンは、円、正方形、長方形又は星のような簡単な幾何学形状を有する。
ある実施形態では、少なくとも１つの絵文字カテゴリにおける絵文字キャラクタキーが絵文字キャラクタ使用データに基づいて順序付けされる（１２１６）。ある実施形態では、絵文字キャラクタ使用データは、ポータブル電子装置で実行されるソフトウェアアプリケーションからの絵文字キャラクタ使用データを含む（１２１８）。ある実施形態では、絵文字キャラクタ使用データは、ポータブル電子装置のサービスプロバイダーから受け取られた（例えば、ダウンロードされた）絵文字キャラクタ使用データを含む（１２２０）。ある実施形態では、少なくとも１つの絵文字カテゴリにおける絵文字キャラクタキーは、絵文字キャラクタ人気データに基づいて順序付けされる（１２２２）。
ある実施形態では、サブセットシーケンス印アイコンがキーボード表示エリアに表示される（１２２４）（例えば、サブセットシーケンス印アイコン６０００がエリア５００５に表示される、図６Ａ）。
キーボード表示エリアにおいて各絵文字カテゴリの絵文字キャラクタキーの第１サブセットを表示する間に、装置は、キーボード表示エリアにおけるジェスチャーを検出する（１２２６）。例えば、装置は、エリア５００５（図６Ａ）における水平又は実質的に水平の指スワイプジェスチャー６０１０を検出する。
キーボード表示エリアにおけるジェスチャーの検出に応答して、装置は、各絵文字カテゴリの絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示に置き換え、そしてサブセットシーケンス印アイコンにより与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第１サブセットとの置き換えを反映するように更新する（１２２８）。例えば、キーボード表示エリア５００５における水平の指スワイプジェスチャー６０１０の検出に応答して、装置は、自然絵文字カテゴリの絵文字キャラクタキー（図６Ａ）の第１サブセット６０１５の表示をキーボード表示エリア５００５における自然絵文字カテゴリ（図６Ｂ）の絵文字キャラクタキーの第２サブセット６０２０の表示に置き換え、そしてサブセットシーケンス印アイコン６０００により与えられる情報を、絵文字キャラクタキーの第２サブセット６０２０による絵文字キャラクタキーの表示された第１サブセット６０１５との置き換えを反映するように更新する。サブセットシーケンス印アイコンにより与えられる情報を更新することは、絵文字キャラクタキーの第２サブセットに対応するサブセットシーケンス印アイコンをハイライトにするか、又は視覚上区別する一方、絵文字キャラクタキーの第１サブセットに対応する別のサブセットシーケンス印アイコンのハイライト化又は視覚上の区別化を中止する（例えば、図６Ｂにおいて、アイコン６０００−２をハイライトにする一方、アイコン６０００−１のハイライト化を中止する）ことを含むが、これに限定されない。
ある実施形態では、各絵文字カテゴリの絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示に置き換えることは、タッチスクリーンディスプレイから外れるように移動する絵文字キャラクタキーの第１サブセットのアニメーションを表示することを含む（１２３０）。例えば、図６Ａと６Ｂとの間で、タッチスクリーンディスプレイ１１２から外れるサブセット６０１５のアニメーションが表示される。
ある実施形態では、各絵文字カテゴリの絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示に置き換えることは、タッチスクリーンディスプレイへと移動する絵文字キャラクタキーの第２サブセットのアニメーションを表示することを含む（１２３２）。例えば、図６Ａと６Ｂとの間で、タッチスクリーンディスプレイ１１２へと移動するサブセット６０２０のアニメーションが表示される。
ある実施形態では、各絵文字カテゴリの絵文字キャラクタキーの第１サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示に置き換えることは、タッチスクリーンディスプレイから外れるように移動する絵文字キャラクタキーの第１サブセットのアニメーションを表示すると共に、タッチスクリーンディスプレイへと移動する絵文字キャラクタキーの第２サブセットのアニメーションを表示することを含む（１２３４）。例えば、図６Ａと６Ｂとの間で、タッチスクリーンディスプレイ１１２から外れるよう移動するサブセット６０１５及びタッチスクリーンディスプレイ１１２へと移動するサブセット６０２０のアニメーションが表示される。
ある実施形態では、装置は、キーボード表示エリアに各絵文字カテゴリの絵文字キャラクタキーの第２サブセットを表示する間にキーボード表示エリアにおけるジェスチャーを検出する。例えば、装置は、サブセット６０２０（図６Ｂ）を表示する間にエリア５００５における水平又は実質的に水平の指スワイプジェスチャー６０２５を検出する。キーボード表示エリアにおけるジェスチャー（例えば、ジェスチャー６０２５）を検出するのに応答して、装置は、各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキーの第３サブセットの表示に置き換える（１２３６）。又、キーボード表示エリアにおけるジェスチャー（例えば、ジェスチャー６０２５）を検出するのに応答して、装置は、サブセットシーケンス印アイコンにより与えられる情報を、絵文字キャラクタキーの第３サブセットによる絵文字キャラクタキーの表示された第２サブセットとの置き換えを反映するように更新する（１２３６）。例えば、キーボード表示エリア５０００において水平の指スワイプジェスチャー６０２５を検出するのに応答して、装置は、自然絵文字カテゴリの絵文字キャラクタキー（図６Ｂ）の第２サブセット６０２０の表示をキーボード表示エリア５００５において自然絵文字カテゴリ（図６Ｃ）の絵文字キャラクタキーの第３サブセット６０４０の表示に置き換え、そしてサブセットシーケンス印アイコン６０００により与えられる情報を、絵文字キャラクタキーの第３サブセット６０４０による絵文字キャラクタキーの表示された第２サブセット６０２０との置き換えを反映するように更新する。情報の更新は、絵文字キャラクタキーの第３サブセットに対応するサブセットシーケンス印アイコンをハイライトにするか、又は視覚上区別する一方、絵文字キャラクタキーの第２サブセットに対応する別のサブセットシーケンス印アイコンのハイライト化又は視覚上の区別化を中止する（例えば、図６Ｃにおいて、アイコン６０００−３をハイライトにする一方、アイコン６０００−２のハイライト化を中止する）ことを含むが、これに限定されない。
ある実施形態では、絵文字キャラクタキーの第２サブセットを表示する間に検出されたジェスチャーは、第１方向のスワイプジェスチャーである（例えば、右から左へのスワイプジェスチャー６０２５、図６Ｂ）。第１方向とは実質的に逆の方向におけるキーボード表示エリアでのタッチスクリーンディスプレイに対する第２のスワイプジェスチャー（例えば、左から右へのスワイプジェスチャー６０３０、図６Ｃ）を装置が検出するのに応答して、装置は、各絵文字カテゴリの絵文字キャラクタキーの第３サブセットの表示をキーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示に置き換え、そしてサブセットシーケンス印アイコンにより与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第３サブセットとの置き換えを反映するように更新する（例えば、絵文字キャラクタキーの第２サブセットに対応するサブセットシーケンス印アイコンをハイライトにするか又は視覚上区別する一方、絵文字キャラクタキーの第３サブセットに対応する別のサブセットシーケンス印アイコンのハイライト化又は視覚上の区別化を中止する）（１２３８）。例えば、ジェスチャー６０２５（図６Ｂ）の方向とは実質的に逆の方向におけるキーボード表示エリア５００５でのタッチスクリーンディスプレイに対するスワイプジェスチャー６０３０（図６Ｃ）を検出するのに応答して、装置は、自然絵文字カテゴリの絵文字キャラクタキー６０４０の第３サブセットの表示をキーボード表示エリア５００５における自然絵文字カテゴリの絵文字キャラクタキー６０２０の第２サブセットの表示に置き換え、そしてサブセットシーケンス印アイコン６０００により与えられる情報を、絵文字キャラクタキーの第２サブセットによる絵文字キャラクタキーの表示された第３サブセットとの置き換えを反映するように更新する（例えば、絵文字キャラクタキーの第２サブセット６０２０に対応するサブセットシーケンス印アイコン６０００−２をハイライトにするか又は視覚上区別する一方、絵文字キャラクタキーの第３サブセット６０４０に対応するサブセットシーケンス印アイコン６００３のハイライト化又は視覚上の区別化を中止する）。
ある実施形態では、装置は、キーボード選択アイコン（例えば、アイコン５０２０、図６Ｂ）を表示する。ある実施形態では、キーボード選択アイコン５０２０には、複数の絵文字カテゴリアイコン５０１０が同時に表示される（例えば、タッチスクリーンディスプレイの底部に沿った既定のエリア５００９に）。装置は、キーボード選択アイコン上でのジェスチャー（例えば、図６Ｂの指タップジェスチャー６０５５）を検出する。キーボード選択アイコン上でのジェスチャーを検出した後に、装置は、各絵文字カテゴリの絵文字キャラクタキーの第２サブセットの表示をキーボード表示エリアにおけるテキストキャラクタ入力キーボードの表示に置き換える（１２４０）。例えば、キーボード選択アイコン５０２０上でのタップジェスチャー６０５５を検出した後に、装置は、自然絵文字カテゴリの絵文字キャラクタキー（図６Ｂ）の第２サブセット６０２０の表示をキーボード表示エリア５０５５（図５Ｇ）におけるテキストキャラクタ入力キーボード５０５５の表示に置き換える。ある実施形態では、絵文字キャラクタキーの第２サブセット６０２０が、ジェスチャー６０５５の検出に応答してテキストキャラクタ入力キーボード５０５５に置き換えられる。ある実施形態では、特定のテキストキャラクタ入力キーボード（例えば、アルファニューメリックキーボード、仮名キーボード、又は漢字キーボード）が選択されてエリア５００５に表示される前に、１つ以上の中間のテキストキャラクタ入力キーボード選択ＵＩが示される。
ある実施形態では、装置は、テキストキャラクタ入力キーボード（例えば、図５Ｇのキーボード５０５５）でユーザによって入力された１つ以上のワードを受け取る。装置は、ユーザによりキャラクタ入力エリア５０００に入力された１つ以上のワードを表示する。テキストキャラクタ入力キーボードでユーザにより入力された１つ以上のワードを受け取るのに応答して、装置は、ユーザにより入力された１つ以上のワードに少なくとも一部分基づいて推奨絵文字キャラクタを決定し、そしてその推奨絵文字キャラクタをタッチスクリーンディスプレイに表示する（１２４２）。推奨絵文字キャラクタの決定は、ユーザにより入力される句読点ではなく、ユーザにより入力されるワードに基づく。例えば、ユーザがワード“rain”をタイプする場合には、傘及び／又は雨滴の絵文字キャラクタが推奨される。同様に、ユーザがワード“fly”をタイプする場合には、航空機の絵文字キャラクタが推奨される。ある実施形態では、単一の絵文字キャラクタが推奨される。又、他の実施形態では、複数の絵文字キャラクタが推奨される。ある実施形態では、装置は、タッチスクリーンディスプレイに対するジェスチャーを検出する（例えば、テキストキャラクタ入力キーボードのスペースバーに対するタップジェスチャー、又は推奨される絵文字キャラクタに対するタップジェスチャー）。そのジェスチャーの検出に応答して、装置は、ユーザによりキャラクタ入力エリアに入力された１つ以上のワードの後に推奨絵文字キャラクタを挿入し表示する（１２４４）。
ある実施形態では、装置は、テキストキャラクタ入力キーボード５０５５がキーボード表示エリア５０５５（図５Ｇ）に表示される間にキーボード選択アイコン５０２０を表示する。次いで、キーボード選択アイコン５０２０上でのジェスチャー、例えば、指タップジェスチャーを検出した後に、装置は、テキストキャラクタ入力キーボード５０５５（図６Ｂ）の表示を、キーボード表示エリアにおける各絵文字カテゴリの絵文字キャラクタキー（図６Ｂ）の第２サブセット６０２０及びそれに対応するサブセットシーケンス印アイコン６０００の同時表示に置き換える（１２４６）。ある実施形態では、テキストキャラ
クタ入力キーボード５０５５は、ジェスチャーの検出に応答して、絵文字キャラクタキーの第２サブセットに置き換えられる。ある実施形態では、絵文字キャラクタキーの特定のサブセットが選択されてエリア５００５に表示される前に、１つ以上の中間絵文字キーボード選択ＵＩが示される。ある実施形態では、キーボード選択アイコン５０２０上でのジェスチャーを検出するのに応答して、装置は、テキストキャラクタ入力キーボードの表示と、絵文字キャラクタキーの最も最近表示されたサブセットとの間をトグルする。
ある実施形態では、装置は、絵文字キャラクタキーの第２サブセットにおける各絵文字キャラクタキーに対するジェスチャーを検出する。絵文字キャラクタキーの第２サブセットにおける各絵文字キャラクタキーに対するジェスチャーを検出するのに応答して、装置は、それに対応する絵文字キャラクタをキャラクタ入力キーに挿入し表示する（１２４８）。例えば、絵文字キャラクタキーの第２サブセット６０２０における絵文字キャラクタキーに対するタップジェスチャーを検出するのに応答して、装置は、それに対応する絵文字キャラクタをキャラクタ入力エリア５０００に挿入し表示する。図６Ｃ−６Ｅは、絵文字キャラクタの第３サブセット６０４０からの入力エリア５０００への絵文字キャラクタの同様の挿入及び表示を示している。付加的な絵文字キャラクタキーに対するジェスチャーの検出に応答して、付加的な絵文字キャラクタが絵文字入力エリア５０００に挿入され表示されてもよい。
ある実施形態では、装置は、既定のユーザインターフェイス再構成プロセスを開始するための既定のユーザアクション（例えば、絵文字キャラクタキーを指で押して、指接触を所定時間より長く保持する）を検出する。既定のユーザアクションを検出するのに応答して、装置は、絵文字キャラクタキーの第２サブセットにおける２つ以上の絵文字キャラクタキーの位置を変化させる。この変化は、２つ以上の絵文字キャラクタキーの他の絵文字キャラクタキーの各平均位置とは異なる各平均位置の周りで２つ以上の絵文字キャラクタキーの各絵文字キャラクタの位置を変化させることを含む（１２４９）。例えば、所定時間（例えば、１秒）より長い絵文字キャラクタキー８００１（図８Ａ）に対する指接触を検出するのに応答して、装置は、絵文字キャラクタキーのサブセット８００２（図８Ａ、これは、図６Ｂのサブセット６０２０に対応する）における全ての絵文字キャラクタキーの位置を変化させる。
ある実施形態では、２つ以上の絵文字キャラクタキーの各絵文字キャラクタキーは、各絵文字キャラクタキーの各平均位置を実質的に中心とする領域において振動する（図８Ｂに示す）（１２５０）。
ある実施形態では、装置は、ユーザが、絵文字キャラクタキーの第２サブセットにおける第１絵文字キャラクタキーに対応する第１位置でタッチスクリーンディスプレイと接触点を形成するのを検出すると共に、タッチスクリーンディスプレイ上の第２位置に対する接触点の移動も検出する。これら２つの検出に応答して、装置は、検出された接触点移動に基づきタッチスクリーンディスプレイ上の第２位置に対する第１絵文字キャラクタキーの移動を表示する（１２５２）。例えば、絵文字キャラクタキー８００１−２に対応する位置においてユーザがタッチスクリーンディスプレイとの接触点８０５０（図８Ｂ）を形成するのを検出し、そしてタッチスクリーンディスプレイ上の第２位置８２５に対する接触点８０５０の移動も検出するのに応答して、装置は、その検出された接触点移動に基づきタッチスクリーンディスプレイ上の第２位置８２５に対する絵文字キャラクタキー８００１−２の移動を表示する。
ある実施形態では、装置は、既定のユーザインターフェイス再構成プロセスを終了する第２の既定のユーザアクションを検出する（例えば、ホームボタン２０４のアクチベーションを検出する）のに応答して第２位置に第１絵文字キャラクタキー（例えば、図８Ｃの８０００−２）の位置を固定する（１２５４）。
図１３は、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための方法を示すフローチャートである。この方法１３００は、装置がロック状態にある間にユーザが到来するメッセージに素早く応答するための簡単で且つ直観的な仕方を提供し、これにより、電力を保存すると共に、バッテリ充電時とバッテリ充電時との間の期間を延長するものである。
ポータブル電子装置１００がユーザインターフェイスロックモードにある間に（１３０１）オペレーション１３０２−１３１４が遂行される。この装置は、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受信する（１３０２）。電力保存状態において、タッチスクリーンは、ブランク（何も表示されない）であり、タッチ感知ではない。
到来するメッセージを受信するのに応答して、装置は、タッチスクリーンディスプレイを電源オンし、そして当事者からユーザへ到来するメッセージの少なくとも一部分（例えば、図９Ｂのメッセージ部分２２１２）をタッチスクリーンディスプレイに表示する（１３０４）。装置は、絵文字キャラクタに対応するタッチスクリーンディスプレイ上での１つ以上の既定の指ジェスチャー（例えば、図９Ｃのジェスチャー９１００−１、９１００−２及び９１００−３）を検出する（１３０６）。装置は、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出する（例えば、ホームボタン２０４のアクチベーションを検出するか、「送信」ボタン（図示せず）のアクチベーションを検出するか、又は図９Ｃのスワイプジェスチャー２２１３を検出する）（１３０８）。到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出するのに応答して、装置は、到来するメッセージに対する応答を送信する（１３１０）。この応答は、タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む。例えば、図９Ｃの既定の指ジェスチャー９１００−１、９１００−２及び９１００−３は、笑顔の絵文字キャラクタに対応する。１つ以上の既定の指ジェスチャーに絵文字を関連付ける１つの方法を、図１０Ａ−１０Ｅを参照して以下に述べる。
ある実施形態では、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出するのに応答して、装置は、タッチスクリーンディスプレイを電力保存状態に戻す（１３１２）。ある実施形態では、装置は、到来するメッセージに対する応答が送信された後に所定時間（例えば、５ないし１５秒）以内にタッチスクリーンディスプレイを電力保存状態に戻す（１３１４）。
図１４は、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための別の方法を示すフローチャートである。この方法１４００は、装置がロック状態にある間にユーザが到来するメッセージに素早く応答するための簡単で且つ直観的な仕方を提供し、これにより、電力を保存すると共に、バッテリ充電時とバッテリ充電時との間の期間を延長するものである。
ポータブル電子装置１００がユーザインターフェイスロックモードにある間に（１４０１）オペレーション１４０２−１４１４が遂行される。この装置は、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受信する（１４０２）。電力保存状態において、タッチスクリーンは、ブランク（何も表示されない）であり、タッチ感知ではない。
到来するメッセージを受信するのに応答して、装置は、タッチスクリーンディスプレイを電源オンし、当事者からユーザへ到来するメッセージの少なくとも一部分（例えば、図９Ｄのメッセージ部分２２１２）をタッチスクリーンディスプレイに表示し、そして到来するメッセージに対する複数の既定の応答（例えば、図９Ｄ又は図９Ｇの応答９１１０）を表示する（１４０４）。既定の応答９１１０は、複数の絵文字キャラクタを含む（例えば、図９Ｄの絵文字キャラクタ９１１１又は図９Ｇの応答９１１０における絵文字キャラクタ）。
装置は、複数の既定の応答におけるある既定の応答を選択するための既定のユーザアクションを検出する（例えば、図９Ｅの応答９１１０−１に対する指タップジェスチャー９１２０、又は図９Ｇの応答９１１０−４に対する指タップジェスチャー９２１０）（１４０６）。装置は、到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出する（１４０８）。ある実施形態では、既定の応答９１１０の選択を検出すると、ユーザによる更なるアクションを検出せずに、既定の応答の送信が開始される。ある実施形態では、既定の応答９１１０の選択が検出された後に、応答の送信を開始するための更なる既定のユーザアクションが検出され、例えば、ホームボタン２０４のアクチベーションが検出され、「送信」ボタン（図示せず）のアクチベーションが検出され、或いは見掛け上チャンネル３０６にわたってアンロック映像３０２を移動するスライド指ジェスチャー２２１３が検出される（この場合、チャンネル３０６におけるメッセージ「スライドして見る」は、図９Ｅのメッセージ「スライドして応答を送信する」又は同様のメッセージに切り換えられる）。
到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出するのに応答して、装置は、到来するメッセージに対する応答を送信する（１４１０）。選択された既定の応答９１１０は、複数の絵文字キャラクタにおけるある絵文字キャラクタ（例えば、９１１１）を含む（１４１０）。
ある実施形態では、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、装置は、タッチスクリーンディスプレイを電力保存状態に戻す（１４１２）。ある実施形態では、装置は、到来するメッセージに対する選択された既定の応答が送信された後に所定時間（例えば、５ないし１５秒）以内にタッチスクリーンディスプレイを電力保存状態に戻す（１４１４）。
図１５は、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００がユーザインターフェイスロックモードにある間に絵文字を伴うメッセージに応答するための別の方法を示すフローチャートである。この方法１５００は、装置がロック状態にある間にユーザが到来するメッセージに素早く応答するための簡単で且つ直観的な仕方を提供し、これにより、電力を保存すると共に、バッテリ充電時とバッテリ充電時との間の期間を延長するものである。
ポータブル電子装置１００がユーザインターフェイスロックモードにある間に（１５０１）オペレーション１５０２−１５１８が遂行される。この装置は、タッチスクリーンディスプレイが電力保存状態にある間に当事者からポータブル電子装置のユーザへ到来するメッセージを受信する（１５０２）。電力保存状態において、タッチスクリーンは、ブランク（何も表示されない）であり、タッチ感知ではない。
到来するメッセージを受信するのに応答して、装置は、タッチスクリーンディスプレイを電源オンし、そして当事者からユーザへ到来するメッセージの少なくとも一部分（例えば、図９Ｂのメッセージ部分２２１２）をタッチスクリーンディスプレイに表示する（１５０４）。
装置は、到来するメッセージに対する複数の既定の応答９１１０の表示を開始するための既定のユーザアクション（例えば、応答アイコン（図示せず）に対する指タップ、又はタッチスクリーン１１２に対するダブルタップジェスチャー）を検出する（１５０６）。その規定の応答は、複数の絵文字キャラクタ（例えば、図９Ｄの絵文字キャラクタ９１１１及び図９Ｇの応答９１１０における絵文字キャラクタ）を含む。到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するのに応答して、装置は、複数の既定の応答（例えば、図９Ｄ又は図９Ｇの応答９１１０）を表示する（１５０８）。
装置は、複数の既定の応答におけるある既定の応答を選択するための既定のユーザアクション（例えば、図９Ｅの応答９１１０−１に対する指タップジェスチャー９１２０又は図９Ｇの応答９１１０−４に対する指タップジェスチャー９２１０）を検出する（１５１０）。
装置は、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出する（１５１２）。ある実施形態では、既定の応答９１１０の選択を検出すると、ユーザによる更なるアクションを検出せずに、既定の応答の送信が開始される。ある実施形態では、既定の応答９１１０の選択が検出された後に、応答の送信を開始するための更なる既定のユーザアクションが検出され、例えば、ホームボタン２０４のアクチベーションが検出され、「送信」ボタン（図示せず）のアクチベーションが検出され、或いは見掛け上チャンネル３０６にわたってアンロック映像３０２を移動するスライド指ジェスチャー２２１３が検出される（この場合、チャンネル３０６におけるメッセージ「スライドして見る」は、図９Ｅのメッセージ「スライドして応答を送信する」又は同様のメッセージに切り換えられる）。
到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、装置は、到来するメッセージに対する選択された既定の応答を送信する（１５１４）。選択された既定の応答は、複数の絵文字キャラクタにおけるある絵文字キャラクタを含む。
ある実施形態では、到来するメッセージに対する選択された既定の応答の送信を開始するための既定のユーザアクションを検出するのに応答して、装置は、タッチスクリーンディスプレイを電力保存状態に戻す（１５１６）。ある実施形態では、装置は、到来するメッセージに対する選択された既定の応答が送信された後に所定時間（例えば、５ないし１５秒）以内にタッチスクリーンディスプレイを電力保存状態に戻す（１５１８）。
図１６は、ある実施形態によりタッチ感知ディスプレイ１１２を装備したポータブル電子装置１００において絵文字にユーザ定義ジェスチャーを指定する方法を示すフローチャートである。この方法１６００は、ユーザが後で再コールするためにユーザ定義ジェスチャーに絵文字キャラクタを関連付けるための簡単で且つ直観的な仕方を提供し、これにより、ユーザは、絵文字キーボードを使用する必要なく、絵文字キャラクタ（例えば、ユーザが頻繁に使用する絵文字キャラクタ）を装置に入力できるようにする。
ポータブル電子装置は、それがユーザ定義ジェスチャー記録モードにある間にタッチスクリーンディスプレイにおいてユーザ定義ジェスチャー（例えば、図１０Ｂのジェスチャー１０３０）を検出する（１６０２）。装置は、ユーザ定義ジェスチャーの表現を生成する（１６０４）。この表現は、ジェスチャーにおける指接触の絶対的又は相対的位置と、ジェスチャーにおける指接触の相対的又は絶対的移動とを含む。装置は、ユーザ定義ジェスチャーの表現を絵文字キャラクタに関連付ける（図１０Ｃ−１０Ｅを参照して上述したように）（１６０６）。装置は、ユーザ定義ジェスチャーの表現、及びユーザ定義ジェスチャーの表現と絵文字キャラクタとの関連付けを記憶する（１６０８）。
ある実施形態では、ユーザ定義ジェスチャーの表現、及びユーザ定義ジェスチャーの表現と絵文字キャラクタとの関連付けを記憶した後に、装置は、タッチスクリーンディスプレイにおけるジェスチャーを検出し、そしてその検出されたジェスチャーがユーザ定義ジェスチャーの記憶された表現に対応するかどうか決定する。検出されたジェスチャーがユーザ定義ジェスチャーの記憶された表現に対応する場合には、装置は、インスタントメッセージ（例えば、テキストメッセージ）又はｅ−メールメッセージのような電子メッセージ又はドキュメントに絵文字キャラクタを挿入する（１６１０）。
図１７は、ある実施形態により電子メッセージを経て絵文字をマップ上の位置指示子として使用する方法を示すフローチャートである。この方法１７００は、マップ上に絵文字を伴う位置データを与えて、対応電子メッセージの情報を増加する迅速且つ簡単な仕方である。
装置（例えば、ポータブル装置１００又はデスクトップコンピューティング装置）は、地理マップアプリケーション１５４を開始するか又は開始するよう動作できるインストラクション、地理マップ上の位置を表す位置データ、及び絵文字キャラクタを表す絵文字データを含む電子メッセージを受け取る（１７０２）。絵文字データは、位置データに関連付けられる（例えば、絵文字データに対応する絵文字キャラクタが、位置データに対応する位置においてマップ上に表示されるように）。ある実施形態では、電子メッセージは、地理マップアプリケーションをオープンするためにリンクを伴うテキストメッセージである（１７０４）。
装置は、タッチスクリーンディスプレイに電子メッセージ（例えば、図１１Ａのメッセージ２２１６）を表示する（１７０６）。装置は、地理マップアプリケーションを開始するための、その表示された電子メッセージ上での既定のユーザアクション（例えば、図１１Ａのメッセージ２２１６におけるLake Tahoeへのリンク２２２０上でのタップジェスチャー１１０５）を検出する（１７０８）。地理マップアプリケーションを開始するための既定のユーザアクションを検出するのに応答して、装置は、地理マップアプリケーション１５４において地理マップ（例えば、図１１Ｂのマップ１１１５）を表示し、そして位置データに対応する地理マップの位置に絵文字キャラクタ（例えば、図１１Ｂの絵文字キャラクタ１１２０）を表示する（１７１０）。
以上、特定の実施形態を参照して本発明を例示した。しかしながら、以上の説明は、本発明を余すところなく述べたものでも、又、ここに開示する正確な形態に限定するものでもない。以上の教示に鑑み、多数の変更や修正が考えられる。以上の実施形態は、本発明の原理及びその特定の用途を最良に説明するために選択されて記述されたものであり、従って、当業者であれば、本発明及び種々の実施形態を、意図された特定の用途に適するように種々変更して最良に利用することができよう。
１００：ポータブル多機能装置
１０２：メモリ
１０３：通信バス又は信号ライン
１０６：Ｉ／Ｏサブシステム
１０８：ＲＦ回路
１１０：オーディオ回路
１１１：スピーカ
１１２：タッチ感知ディスプレイシステム
１１３：マイクロホン
１１６：他の入力コントロール装置
１１８：周辺インターフェイス
１２０：プロセッサ
１２２：コントローラ
１２４：外部ポート
１２６：オペレーティングシステム
１２８：通信モジュール
１３０：接触／運動モジュール
１３２：グラフィックモジュール
１３４：テキスト入力モジュール
１３５：ＧＰＳモジュール
１３６：アプリケーション
１３７：連絡先モジュール
１３８：電話モジュール
１３９：ビデオ会議モジュール
１４０：ｅ−メールクライアントモジュール
１４１：インスタントメッセージングモジュール
１４２：トレーニングサポートモジュール
１４３：カメラモジュール
１４４：映像マネージメントモジュール
１４５：ビデオプレーヤモジュール
１４６：音楽プレーヤモジュール
１４７：ブラウジングモジュール
１４８：カレンダーモジュール
１４９：ウィジットモジュール
１４９−１：天気ウィジット
１４９−２：株ウィジット
１４９−３：計算器ウィジット
１４９−４：アラームクロックウィジット
１４９−５：辞書ウィジット
１４９−６：ユーザ生成ウィジット
１５０：ウィジット生成モジュール
１５１：サーチモジュール
１５２：ビデオ及び音楽プレーヤモジュール
１５３：ノートモジュール
１５４：マップモジュール
１５５：オンラインビデオモジュール
１５６：ディスプレイコントローラ
１５８：光学センサコントローラ
１６０：他の入力コントローラ
１６２：電源システム
１６４：光学的センサ
１６６：接近センサ
１６８：加速度計

Claims (20)

  1. タッチスクリーンディスプレイを伴うポータブル電子装置において前記ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取るステップと、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、更に、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示する、
    ことを行うステップと、
    絵文字キーボードを使わずに、絵文字キャラクタに対応する前記タッチスクリーンディスプレイ上での１つ以上の既定の指ジェスチャーを検出するステップと、
    前記到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出するステップと、
    前記到来するメッセージに対する前記応答の送信を開始するための前記既定のユーザアクションの検出に応答して、前記到来するメッセージに対する応答を送信するステップであって、前記応答は、前記タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する前記絵文字キャラクタを含むものであるステップと、
    を備えたコンピュータ実施方法。
  2. 前記到来するメッセージに対する応答の送信を開始するための既定のユーザアクションの検出に応答して、前記タッチスクリーンディスプレイを電力保存状態に戻すステップを更に備えた、請求項１に記載のコンピュータ実施方法。
  3. 前記到来するメッセージに対する応答が送信された後に所定時間内に前記タッチスクリーンディスプレイを電力保存状態に戻すステップを更に備えた、請求項１に記載のコンピュータ実施方法。
  4. タッチスクリーンディスプレイと、
    １つ以上のプロセッサと、
    メモリと、
    １つ以上のプログラムと、
    を備え、前記１つ以上のプログラムは、前記メモリに記憶されて、前記１つ以上のプロセッサにより実行されるように構成され、更に、前記１つ以上のプログラムは、ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取り、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、更に、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示する、
    ことを行い、
    絵文字キーボードを使わずに、絵文字キャラクタに対応する前記タッチスクリーンディスプレイ上での１つ以上の既定の指ジェスチャーを検出し、
    前記到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出し、
    前記到来するメッセージに対する前記応答の送信を開始するための前記既定のユーザアクションの検出に応答して、前記到来するメッセージに対する応答を送信する、
    ためのインストラクションを含むものであり、前記応答は、前記タッチスクリーンディスプレイ上で検出された１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含む、ポータブル電子装置。
  5. 前記到来するメッセージに対する応答の送信を開始するための既定のユーザアクションの検出に応答して、前記タッチスクリーンディスプレイを電力保存状態に戻すためのインストラクションを更に含む、請求項４に記載のポータブル電子装置。
  6. タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、前記ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取り、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、更に、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示する、
    ことを行い、
    絵文字キーボードを使わずに、絵文字キャラクタに対応する前記タッチスクリーンディスプレイ上での１つ以上の既定の指ジェスチャーを検出し、
    前記到来するメッセージに対する応答の送信を開始するための既定のユーザアクションを検出し、
    前記到来するメッセージに対する前記応答の送信を開始するための前記既定のユーザアクションの検出に応答して、前記到来するメッセージに対する前記応答を送信する
    ようにさせるインストラクションを記憶しており、前記応答は前記タッチスクリーンディスプレイ上で検出された前記１つ以上の既定の指ジェスチャーに対応する絵文字キャラクタを含むものである、コンピュータ読み取り可能な記憶媒体。
  7. 前記到来するメッセージに対する応答が送信された後に所定時間以内に前記ポータブル電子装置が前記タッチスクリーンディスプレイを電力保存状態へ戻すようにさせるインストラクションを更に含む、請求項６に記載のコンピュータ読み取り可能な記憶媒体。
  8. タッチスクリーンディスプレイを伴うポータブル電子装置において、前記ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取るステップと、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示し、更に、
    前記到来するメッセージに対する複数の既定の応答であって、複数の絵文字キャラクタを含む既定の応答を表示する、
    ことを行うステップと、
    前記複数の既定の応答の中のある既定の応答を選択するための既定のユーザアクションを検出するステップと、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションであって、前記タッチスクリーンディスプレイ上での指ジェスチャーを含む、規定のユーザアクションを検出するステップと、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記到来するメッセージに対する前記選択された既定の応答を送信するステップであって、前記選択された既定の応答は、複数の絵文字キャラクタの中のある絵文字キャラクタを含むものであるステップと、
    を備えたコンピュータ実施方法。
  9. 前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションの検出に応答して、前記タッチスクリーンディスプレイを電力保存状態に戻すステップを更に備えた、請求項８に記載のコンピュータ実施方法。
  10. 前記到来するメッセージに対する前記選択された既定の応答が送信された後に所定時間以内に前記タッチスクリーンディスプレイを電力保存状態に戻すステップを更に備えた、請求項８に記載のコンピュータ実施方法。
  11. タッチスクリーンディスプレイと、
    １つ以上のプロセッサと、
    メモリと、
    １つ以上のプログラムと、
    を備え、前記１つ以上のプログラムは、前記メモリに記憶されて、前記１つ以上のプロセッサにより実行されるように構成され、更に、前記１つ以上のプログラムは、ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取り、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示し、更に、
    前記到来するメッセージに対する複数の既定の応答であって、複数の絵文字キャラクタを含むような既定の応答を表示する、
    ことを行い、
    前記複数の既定の応答の中のある既定の応答を選択するための既定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションであって、前記タッチスクリーンディスプレイ上での指ジェスチャーを含む、規定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記到来するメッセージに対する前記選択された既定の応答を送信する、
    ためのインストラクションを含み、前記選択された既定の応答は、複数の絵文字キャラクタの中のある絵文字キャラクタを含む、ポータブル電子装置。
  12. 前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記タッチスクリーンディスプレイを電力保存状態に戻すためのインストラクションを更に含む、請求項１１に記載のポータブル電子装置。
  13. タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、前記ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取り、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示し、更に、
    前記到来するメッセージに対する複数の既定の応答であって、複数の絵文字キャラクタを含む既定の応答を表示する、
    ことを行い、
    前記複数の既定の応答の中のある既定の応答を選択するための既定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションであって、前記タッチスクリーンディスプレイ上での指ジェスチャーを含む、規定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記到来するメッセージに対する前記選択された既定の応答を送信する、
    ようにさせるインストラクションを記憶しており、前記選択された既定の応答は、複数の絵文字キャラクタの中のある絵文字キャラクタを含む、コンピュータ読み取り可能な記憶媒体。
  14. 前記到来するメッセージに対する前記選択された既定の応答が送信された後に所定時間以内に前記ポータブル電子装置が前記タッチスクリーンディスプレイを電力保存状態へ戻すようにさせるインストラクションを更に含む、請求項１３に記載のコンピュータ読み取り可能な記憶媒体。
  15. タッチスクリーンディスプレイを伴うポータブル電子装置において、前記ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取るステップと、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示する、
    ことを行うステップと、
    前記到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出するステップであって、前記既定の応答は、複数の絵文字キャラクタを含み、少なくとも一つの既定の応答はテキストと絵文字キャラクタを同時に含むものであるステップと、
    前記到来するメッセージに対する複数の既定の応答の表示を開始するための前記既定のユーザアクションを検出するのに応答して、前記複数の既定の応答を表示するステップと、
    前記複数の既定の応答の中のある既定の応答を選択するための既定のユーザアクションを検出するステップと、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションであって、前記タッチスクリーンディスプレイ上での指ジェスチャーを含む、規定のユーザアクションを検出するステップと、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記到来するメッセージに対する前記選択された既定の応答を送信するステップであって、前記選択された既定の応答は、前記複数の絵文字キャラクタの中のある絵文字キャラクタを含むものであるステップと、
    を備えたコンピュータ実施方法。
  16. 前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションの検出に応答して、前記タッチスクリーンディスプレイを電力保存状態に戻すステップを更に備えた、請求項１５に記載のコンピュータ実施方法。
  17. 前記到来するメッセージに対する前記選択された既定の応答が送信された後に所定時間以内に前記タッチスクリーンディスプレイを電力保存状態に戻すステップを更に備えた、請求項１５に記載のコンピュータ実施方法。
  18. タッチスクリーンディスプレイと、
    １つ以上のプロセッサと、
    メモリと、
    １つ以上のプログラムと、
    を備え、前記１つ以上のプログラムは、前記メモリに記憶されて、前記１つ以上のプロセッサにより実行されるように構成され、更に、前記１つ以上のプログラムは、ポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取り、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示する、
    ことを行い、
    前記到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出し、前記既定の応答は、複数の絵文字キャラクタを含み、少なくとも一つの既定の応答はテキストと絵文字キャラクタを同時に含むものであり、
    前記到来するメッセージに対する前記複数の既定の応答の表示を開始するための前記既定のユーザアクションを検出するのに応答して、前記複数の既定の応答を表示し、
    前記複数の既定の応答の中のある既定の応答を選択するための既定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションであって、前記タッチスクリーンディスプレイ上での指ジェスチャーを含む、規定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記到来するメッセージに対する前記選択された既定の応答を送信する、
    ためのインストラクションを含むものであり、前記選択された既定の応答は、前記複数の絵文字キャラクタの中のある絵文字キャラクタを含む、ポータブル電子装置。
  19. 前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記タッチスクリーンディスプレイを電力保存状態に戻すためのインストラクションを更に含む、請求項１８に記載のポータブル電子装置。
  20. タッチスクリーンディスプレイを伴うポータブル電子装置により実行されたときに、そのポータブル電子装置がユーザインターフェイスロックモードにある間に、
    前記タッチスクリーンディスプレイが電力保存状態にある間に相手から前記ポータブル電子装置のユーザへ到来するメッセージを受け取り、
    前記到来するメッセージを受け取るのに応答して、
    前記タッチスクリーンディスプレイを電源オンし、
    前記相手からユーザへ到来する前記メッセージの少なくとも一部分を前記タッチスクリーンディスプレイに表示する、
    ことを行い、
    前記到来するメッセージに対する複数の既定の応答の表示を開始するための既定のユーザアクションを検出し、前記既定の応答は、複数の絵文字キャラクタを含み、少なくとも一つの既定の応答はテキストと絵文字キャラクタを同時に含むものであり、
    前記到来するメッセージに対する前記複数の既定の応答の表示を開始するための前記既定のユーザアクションを検出するのに応答して、前記複数の既定の応答を表示し、
    前記複数の既定の応答の中のある既定の応答を選択するための既定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための既定のユーザアクションであって、前記タッチスクリーンディスプレイ上での指ジェスチャーを含む、規定のユーザアクションを検出し、
    前記到来するメッセージに対する前記選択された既定の応答の送信を開始するための前記既定のユーザアクションを検出するのに応答して、前記到来するメッセージに対する前記選択された既定の応答を送信する、
    ようにさせるインストラクションを記憶しており、前記選択された既定の応答は、前記複数の絵文字キャラクタの中のある絵文字キャラクタを含む、コンピュータ読み取り可能な記憶媒体。
JP2013144822A 2008-11-19 2013-07-10 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス Active JP5771243B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/274,346 US8584031B2 (en) 2008-11-19 2008-11-19 Portable touch screen device, method, and graphical user interface for using emoji characters
US12/274,346 2008-11-19

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2011537452A Division JP5319781B2 (ja) 2008-11-19 2009-10-12 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2015129155A Division JP6085006B2 (ja) 2008-11-19 2015-06-26 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス

Publications (2)

Publication Number Publication Date
JP2014002755A JP2014002755A (ja) 2014-01-09
JP5771243B2 true JP5771243B2 (ja) 2015-08-26

Family

ID=41572519

Family Applications (5)

Application Number Title Priority Date Filing Date
JP2011537452A Active JP5319781B2 (ja) 2008-11-19 2009-10-12 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
JP2013144822A Active JP5771243B2 (ja) 2008-11-19 2013-07-10 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
JP2015129155A Active JP6085006B2 (ja) 2008-11-19 2015-06-26 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
JP2017012499A Active JP6518705B2 (ja) 2008-11-19 2017-01-26 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
JP2019081308A Active JP6584710B2 (ja) 2008-11-19 2019-04-22 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2011537452A Active JP5319781B2 (ja) 2008-11-19 2009-10-12 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス

Family Applications After (3)

Application Number Title Priority Date Filing Date
JP2015129155A Active JP6085006B2 (ja) 2008-11-19 2015-06-26 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
JP2017012499A Active JP6518705B2 (ja) 2008-11-19 2017-01-26 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
JP2019081308A Active JP6584710B2 (ja) 2008-11-19 2019-04-22 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス

Country Status (5)

Country Link
US (8) US8584031B2 (ja)
JP (5) JP5319781B2 (ja)
KR (5) KR101317547B1 (ja)
CN (3) CN104133589B (ja)
WO (1) WO2010059306A2 (ja)

Families Citing this family (670)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8645137B2 (en) 2000-03-16 2014-02-04 Apple Inc. Fast, language-independent method for user authentication by voice
US8531431B2 (en) * 2003-10-13 2013-09-10 Integritouch Development Ab High speed 3D multi touch sensitive device
WO2006032721A1 (en) 2004-09-24 2006-03-30 Nokia Corporation Method for receiving inputs from user of electronic device
US8677377B2 (en) 2005-09-08 2014-03-18 Apple Inc. Method and apparatus for building an intelligent automated assistant
US7958456B2 (en) * 2005-12-23 2011-06-07 Apple Inc. Scrolling list with floating adjacent index symbols
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US10313505B2 (en) 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US9318108B2 (en) 2010-01-18 2016-04-19 Apple Inc. Intelligent automated assistant
US8689132B2 (en) 2007-01-07 2014-04-01 Apple Inc. Portable electronic device, method, and graphical user interface for displaying electronic documents and lists
US8977255B2 (en) 2007-04-03 2015-03-10 Apple Inc. Method and system for operating a multi-function portable electronic device using voice-activation
KR20250099420A (ko) 2007-09-24 2025-07-01 애플 인크. 전자 장치 내의 내장형 인증 시스템들
US10002189B2 (en) 2007-12-20 2018-06-19 Apple Inc. Method and apparatus for searching using an active ontology
US8600120B2 (en) 2008-01-03 2013-12-03 Apple Inc. Personal computing device control using face detection and recognition
US9330720B2 (en) 2008-01-03 2016-05-03 Apple Inc. Methods and apparatus for altering audio output signals
US8996376B2 (en) 2008-04-05 2015-03-31 Apple Inc. Intelligent text-to-speech conversion
US10496753B2 (en) 2010-01-18 2019-12-03 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US20090323260A1 (en) * 2008-06-25 2009-12-31 Microsoft Corporation Slide and click combination switch for a personal media player
US20100030549A1 (en) 2008-07-31 2010-02-04 Lee Michael M Mobile device having human language translation capability with positional feedback
US20100070931A1 (en) * 2008-09-15 2010-03-18 Sony Ericsson Mobile Communications Ab Method and apparatus for selecting an object
USD618248S1 (en) 2008-09-23 2010-06-22 Apple Inc. Graphical user interface for a display screen or portion thereof
US8676904B2 (en) 2008-10-02 2014-03-18 Apple Inc. Electronic devices with voice command and contextual data processing capabilities
US9002120B2 (en) * 2008-10-03 2015-04-07 Intellectual Ventures Fund 83 Llc Interactive image selection method
US8584031B2 (en) * 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100146437A1 (en) * 2008-12-04 2010-06-10 Microsoft Corporation Glanceable animated notifications on a locked device
US9197738B2 (en) * 2008-12-04 2015-11-24 Microsoft Technology Licensing, Llc Providing selected data through a locked display
US20100171888A1 (en) * 2009-01-05 2010-07-08 Hipolito Saenz Video frame recorder
US8572513B2 (en) 2009-03-16 2013-10-29 Apple Inc. Device, method, and graphical user interface for moving a current position in content at a variable scrubbing rate
KR20120016060A (ko) * 2009-03-20 2012-02-22 구글 인코포레이티드 입력 방식 편집기 컴퓨팅 디바이스와의 상호작용
KR20100116274A (ko) * 2009-04-22 2010-11-01 삼성전자주식회사 휴대용 단말기의 터치 입력 장치 및 방법
US10255566B2 (en) 2011-06-03 2019-04-09 Apple Inc. Generating and processing task items that represent tasks to perform
US9858925B2 (en) 2009-06-05 2018-01-02 Apple Inc. Using context information to facilitate processing of commands in a virtual assistant
US10241752B2 (en) 2011-09-30 2019-03-26 Apple Inc. Interface for a virtual digital assistant
US10241644B2 (en) 2011-06-03 2019-03-26 Apple Inc. Actionable reminder entries
US8745518B2 (en) * 2009-06-30 2014-06-03 Oracle America, Inc. Touch screen input recognition and character selection
US9431006B2 (en) 2009-07-02 2016-08-30 Apple Inc. Methods and apparatuses for automatic speech recognition
US9563350B2 (en) * 2009-08-11 2017-02-07 Lg Electronics Inc. Mobile terminal and method for controlling the same
US8434153B2 (en) 2009-08-24 2013-04-30 Microsoft Corporation Application display on a locked device
US8624933B2 (en) 2009-09-25 2014-01-07 Apple Inc. Device, method, and graphical user interface for scrolling a multi-section document
KR101633332B1 (ko) * 2009-09-30 2016-06-24 엘지전자 주식회사 단말기 및 그 제어 방법
US8924893B2 (en) 2009-10-14 2014-12-30 At&T Mobility Ii Llc Locking and unlocking of an electronic device using a sloped lock track
US9424444B2 (en) 2009-10-14 2016-08-23 At&T Mobility Ii Llc Systems, apparatus, methods and computer-readable storage media for facilitating integrated messaging, contacts and social media for a selected entity
US20110163967A1 (en) * 2010-01-06 2011-07-07 Imran Chaudhri Device, Method, and Graphical User Interface for Changing Pages in an Electronic Document
US20110167350A1 (en) * 2010-01-06 2011-07-07 Apple Inc. Assist Features For Content Display Device
US10276170B2 (en) 2010-01-18 2019-04-30 Apple Inc. Intelligent automated assistant
US10553209B2 (en) 2010-01-18 2020-02-04 Apple Inc. Systems and methods for hands-free notification summaries
US10705794B2 (en) 2010-01-18 2020-07-07 Apple Inc. Automatically adapting user interfaces for hands-free interaction
US10679605B2 (en) 2010-01-18 2020-06-09 Apple Inc. Hands-free list-reading by intelligent automated assistant
US8682667B2 (en) 2010-02-25 2014-03-25 Apple Inc. User profiling for selecting user specific voice input processing information
US9081499B2 (en) * 2010-03-02 2015-07-14 Sony Corporation Mobile terminal device and input device
KR101650339B1 (ko) * 2010-03-12 2016-09-05 삼성전자 주식회사 휴대 단말기의 문자 입력 방법 및 이를 지원하는 휴대 단말기
US8756522B2 (en) 2010-03-19 2014-06-17 Blackberry Limited Portable electronic device and method of controlling same
KR20110113844A (ko) * 2010-04-12 2011-10-19 엘지전자 주식회사 이동 단말기 및 그 제어방법
US20110283241A1 (en) * 2010-05-14 2011-11-17 Google Inc. Touch Gesture Actions From A Device's Lock Screen
US20110279459A1 (en) * 2010-05-17 2011-11-17 Google, Inc. System and Method for Graphically Enriching Promotional Messages Delivered to Handheld Communication Devices
EP2577435B8 (en) * 2010-05-25 2017-12-06 Sony Mobile Communications Inc. A user interface for a touch sensitive display on an electronic device
US8811948B2 (en) 2010-07-09 2014-08-19 Microsoft Corporation Above-lock camera access
USD673165S1 (en) * 2010-07-25 2012-12-25 Miniclip SA Display screen with graphical user interface
US8229511B2 (en) * 2010-08-11 2012-07-24 Research In Motion Limited Electronic device including touch-sensitive display
KR20120019531A (ko) * 2010-08-26 2012-03-07 삼성전자주식회사 휴대 단말기의 ｇｕｉ제공 방법 및 장치
KR101701151B1 (ko) * 2010-09-20 2017-02-02 삼성전자주식회사 휴대 단말기를 이용한 통합 메시지 송수신 방법 및 장치
US9449308B2 (en) * 2010-12-14 2016-09-20 Microsoft Technology Licensing, Llc Defining actions for data streams via icons
KR20120067078A (ko) * 2010-12-15 2012-06-25 삼성전자주식회사 터치 스크린을 구비한 휴대용 단말기에서 어플리케이션 정보를 제공하고 어플리케이션을 실행하기 위한 장치 및 방법
JP5692792B2 (ja) * 2011-02-09 2015-04-01 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 データ入力装置、データ入力方法、プログラム
JP2012169777A (ja) * 2011-02-10 2012-09-06 Sony Corp 情報処理装置、情報処理方法、およびプログラム
US20130033436A1 (en) * 2011-02-17 2013-02-07 Htc Corporation Electronic device, controlling method thereof and computer program product
US9407984B2 (en) * 2011-02-24 2016-08-02 Htc Corporation Method and apparatus for adjusting sound quality
US9262612B2 (en) 2011-03-21 2016-02-16 Apple Inc. Device access using voice authentication
US10241670B2 (en) * 2011-03-31 2019-03-26 Nokia Technologies Oy Character entry apparatus and associated methods
US20120284631A1 (en) * 2011-05-02 2012-11-08 German Lancioni Methods to adapt user interfaces and input controls
US9606643B2 (en) * 2011-05-02 2017-03-28 Microsoft Technology Licensing, Llc Extended above the lock-screen experience
KR101677639B1 (ko) 2011-05-06 2016-11-18 엘지전자 주식회사 휴대 전자기기 및 이의 제어방법
TWI490769B (zh) * 2011-05-12 2015-07-01 群邁通訊股份有限公司 捷徑圖示的定位系統及方法
US8666406B2 (en) * 2011-05-12 2014-03-04 Qualcomm Incorporated Gesture-based commands for a group communication session on a wireless communications device
US8971924B2 (en) 2011-05-23 2015-03-03 Apple Inc. Identifying and locating users on a mobile network
US10715380B2 (en) 2011-05-23 2020-07-14 Apple Inc. Setting a reminder that is triggered by a target user device
US20120304074A1 (en) * 2011-05-23 2012-11-29 Microsoft Corporation Device user interface to input emoji and other symbols
US8826190B2 (en) 2011-05-27 2014-09-02 Google Inc. Moving a graphical selector
US8656315B2 (en) 2011-05-27 2014-02-18 Google Inc. Moving a graphical selector
US10057736B2 (en) 2011-06-03 2018-08-21 Apple Inc. Active transport based notifications
US8638385B2 (en) 2011-06-05 2014-01-28 Apple Inc. Device, method, and graphical user interface for accessing an application in a locked device
EP4344163A3 (en) * 2011-06-05 2024-04-24 Apple Inc. Systems and methods for displaying notifications received from multiple applications
US9513799B2 (en) 2011-06-05 2016-12-06 Apple Inc. Devices, methods, and graphical user interfaces for providing control of a touch-based user interface absent physical touch capabilities
US20130231091A1 (en) * 2011-06-23 2013-09-05 Isaac S. Daniel Apparatus system and method for transmitting coded messages electronically
JP5779422B2 (ja) * 2011-06-28 2015-09-16 シャープ株式会社 表示システムおよび表示プログラム
US9411506B1 (en) * 2011-06-28 2016-08-09 Google Inc. Providing additional functionality for a group messaging application
USD693835S1 (en) * 2011-09-23 2013-11-19 Isaac S. Daniel Display screen with graphical user interface
US20130024781A1 (en) * 2011-07-22 2013-01-24 Sony Corporation Multi-Modal and Updating Interface for Messaging
JP5757815B2 (ja) * 2011-07-27 2015-08-05 京セラ株式会社 電子機器、文章編集方法及び制御プログラム
KR101830965B1 (ko) * 2011-08-03 2018-02-22 엘지전자 주식회사 이동 단말기 및 이동 단말기의 제어 방법
GB2493709A (en) * 2011-08-12 2013-02-20 Siine Ltd Faster input of text in graphical user interfaces
US8971572B1 (en) 2011-08-12 2015-03-03 The Research Foundation For The State University Of New York Hand pointing estimation for human computer interaction
JP6045847B2 (ja) * 2011-08-18 2016-12-14 京セラ株式会社 携帯電子機器、制御方法、および、制御プログラム
US8994660B2 (en) 2011-08-29 2015-03-31 Apple Inc. Text correction processing
KR101951257B1 (ko) * 2011-09-09 2019-02-26 삼성전자주식회사 데이터 입력 방법 및 이를 구현하는 휴대 단말기
US9002322B2 (en) 2011-09-29 2015-04-07 Apple Inc. Authentication with secondary approver
BR102012024861B1 (pt) * 2011-09-30 2021-02-09 Apple Inc. sistema para desambiguar entrada de usuário para realizar uma tarefa
US20130111378A1 (en) * 2011-10-31 2013-05-02 Nokia Corporation Portable electronic device, associated apparatus and methods
US9063629B2 (en) * 2011-10-31 2015-06-23 Nokia Technologies Oy Responding to a received message in a locked user interaction mode
US20130111579A1 (en) * 2011-10-31 2013-05-02 Nokia Corporation Electronic device mode, associated apparatus and methods
KR101301794B1 (ko) * 2011-11-04 2013-08-29 (주)카카오 동적 이모티콘을 이용하는 인스턴트 메시징 서비스를 제공하는 방법 및 그 방법을 실행하는 이동 단말
US20130113606A1 (en) * 2011-11-08 2013-05-09 International Business Machines Corporation Passive Wireless Article with Passcode Touch Sensor Array
US20140310636A1 (en) * 2011-11-11 2014-10-16 Nokia Corporation User interface method and apparatus for providing deformation-sensitive input
KR20130055404A (ko) * 2011-11-18 2013-05-28 삼성전자주식회사 터치 디바이스에서 문자 입력 방법 및 장치
US9204265B2 (en) * 2011-11-22 2015-12-01 Weusi Erskine Method of transmitting coded messages and providing for calendaring responses
JP5827109B2 (ja) * 2011-11-28 2015-12-02 京セラ株式会社 装置、方法、及びプログラム
US10423515B2 (en) 2011-11-29 2019-09-24 Microsoft Technology Licensing, Llc Recording touch information
US9858173B2 (en) 2011-12-01 2018-01-02 Microsoft Technology Licensing, Llc Recording user-driven events within a computing system including vicinity searching
US9173092B1 (en) * 2011-12-02 2015-10-27 Google Inc. Base station data embedded for transmission within information provided to a user device
JP5720549B2 (ja) * 2011-12-02 2015-05-20 株式会社デンソー 表示装置
US9378290B2 (en) 2011-12-20 2016-06-28 Microsoft Technology Licensing, Llc Scenario-adaptive input method editor
US8965425B2 (en) * 2011-12-23 2015-02-24 Isaac S. Daniel System and method of transmitting coded messages using programmable icons
USD703232S1 (en) * 2012-01-10 2014-04-22 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US9134900B2 (en) * 2012-01-18 2015-09-15 Qualcomm Incorporated Traversal of a soft bar to unlock an application
KR101863197B1 (ko) * 2012-01-31 2018-05-31 삼성전자주식회사 컨텐츠 공유 네트워크에서 발견된 디바이스를 알리기 위한 장치 및 방법
KR20130096107A (ko) * 2012-02-21 2013-08-29 삼성전자주식회사 태스크 수행 방법 및 시스템과 기록 매체
WO2013127055A1 (en) * 2012-02-27 2013-09-06 Nokia Corporation Apparatus and associated methods
US10134385B2 (en) 2012-03-02 2018-11-20 Apple Inc. Systems and methods for name pronunciation
USD704212S1 (en) * 2012-03-06 2014-05-06 Apple Inc. Display screen or portion thereof with graphical user interface
US9483461B2 (en) 2012-03-06 2016-11-01 Apple Inc. Handling speech synthesis of content for multiple languages
US9349234B2 (en) 2012-03-14 2016-05-24 Autoconnect Holdings Llc Vehicle to vehicle social and business communications
US9378601B2 (en) 2012-03-14 2016-06-28 Autoconnect Holdings Llc Providing home automation information via communication with a vehicle
US9082239B2 (en) 2012-03-14 2015-07-14 Flextronics Ap, Llc Intelligent vehicle for assisting vehicle occupants
US9384609B2 (en) 2012-03-14 2016-07-05 Autoconnect Holdings Llc Vehicle to vehicle safety and traffic communications
WO2014172327A1 (en) 2013-04-15 2014-10-23 Flextronics Ap, Llc Synchronization between vehicle and user device calendar
US9412273B2 (en) 2012-03-14 2016-08-09 Autoconnect Holdings Llc Radar sensing and emergency response vehicle detection
USD705263S1 (en) 2012-03-27 2014-05-20 Microsoft Corporation Display screen with icon
AU344229S (en) * 2012-03-29 2012-09-05 Samsung Electronics Co Ltd Display screen with icon for an electronic device
USD705252S1 (en) * 2012-03-30 2014-05-20 Microsoft Corporation Display screen with graphical user interface
USD724101S1 (en) * 2012-04-05 2015-03-10 Welch Allyn, Inc. Patient monitoring device with graphical user interface
KR20130123705A (ko) * 2012-05-03 2013-11-13 삼성전자주식회사 추가 문자 입력을 위한 가상 키보드와 그를 사용한 추가 문자 입력 장치 및 방법
US9280610B2 (en) 2012-05-14 2016-03-08 Apple Inc. Crowd sourcing information to fulfill user requests
US10417037B2 (en) 2012-05-15 2019-09-17 Apple Inc. Systems and methods for integrating third party services with a digital assistant
US20130326361A1 (en) * 2012-06-04 2013-12-05 EyeSay, LLC System and method for managing mobile multimedia messages
US9721563B2 (en) 2012-06-08 2017-08-01 Apple Inc. Name recognition system
USD706818S1 (en) * 2012-06-13 2014-06-10 Microsoft Corporation Display screen with icon group
CN104428734A (zh) 2012-06-25 2015-03-18 微软公司 输入法编辑器应用平台
US9391945B1 (en) 2012-06-25 2016-07-12 Daniel Isaac S System and method of posting coded messages on social networks
US20150121291A1 (en) * 2012-06-29 2015-04-30 Microsoft Corporation Input Method Editor
US9495129B2 (en) 2012-06-29 2016-11-15 Apple Inc. Device, method, and user interface for voice-activated navigation and browsing of a document
US9911222B2 (en) 2012-07-06 2018-03-06 Tangome, Inc. Animation in threaded conversations
CN103543903B (zh) * 2012-07-11 2018-07-17 腾讯科技（深圳）有限公司 快捷操作方法、装置及移动终端
US9058103B2 (en) * 2012-07-25 2015-06-16 Facebook, Inc. Gestures for keyboard switch
KR102101818B1 (ko) * 2012-07-30 2020-04-17 삼성전자주식회사 단말기의 데이터전송 제어장치 및 방법
USD755210S1 (en) * 2012-08-17 2016-05-03 P&W Solutions Co., Ltd. Display screen with graphical user interface
EP2890093A4 (en) * 2012-08-24 2016-01-20 Toyota Motor Co Ltd PORTABLE TERMINAL, METHOD FOR CONTROLLING THE PORTABLE TERMINAL, PROGRAM CARRIED OUT ON THE PORTABLE TERMINAL AND SUPPORT FOR THE PORTABLE TERMINAL
US9767156B2 (en) 2012-08-30 2017-09-19 Microsoft Technology Licensing, Llc Feature-based candidate selection
US9547647B2 (en) 2012-09-19 2017-01-17 Apple Inc. Voice-based media searching
US8732624B2 (en) * 2012-09-20 2014-05-20 Google Inc. Protection for unintentional inputs
US8601561B1 (en) 2012-09-20 2013-12-03 Google Inc. Interactive overlay to prevent unintentional inputs
USD706297S1 (en) * 2012-09-21 2014-06-03 Samsung Electronics Co., Ltd. Portable electronic device with a graphical user interface
USD702731S1 (en) * 2012-09-21 2014-04-15 Samsung Electronics Co., Ltd. Portable electronic device with a graphical user interface
US8656296B1 (en) 2012-09-27 2014-02-18 Google Inc. Selection of characters in a string of characters
US9746990B2 (en) * 2012-09-28 2017-08-29 Intel Corporation Selectively augmenting communications transmitted by a communication device
KR20140051487A (ko) * 2012-10-08 2014-05-02 삼성전자주식회사 단말기의 데이터보호 장치 및 방법
US10976922B2 (en) * 2013-02-17 2021-04-13 Benjamin Firooz Ghassabian Data entry systems
US9372970B2 (en) 2012-10-12 2016-06-21 Apple Inc. Gesture entry techniques
US9147058B2 (en) 2012-10-12 2015-09-29 Apple Inc. Gesture entry techniques
KR101390228B1 (ko) 2012-10-22 2014-05-07 (주)카카오 채팅 영역에 이미지를 표시하는 디바이스 및 방법, 그리고 채팅 데이터를 관리하는 서버
US9804777B1 (en) * 2012-10-23 2017-10-31 Google Inc. Gesture-based text selection
US8806384B2 (en) 2012-11-02 2014-08-12 Google Inc. Keyboard gestures for character string replacement
USD691633S1 (en) * 2012-11-09 2013-10-15 Blackberry Limited Display screen with icon
USD692023S1 (en) * 2012-11-09 2013-10-22 Blackberry Limited Display screen with icon
US9948589B2 (en) 2012-11-14 2018-04-17 invi Labs, Inc. System for and method of organizing contacts for chat sessions on an electronic device
CN103019587B (zh) * 2012-11-19 2016-08-24 广东欧珀移动通信有限公司 一种移动终端图片浏览的方法及装置
US10824297B2 (en) 2012-11-26 2020-11-03 Google Llc System for and method of accessing and selecting emoticons, content, and mood messages during chat sessions
WO2014084761A1 (en) * 2012-11-27 2014-06-05 Telefonaktiebolaget L M Ericsson (Publ) Sub-keyboards with keys dependent on the frequency of use
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
CN103927190A (zh) * 2013-01-11 2014-07-16 腾讯科技（深圳）有限公司 网络表情下载方法与装置
US8989773B2 (en) 2013-01-29 2015-03-24 Apple Inc. Sharing location information among devices
DE112014000709B4 (de) 2013-02-07 2021-12-30 Apple Inc. Verfahren und vorrichtung zum betrieb eines sprachtriggers für einen digitalen assistenten
KR102146244B1 (ko) * 2013-02-22 2020-08-21 삼성전자주식회사 휴대 단말에 대한 동작 관련 입력에 따라 복수개의 객체들의 표시를 제어하는 방법 및 이를 위한 휴대 단말
USD727966S1 (en) * 2013-02-23 2015-04-28 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
JP6255646B2 (ja) * 2013-03-04 2018-01-10 株式会社Ｌ ｉｓ Ｂ メッセージシステム
CN103218159A (zh) * 2013-03-14 2013-07-24 鸿富锦精密工业（深圳）有限公司 应用程序检索系统及方法
US10652394B2 (en) 2013-03-14 2020-05-12 Apple Inc. System and method for processing voicemail
US20140280603A1 (en) * 2013-03-14 2014-09-18 Endemic Mobile Inc. User attention and activity in chat systems
US10748529B1 (en) 2013-03-15 2020-08-18 Apple Inc. Voice activated device for use with a voice-based digital assistant
WO2014143776A2 (en) * 2013-03-15 2014-09-18 Bodhi Technology Ventures Llc Providing remote interactions with host device using a wireless device
US9027153B2 (en) 2013-03-15 2015-05-05 Google Technology Holdings LLC Operating a computer with a touchscreen
US12149779B2 (en) 2013-03-15 2024-11-19 Apple Inc. Advertisement user interface
US8918339B2 (en) 2013-03-15 2014-12-23 Facebook, Inc. Associating an indication of user emotional reaction with content items presented by a social networking system
MY171645A (en) * 2013-03-29 2019-10-22 Panasonic Ip Corp America Mobile information terminal control method and program
EP2817591A4 (en) 2013-04-15 2015-10-07 Flextronics Ap Llc CHANGE OF BEHAVIOR BY CHANGED ASSIGNMENT ROUTES BASED ON USER PROFILE INFORMATION
WO2014172334A1 (en) * 2013-04-15 2014-10-23 Flextronics Ap, Llc User gesture control of vehicle features
EP2987153A4 (en) 2013-04-15 2016-09-21 Autoconnect Holdings Llc CENTRAL NETWORK FOR THE AUTOMATED REGULATION OF ROAD TRAFFIC
HK1222725A1 (zh) * 2013-04-29 2017-07-07 Hewlett-Packard Development Company, L.P. 显示接收的用户界面的设备
CN105247468B (zh) * 2013-05-27 2018-01-05 三菱电机株式会社 可编程显示器及其画面操作处理程序
WO2014197336A1 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for detecting errors in interactions with a voice-based digital assistant
WO2014197334A2 (en) 2013-06-07 2014-12-11 Apple Inc. System and method for user-specified pronunciation of words for speech synthesis and recognition
US9582608B2 (en) 2013-06-07 2017-02-28 Apple Inc. Unified ranking with entropy-weighted information for phrase-based semantic auto-completion
WO2014197335A1 (en) 2013-06-08 2014-12-11 Apple Inc. Interpreting and acting upon commands that involve sharing information with remote devices
US10176167B2 (en) 2013-06-09 2019-01-08 Apple Inc. System and method for inferring user intent from speech inputs
US9898187B2 (en) 2013-06-09 2018-02-20 Apple Inc. Managing real-time handwriting recognition
CN109614846A (zh) * 2013-06-09 2019-04-12 苹果公司 管理实时手写识别
KR101959188B1 (ko) 2013-06-09 2019-07-02 애플 인크. 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스
CN104252811B (zh) * 2013-06-28 2017-11-24 联想(北京)有限公司 一种信息处理方法及电子设备
USD745895S1 (en) * 2013-06-28 2015-12-22 Microsoft Corporation Display screen with graphical user interface
TW201501013A (zh) * 2013-06-28 2015-01-01 Zeroplus Technology Co Ltd 表情符號之製作及運用方法及其表情符號製作與應用系統
USD731553S1 (en) * 2013-07-31 2015-06-09 Sears Brands, L.L.C. Display screen or portion thereof with an icon
KR101749009B1 (ko) 2013-08-06 2017-06-19 애플 인크. 원격 디바이스로부터의 활동에 기초한 스마트 응답의 자동 활성화
WO2015018055A1 (en) 2013-08-09 2015-02-12 Microsoft Corporation Input method editor providing language assistance
CN108762480A (zh) * 2013-08-28 2018-11-06 联想(北京)有限公司 一种输入方法和电子设备
JP6018996B2 (ja) * 2013-09-04 2016-11-02 シャープ株式会社 情報処理装置
US9898642B2 (en) 2013-09-09 2018-02-20 Apple Inc. Device, method, and graphical user interface for manipulating user interfaces based on fingerprint sensor inputs
USD754736S1 (en) * 2013-09-10 2016-04-26 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
KR102057944B1 (ko) * 2013-09-17 2019-12-23 삼성전자주식회사 단말 장치 및 그의 공유 방법
JP6223118B2 (ja) * 2013-10-23 2017-11-01 東芝テック株式会社 買物支援システム
WO2015061700A1 (en) * 2013-10-24 2015-04-30 Tapz Communications, LLC System for effectively communicating concepts
CN103645825B (zh) * 2013-11-22 2017-03-29 华为终端有限公司 消息的处理方法及装置
IN2013CH05449A (ja) * 2013-11-27 2015-08-07 Shyam Pathy V
US10296160B2 (en) 2013-12-06 2019-05-21 Apple Inc. Method for extracting salient dialog usage from live data
USD762680S1 (en) 2013-12-18 2016-08-02 Apple Inc. Display screen or portion thereof with graphical user interface
EP3094157B1 (en) 2014-01-09 2018-09-19 Nec Corporation Mtc-iwf entity, pcrf entity, and control method
US10013601B2 (en) * 2014-02-05 2018-07-03 Facebook, Inc. Ideograms for captured expressions
CN104866219A (zh) * 2014-02-26 2015-08-26 腾讯科技（深圳）有限公司 快速签到的方法及装置
CN103777891A (zh) * 2014-02-26 2014-05-07 全蕊 消息尾部插入表情发送的方法
USD780776S1 (en) * 2014-03-11 2017-03-07 King.Com Ltd. Display screen or portion thereof with game graphical user interface
CN104935491B (zh) * 2014-03-17 2018-08-07 腾讯科技（深圳）有限公司 一种发送表情图像的方法及装置
USD738910S1 (en) * 2014-03-19 2015-09-15 Wargaming.Net Llp Display screen with animated graphical user interface
USD757800S1 (en) * 2014-04-15 2016-05-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with graphical user interface
US12124790B2 (en) 2014-04-23 2024-10-22 Klickafy, Llc Apparatuses, systems, and methods for providing dynamic content
US10482163B2 (en) 2014-04-23 2019-11-19 Klickafy, Llc Clickable emoji
US10845982B2 (en) 2014-04-28 2020-11-24 Facebook, Inc. Providing intelligent transcriptions of sound messages in a messaging application
TWI506569B (zh) * 2014-05-15 2015-11-01 國立清華大學 一種可辨識圖片中物件之位置範圍與行爲關係之圖片標記方法
US20150332534A1 (en) * 2014-05-15 2015-11-19 Narvii Inc. Systems and methods implementing user interface objects
KR102177607B1 (ko) * 2014-05-16 2020-11-11 엘지전자 주식회사 이동 단말기 및 이의 제어방법
US9324067B2 (en) 2014-05-29 2016-04-26 Apple Inc. User interface for payments
US20150350146A1 (en) 2014-05-29 2015-12-03 Apple Inc. Coordination of message alert presentations across devices based on device modes
US9760559B2 (en) 2014-05-30 2017-09-12 Apple Inc. Predictive text input
US9633004B2 (en) 2014-05-30 2017-04-25 Apple Inc. Better resolution when referencing to concepts
WO2015184186A1 (en) 2014-05-30 2015-12-03 Apple Inc. Multi-command single utterance input method
US10078631B2 (en) 2014-05-30 2018-09-18 Apple Inc. Entropy-guided text prediction using combined word and character n-gram language models
US10170123B2 (en) 2014-05-30 2019-01-01 Apple Inc. Intelligent assistant for home automation
WO2015183366A1 (en) 2014-05-30 2015-12-03 Apple, Inc. Continuity
US9715875B2 (en) 2014-05-30 2017-07-25 Apple Inc. Reducing the need for manual start/end-pointing and trigger phrases
US10579212B2 (en) 2014-05-30 2020-03-03 Apple Inc. Structured suggestions
US9842101B2 (en) 2014-05-30 2017-12-12 Apple Inc. Predictive conversion of language input
US10313506B2 (en) 2014-05-30 2019-06-04 Apple Inc. Wellness aggregator
US10565219B2 (en) 2014-05-30 2020-02-18 Apple Inc. Techniques for automatically generating a suggested contact based on a received message
WO2015183699A1 (en) 2014-05-30 2015-12-03 Apple Inc. Predictive messaging method
US9430463B2 (en) 2014-05-30 2016-08-30 Apple Inc. Exemplar-based natural language processing
US9785630B2 (en) 2014-05-30 2017-10-10 Apple Inc. Text prediction using combined word N-gram and unigram language models
US10382378B2 (en) 2014-05-31 2019-08-13 Apple Inc. Live location sharing
US20150350141A1 (en) 2014-05-31 2015-12-03 Apple Inc. Message user interfaces for capture and transmittal of media and location content
KR20150143989A (ko) * 2014-06-16 2015-12-24 주식회사 큐키 간편한 이모티콘 입력 방법 및 이 방법을 구현한 장치
CN111782130B (zh) 2014-06-24 2024-03-29 苹果公司 用于在用户界面中导航的列界面
EP3126952B1 (en) * 2014-06-24 2023-07-12 Apple Inc. Input device and user interface interactions
US10708203B2 (en) * 2014-06-25 2020-07-07 Convergence Acceleration Solutions, Llc Systems and methods for indicating emotions through electronic self-portraits
EP4036685A1 (en) 2014-06-27 2022-08-03 Apple Inc. Reduced size user interface
US20160048492A1 (en) * 2014-06-29 2016-02-18 Emoji 3.0 LLC Platform for internet based graphical communication
USD755225S1 (en) * 2014-06-30 2016-05-03 Aliphcom Display screen or portion thereof with animated graphical user interface
US10659851B2 (en) 2014-06-30 2020-05-19 Apple Inc. Real-time digital assistant knowledge updates
US9338493B2 (en) 2014-06-30 2016-05-10 Apple Inc. Intelligent automated assistant for TV user interactions
EP3195098B1 (en) 2014-07-21 2024-10-23 Apple Inc. Remote user interface
USD754195S1 (en) * 2014-07-29 2016-04-19 Krush Technologies, Llc Display screen or portion thereof with icon
USD751115S1 (en) * 2014-07-29 2016-03-08 Krush Technologies, Llc Display screen or portion thereof with icon
US9651997B2 (en) * 2014-07-30 2017-05-16 Intel Corporation Methods, systems and apparatus to manage a spatially dynamic display
USD755838S1 (en) * 2014-07-30 2016-05-10 Krush Technologies, Llc Display screen or portion thereof with icon
JP6322765B2 (ja) 2014-08-02 2018-05-09 アップル インコーポレイテッド コンテキスト特化ユーザインターフェース
US10452253B2 (en) 2014-08-15 2019-10-22 Apple Inc. Weather user interface
US10446141B2 (en) 2014-08-28 2019-10-15 Apple Inc. Automatic speech recognition based on user feedback
TWD178887S (zh) * 2014-09-01 2016-10-11 蘋果公司 顯示螢幕之圖形使用者介面之部分
KR20160026578A (ko) * 2014-09-01 2016-03-09 삼성전자주식회사 전자 장치의 디스플레이 방법 및 그 전자 장치
JP2017527033A (ja) * 2014-09-02 2017-09-14 アップル インコーポレイテッド ユーザ入力を受信するためのユーザインタフェース
WO2016036481A1 (en) 2014-09-02 2016-03-10 Apple Inc. Reduced-size user interfaces for dynamically updated application overviews
EP4668726A3 (en) 2014-09-02 2026-03-25 Apple Inc. Phone user interface
US9547419B2 (en) 2014-09-02 2017-01-17 Apple Inc. Reduced size configuration interface
US20160259502A1 (en) * 2014-09-10 2016-09-08 Katrina Parrott Diverse emojis/emoticons
US10146748B1 (en) * 2014-09-10 2018-12-04 Google Llc Embedding location information in a media collaboration using natural language processing
US9818400B2 (en) 2014-09-11 2017-11-14 Apple Inc. Method and apparatus for discovering trending terms in speech requests
US10789041B2 (en) 2014-09-12 2020-09-29 Apple Inc. Dynamic thresholds for always listening speech trigger
US10212111B2 (en) * 2014-09-12 2019-02-19 Google Llc System and interface that facilitate selecting videos to share in a messaging application
US9646609B2 (en) 2014-09-30 2017-05-09 Apple Inc. Caching apparatus for serving phonetic pronunciations
US9668121B2 (en) 2014-09-30 2017-05-30 Apple Inc. Social reminders
US9886432B2 (en) 2014-09-30 2018-02-06 Apple Inc. Parsimonious handling of word inflection via categorical stem + suffix N-gram language models
US10127911B2 (en) 2014-09-30 2018-11-13 Apple Inc. Speaker identification and unsupervised speaker adaptation techniques
US10074360B2 (en) 2014-09-30 2018-09-11 Apple Inc. Providing an indication of the suitability of speech recognition
US10769607B2 (en) * 2014-10-08 2020-09-08 Jgist, Inc. Universal symbol system language-one world language
CN104375864A (zh) * 2014-11-22 2015-02-25 深圳市梧桐世界科技有限公司 一种ssid加载图形的方法
US10552013B2 (en) 2014-12-02 2020-02-04 Apple Inc. Data detection
US9721024B2 (en) * 2014-12-19 2017-08-01 Facebook, Inc. Searching for ideograms in an online social network
USD755236S1 (en) * 2015-01-02 2016-05-03 Chris J. Katopis Display screen with donkey-themed keyboard graphical user interface (GUI)
USD755235S1 (en) * 2015-01-02 2016-05-03 Chris J. Katopis Display screen with elephant-themed keyboard graphical user interface (GUI)
USD818497S1 (en) * 2015-01-06 2018-05-22 King.Com Limited Display screen with icon
USD777187S1 (en) * 2015-01-15 2017-01-24 Charter Communications Operating, Llc Display screen or portion thereof with graphical user interface
USD777746S1 (en) * 2015-01-15 2017-01-31 Charter Communications Operating, Llc Display screen or portion thereof with graphical user interface
EP3254452B1 (en) 2015-02-02 2018-12-26 Apple Inc. Device, method, and graphical user interface for establishing a relationship and connection between two devices
CN104579934B (zh) * 2015-02-10 2016-08-17 腾讯科技（深圳）有限公司 一种信息处理方法及客户端
KR101622872B1 (ko) * 2015-02-11 2016-05-19 라인 가부시키가이샤 인스턴트 메시징 서비스에서 공식계정의 리치 메뉴를 제공하는 방법과 시스템 및 기록 매체
US10152299B2 (en) 2015-03-06 2018-12-11 Apple Inc. Reducing response latency of intelligent automated assistants
US9865280B2 (en) 2015-03-06 2018-01-09 Apple Inc. Structured dictation using intelligent automated assistants
US10055121B2 (en) 2015-03-07 2018-08-21 Apple Inc. Activity based thresholds and feedbacks
US9886953B2 (en) 2015-03-08 2018-02-06 Apple Inc. Virtual assistant activation
US10216351B2 (en) 2015-03-08 2019-02-26 Apple Inc. Device configuration user interface
US9721566B2 (en) 2015-03-08 2017-08-01 Apple Inc. Competing devices responding to voice triggers
US10567477B2 (en) 2015-03-08 2020-02-18 Apple Inc. Virtual assistant continuity
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
CN106033337B (zh) * 2015-03-13 2019-07-16 腾讯科技（深圳）有限公司 一种即时通信表情符号生成方法及装置
US20160359773A1 (en) * 2015-03-16 2016-12-08 Boogoo Intellectual Property LLC Electronic Communication System
US9899019B2 (en) 2015-03-18 2018-02-20 Apple Inc. Systems and methods for structured stem and suffix language models
US9715111B2 (en) * 2015-03-27 2017-07-25 Ca, Inc. Secure user input mode for electronic devices using randomized locations of selection indicia
US9842105B2 (en) 2015-04-16 2017-12-12 Apple Inc. Parsimonious continuous-space phrase representations for natural language processing
US20180107279A1 (en) * 2015-04-20 2018-04-19 Afarin Pirzadeh Applications, systems, and methods for facilitating emotional gesture-based communications
WO2016179087A1 (en) * 2015-05-01 2016-11-10 Ink Corp. Personalized image-based communication on mobile platforms
US10460227B2 (en) 2015-05-15 2019-10-29 Apple Inc. Virtual assistant in a communication session
US10083688B2 (en) 2015-05-27 2018-09-25 Apple Inc. Device voice control for selecting a displayed affordance
US10042548B2 (en) 2015-06-02 2018-08-07 Facebook, Inc. Methods and systems for providing user feedback using an emotion scale
US10127220B2 (en) 2015-06-04 2018-11-13 Apple Inc. Language identification from short strings
US9578173B2 (en) 2015-06-05 2017-02-21 Apple Inc. Virtual assistant aided communication with 3rd party service in a communication session
US10101822B2 (en) 2015-06-05 2018-10-16 Apple Inc. Language input correction
US9916075B2 (en) 2015-06-05 2018-03-13 Apple Inc. Formatting content for a reduced-size user interface
US10186254B2 (en) 2015-06-07 2019-01-22 Apple Inc. Context-based endpoint detection
US11025565B2 (en) 2015-06-07 2021-06-01 Apple Inc. Personalized prediction of responses for instant messaging
US10255907B2 (en) 2015-06-07 2019-04-09 Apple Inc. Automatic accent detection using acoustic models
DK179360B1 (en) 2015-06-07 2018-05-22 Apple Inc Devices, methods and graphical user interfaces for providing and interacting with notifications
US10275116B2 (en) 2015-06-07 2019-04-30 Apple Inc. Browser with docked tabs
USD775213S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD774096S1 (en) * 2015-06-10 2016-12-13 Twiin, Inc. Display screen or portion thereof with icon
USD774550S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD774551S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD774549S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD774098S1 (en) * 2015-06-10 2016-12-13 Twiin, Inc. Display screen or portion thereof with icon
USD775211S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD774548S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
US9658704B2 (en) * 2015-06-10 2017-05-23 Apple Inc. Devices and methods for manipulating user interfaces with a stylus
USD775212S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD775671S1 (en) * 2015-06-10 2017-01-03 Twiin, Inc. Display screen or portion thereof with icon
USD774097S1 (en) * 2015-06-10 2016-12-13 Twiin, Inc. Display screen or portion thereof with icon
USD774552S1 (en) * 2015-06-10 2016-12-20 Twiin, Inc. Display screen or portion thereof with icon
USD775210S1 (en) * 2015-06-10 2016-12-27 Twiin, Inc. Display screen or portion thereof with icon
USD788809S1 (en) * 2015-06-22 2017-06-06 Gamblit Gaming, Llc Display screen for a graphical user interface
US20160378747A1 (en) 2015-06-29 2016-12-29 Apple Inc. Virtual assistant for media playback
US10003938B2 (en) 2015-08-14 2018-06-19 Apple Inc. Easy location sharing
CN105138222B (zh) * 2015-08-26 2018-12-04 美国掌赢信息科技有限公司 一种选择表情图标的方法和电子设备
US10671428B2 (en) 2015-09-08 2020-06-02 Apple Inc. Distributed personal assistant
US10747498B2 (en) 2015-09-08 2020-08-18 Apple Inc. Zero latency digital assistant
CN113093955B (zh) * 2015-09-09 2024-10-15 苹果公司 表情符号和预设回复
USD1121680S1 (en) 2015-09-10 2026-04-07 Cub Club Investment, LLC Display screen or portion thereof with icons
US10445425B2 (en) 2015-09-15 2019-10-15 Apple Inc. Emoji and canned responses
US10203843B2 (en) 2015-09-21 2019-02-12 Microsoft Technology Licensing, Llc Facilitating selection of attribute values for graphical elements
US9665567B2 (en) 2015-09-21 2017-05-30 International Business Machines Corporation Suggesting emoji characters based on current contextual emotional state of user
US11138207B2 (en) * 2015-09-22 2021-10-05 Google Llc Integrated dynamic interface for expression-based retrieval of expressive media content
US10474877B2 (en) 2015-09-22 2019-11-12 Google Llc Automated effects generation for animated content
US9697820B2 (en) 2015-09-24 2017-07-04 Apple Inc. Unit-selection text-to-speech synthesis using concatenation-sensitive neural networks
US11010550B2 (en) 2015-09-29 2021-05-18 Apple Inc. Unified language modeling framework for word prediction, auto-completion and auto-correction
US10366158B2 (en) 2015-09-29 2019-07-30 Apple Inc. Efficient word encoding for recurrent neural network language models
US11587559B2 (en) 2015-09-30 2023-02-21 Apple Inc. Intelligent device identification
CN108353256A (zh) * 2015-10-08 2018-07-31 麦格尼菲克斯软件有限公司 用于在即时通讯系统中创建和使用表情符号和其它图形内容的方法和系统
US10496275B2 (en) 2015-10-12 2019-12-03 Microsoft Technology Licensing, Llc Multi-window keyboard
US10599305B2 (en) * 2015-10-16 2020-03-24 International Business Machines Corporation Approach for selecting a desired object on a small touch screen
JP6687878B2 (ja) * 2015-10-27 2020-04-28 富士ゼロックス株式会社 情報処理装置およびプログラム
US10691473B2 (en) 2015-11-06 2020-06-23 Apple Inc. Intelligent automated assistant in a messaging environment
US10025972B2 (en) * 2015-11-16 2018-07-17 Facebook, Inc. Systems and methods for dynamically generating emojis based on image analysis of facial features
US10692126B2 (en) 2015-11-17 2020-06-23 Nio Usa, Inc. Network-based system for selling and servicing cars
GB2558850B (en) * 2015-12-02 2021-10-06 Motorola Solutions Inc Method for associating a group of applications with a specific shape
US10049668B2 (en) 2015-12-02 2018-08-14 Apple Inc. Applying neural network language models to weighted finite state transducers for automatic speech recognition
CN106886396B (zh) * 2015-12-16 2020-07-07 北京奇虎科技有限公司 表情管理方法及装置
US10223066B2 (en) 2015-12-23 2019-03-05 Apple Inc. Proactive assistance based on dialog communication between devices
USD852839S1 (en) * 2015-12-23 2019-07-02 Beijing Xinmei Hutong Technology Co., Ltd Display screen with a graphical user interface
JP2019504413A (ja) * 2015-12-29 2019-02-14 エム・ゼット・アイ・ピィ・ホールディングス・リミテッド・ライアビリティ・カンパニーＭｚ Ｉｐ Ｈｏｌｄｉｎｇｓ， Ｌｌｃ 絵文字を提案するためのシステムおよび方法
US20170220573A1 (en) * 2016-01-05 2017-08-03 William McMichael Systems and methods of performing searches within a text input application
USD839308S1 (en) * 2016-01-22 2019-01-29 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
CN105700703A (zh) * 2016-02-24 2016-06-22 北京小牛互联科技有限公司 一种在键盘的文字输入界面嵌入表情并支持自定义表情的方法和装置
USD842900S1 (en) * 2016-03-08 2019-03-12 King.Com Limited Display screen with icon
US10446143B2 (en) 2016-03-14 2019-10-15 Apple Inc. Identification of voice inputs providing credentials
US11494547B2 (en) 2016-04-13 2022-11-08 Microsoft Technology Licensing, Llc Inputting images to electronic devices
CN105930828B (zh) * 2016-04-15 2021-05-14 腾讯科技（深圳）有限公司 表情分类标识的控制方法及装置
US20170308289A1 (en) * 2016-04-20 2017-10-26 Google Inc. Iconographic symbol search within a graphical keyboard
KR101928550B1 (ko) * 2016-04-21 2018-12-12 주식회사 씨케이머티리얼즈랩 촉각 메시지 제공 방법 및 촉각 메시지 제공 장치
CN105975563B (zh) 2016-04-29 2019-10-11 腾讯科技（深圳）有限公司 表情推荐方法及装置
KR101780809B1 (ko) * 2016-05-09 2017-09-22 네이버 주식회사 이모티콘이 함께 제공되는 번역문 제공 방법, 사용자 단말, 서버 및 컴퓨터 프로그램
US10680980B2 (en) 2016-05-10 2020-06-09 Cisco Technology, Inc. Interactive contextual emojis
US11320982B2 (en) 2016-05-18 2022-05-03 Apple Inc. Devices, methods, and graphical user interfaces for messaging
EP4113268B1 (en) 2016-05-18 2024-04-17 Apple Inc. Devices, methods, and graphical user interfaces for messaging
DK179186B1 (en) 2016-05-19 2018-01-15 Apple Inc REMOTE AUTHORIZATION TO CONTINUE WITH AN ACTION
CN105871695B (zh) * 2016-05-19 2019-03-26 腾讯科技（深圳）有限公司 表情发送方法和装置
US9934775B2 (en) 2016-05-26 2018-04-03 Apple Inc. Unit-selection text-to-speech synthesis based on predicted concatenation parameters
US9972304B2 (en) 2016-06-03 2018-05-15 Apple Inc. Privacy preserving distributed evaluation framework for embedded personalized systems
US11227589B2 (en) 2016-06-06 2022-01-18 Apple Inc. Intelligent list reading
US10249300B2 (en) 2016-06-06 2019-04-02 Apple Inc. Intelligent list reading
US10049663B2 (en) 2016-06-08 2018-08-14 Apple, Inc. Intelligent automated assistant for media exploration
DK179588B1 (en) 2016-06-09 2019-02-22 Apple Inc. INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT
US10509862B2 (en) 2016-06-10 2019-12-17 Apple Inc. Dynamic phrase expansion of language input
US10067938B2 (en) 2016-06-10 2018-09-04 Apple Inc. Multilingual word prediction
US10192552B2 (en) 2016-06-10 2019-01-29 Apple Inc. Digital assistant providing whispered speech
US10586535B2 (en) 2016-06-10 2020-03-10 Apple Inc. Intelligent digital assistant in a multi-tasking environment
US10490187B2 (en) 2016-06-10 2019-11-26 Apple Inc. Digital assistant providing automated status report
DK201770423A1 (en) 2016-06-11 2018-01-15 Apple Inc Activity and workout updates
DK179343B1 (en) 2016-06-11 2018-05-14 Apple Inc Intelligent task discovery
DK179415B1 (en) 2016-06-11 2018-06-14 Apple Inc Intelligent device arbitration and control
DK201670540A1 (en) 2016-06-11 2018-01-08 Apple Inc Application integration with a digital assistant
DK179049B1 (en) 2016-06-11 2017-09-18 Apple Inc Data driven natural language event detection and classification
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
DK201670622A1 (en) 2016-06-12 2018-02-12 Apple Inc User interfaces for transactions
US10873786B2 (en) 2016-06-12 2020-12-22 Apple Inc. Recording and broadcasting application visual output
DK201670616A1 (en) * 2016-06-12 2018-01-22 Apple Inc Devices and Methods for Accessing Prevalent Device Functions
DK179374B1 (en) 2016-06-12 2018-05-28 Apple Inc Handwriting keyboard for monitors
US10368208B2 (en) 2016-06-12 2019-07-30 Apple Inc. Layers in messaging applications
US10409488B2 (en) * 2016-06-13 2019-09-10 Microsoft Technology Licensing, Llc Intelligent virtual keyboards
US10001901B2 (en) * 2016-06-14 2018-06-19 Unity IPR ApS System and method for texturing in virtual reality and mixed reality environments
US10182047B1 (en) 2016-06-30 2019-01-15 Snap Inc. Pictograph password security system
US20180012197A1 (en) 2016-07-07 2018-01-11 NextEv USA, Inc. Battery exchange licensing program based on state of charge of battery pack
US10855632B2 (en) * 2016-07-19 2020-12-01 Snap Inc. Displaying customized electronic messaging graphics
US9973456B2 (en) 2016-07-22 2018-05-15 Strip Messenger Messaging as a graphical comic strip
US9684430B1 (en) * 2016-07-27 2017-06-20 Strip Messenger Linguistic and icon based message conversion for virtual environments and objects
US9928734B2 (en) 2016-08-02 2018-03-27 Nio Usa, Inc. Vehicle-to-pedestrian communication systems
WO2018023576A1 (zh) * 2016-08-04 2018-02-08 薄冰 根据市场反馈调整表情发送技术的方法以及表情系统
WO2018023577A1 (zh) * 2016-08-04 2018-02-08 薄冰 手势匹配表情发送指令的停用方法以及表情系统
WO2018023578A1 (zh) * 2016-08-04 2018-02-08 薄冰 根据手势发送表情的方法以及表情系统
CN106293131A (zh) * 2016-08-16 2017-01-04 广东小天才科技有限公司 表情输入方法及装置
US10409487B2 (en) * 2016-08-23 2019-09-10 Microsoft Technology Licensing, Llc Application processing based on gesture input
USD854049S1 (en) * 2016-08-25 2019-07-16 Emojot, Inc. Display screen with a graphical user interface
USD853444S1 (en) * 2016-08-25 2019-07-09 Emojot, Inc. Display screen with graphical user interface
US10063929B1 (en) 2016-09-01 2018-08-28 Nufbee Llc Community controlled audio entertainment system
US10798044B1 (en) 2016-09-01 2020-10-06 Nufbee Llc Method for enhancing text messages with pre-recorded audio clips
US10474753B2 (en) 2016-09-07 2019-11-12 Apple Inc. Language identification using recurrent neural networks
US9940498B2 (en) * 2016-09-09 2018-04-10 Motorola Mobility Llc Low power application access using fingerprint sensor authentication
CN109716370B (zh) 2016-09-20 2023-09-01 谷歌有限责任公司 用于在消息应用中传送响应的系统和方法
USD808429S1 (en) * 2016-09-20 2018-01-23 Google Llc Display screen with icon
DK179471B1 (en) 2016-09-23 2018-11-26 Apple Inc. IMAGE DATA FOR ENHANCED USER INTERACTIONS
US10043516B2 (en) 2016-09-23 2018-08-07 Apple Inc. Intelligent automated assistant
CN110109592B (zh) 2016-09-23 2022-09-23 苹果公司 头像创建和编辑
US10218802B2 (en) 2016-10-18 2019-02-26 Microsoft Technology Licensing, Llc Tiered notification framework
US11966560B2 (en) 2016-10-26 2024-04-23 Apple Inc. User interfaces for browsing content from multiple content applications on an electronic device
USD820304S1 (en) * 2016-10-27 2018-06-12 Apple Inc. Display screen or portion thereof with graphical user interface
USD817993S1 (en) 2016-10-27 2018-05-15 Apple Inc. Display screen or portion thereof with graphical user interface
US10838584B2 (en) * 2016-10-31 2020-11-17 Microsoft Technology Licensing, Llc Template based calendar events with graphic enrichment
US10031523B2 (en) 2016-11-07 2018-07-24 Nio Usa, Inc. Method and system for behavioral sharing in autonomous vehicles
US11321890B2 (en) * 2016-11-09 2022-05-03 Microsoft Technology Licensing, Llc User interface for generating expressive content
US10410064B2 (en) 2016-11-11 2019-09-10 Nio Usa, Inc. System for tracking and identifying vehicles and pedestrians
US10694357B2 (en) 2016-11-11 2020-06-23 Nio Usa, Inc. Using vehicle sensor data to monitor pedestrian health
US10708547B2 (en) 2016-11-11 2020-07-07 Nio Usa, Inc. Using vehicle sensor data to monitor environmental and geologic conditions
US10699305B2 (en) 2016-11-21 2020-06-30 Nio Usa, Inc. Smart refill assistant for electric vehicles
US10884502B2 (en) * 2016-11-23 2021-01-05 Google Llc Providing mediated social interactions
US11281993B2 (en) 2016-12-05 2022-03-22 Apple Inc. Model and ensemble compression for metric learning
US10249104B2 (en) 2016-12-06 2019-04-02 Nio Usa, Inc. Lease observation and event recording
GB201620802D0 (en) 2016-12-07 2017-01-18 Microsoft Technology Licensing Llc Messaging system
USD841667S1 (en) * 2016-12-19 2019-02-26 Coren Intellect LLC Display screen with employee survey graphical user interface
USD847825S1 (en) 2016-12-19 2019-05-07 Coren Intellect LLC Display screen with graphical user interface for employee profile
USD808400S1 (en) * 2016-12-19 2018-01-23 Coren Intellect LLC Display screen with employee survey graphical user interface
CN106843635B (zh) * 2016-12-20 2020-04-28 北京猎豹移动科技有限公司 信息展示方法、装置和电子设备
US10593346B2 (en) 2016-12-22 2020-03-17 Apple Inc. Rank-reduced token representation for automatic speech recognition
US11199965B2 (en) * 2016-12-29 2021-12-14 Verizon Patent And Licensing Inc. Virtual keyboard
US10452411B2 (en) 2016-12-30 2019-10-22 Riyad Mobeen System and method of using emojis for interactive and enhanced data matching capabilities
US11204787B2 (en) 2017-01-09 2021-12-21 Apple Inc. Application integration with a digital assistant
USD818037S1 (en) 2017-01-11 2018-05-15 Apple Inc. Type font
US10074223B2 (en) 2017-01-13 2018-09-11 Nio Usa, Inc. Secured vehicle for user use only
US10031521B1 (en) 2017-01-16 2018-07-24 Nio Usa, Inc. Method and system for using weather information in operation of autonomous vehicles
US9984572B1 (en) 2017-01-16 2018-05-29 Nio Usa, Inc. Method and system for sharing parking space availability among autonomous vehicles
US10471829B2 (en) 2017-01-16 2019-11-12 Nio Usa, Inc. Self-destruct zone and autonomous vehicle navigation
US10464530B2 (en) 2017-01-17 2019-11-05 Nio Usa, Inc. Voice biometric pre-purchase enrollment for autonomous vehicles
US10286915B2 (en) 2017-01-17 2019-05-14 Nio Usa, Inc. Machine learning for personalized driving
US10897469B2 (en) 2017-02-02 2021-01-19 Nio Usa, Inc. System and method for firewalls between vehicle networks
CN106998492A (zh) * 2017-03-02 2017-08-01 合网络技术（北京）有限公司 弹幕的显示控制方法及装置
TWI754694B (zh) * 2017-03-21 2022-02-11 香港商阿里巴巴集團服務有限公司 通訊方法及裝置
JP6360227B2 (ja) * 2017-04-13 2018-07-18 株式会社Ｌ ｉｓ Ｂ メッセージシステム
US11237635B2 (en) 2017-04-26 2022-02-01 Cognixion Nonverbal multi-input and feedback devices for user intended computer control and communication of text, graphics and audio
US11402909B2 (en) 2017-04-26 2022-08-02 Cognixion Brain computer interface for augmented reality
US10992795B2 (en) 2017-05-16 2021-04-27 Apple Inc. Methods and interfaces for home media control
US11431836B2 (en) 2017-05-02 2022-08-30 Apple Inc. Methods and interfaces for initiating media playback
DK201770383A1 (en) 2017-05-09 2018-12-14 Apple Inc. USER INTERFACE FOR CORRECTING RECOGNITION ERRORS
US10417266B2 (en) 2017-05-09 2019-09-17 Apple Inc. Context-aware ranking of intelligent response suggestions
DK201770439A1 (en) 2017-05-11 2018-12-13 Apple Inc. Offline personal assistant
US10395654B2 (en) 2017-05-11 2019-08-27 Apple Inc. Text normalization based on a data-driven learning network
US10726832B2 (en) 2017-05-11 2020-07-28 Apple Inc. Maintaining privacy of personal information
US11301477B2 (en) 2017-05-12 2022-04-12 Apple Inc. Feedback analysis of a digital assistant
DK201770428A1 (en) 2017-05-12 2019-02-18 Apple Inc. LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT
DK179496B1 (en) 2017-05-12 2019-01-15 Apple Inc. USER-SPECIFIC Acoustic Models
DK179745B1 (en) 2017-05-12 2019-05-01 Apple Inc. SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT
DK201770432A1 (en) 2017-05-15 2018-12-21 Apple Inc. Hierarchical belief states for digital assistants
DK201770431A1 (en) 2017-05-15 2018-12-20 Apple Inc. Optimizing dialogue policy decisions for digital assistants using implicit feedback
CN111343060B (zh) 2017-05-16 2022-02-11 苹果公司 用于家庭媒体控制的方法和界面
DK179560B1 (en) 2017-05-16 2019-02-18 Apple Inc. FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES
EP4366317A3 (en) * 2017-05-16 2024-08-07 Apple Inc. Emoji recording and sending
US12526361B2 (en) 2017-05-16 2026-01-13 Apple Inc. Methods for outputting an audio output in accordance with a user being within a range of a device
US10303715B2 (en) 2017-05-16 2019-05-28 Apple Inc. Intelligent automated assistant for media exploration
US10311144B2 (en) 2017-05-16 2019-06-04 Apple Inc. Emoji word sense disambiguation
US10403278B2 (en) 2017-05-16 2019-09-03 Apple Inc. Methods and systems for phonetic matching in digital assistant services
US20180336892A1 (en) 2017-05-16 2018-11-22 Apple Inc. Detecting a trigger of a digital assistant
US10657328B2 (en) 2017-06-02 2020-05-19 Apple Inc. Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling
USD841677S1 (en) 2017-06-04 2019-02-26 Apple Inc. Display screen or portion thereof with graphical user interface
US10318109B2 (en) * 2017-06-09 2019-06-11 Microsoft Technology Licensing, Llc Emoji suggester and adapted user interface
US10234302B2 (en) 2017-06-27 2019-03-19 Nio Usa, Inc. Adaptive route and motion planning based on learned external and internal vehicle environment
US10369974B2 (en) 2017-07-14 2019-08-06 Nio Usa, Inc. Control and coordination of driverless fuel replenishment for autonomous vehicles
US10710633B2 (en) 2017-07-14 2020-07-14 Nio Usa, Inc. Control of complex parking maneuvers and autonomous fuel replenishment of driverless vehicles
CN107463273B (zh) * 2017-07-14 2021-06-18 北京新美互通科技有限公司 一种表情符号输入方法和装置
CN107479784B (zh) 2017-07-31 2022-01-25 腾讯科技（深圳）有限公司 表情展示方法、装置及计算机可读存储介质
US10837790B2 (en) 2017-08-01 2020-11-17 Nio Usa, Inc. Productive and accident-free driving modes for a vehicle
KR102389678B1 (ko) 2017-09-09 2022-04-21 애플 인크. 생체측정 인증의 구현
KR102185854B1 (ko) 2017-09-09 2020-12-02 애플 인크. 생체측정 인증의 구현
USD873284S1 (en) 2017-09-09 2020-01-21 Apple Inc. Electronic device with graphical user interface
USD843442S1 (en) * 2017-09-10 2019-03-19 Apple Inc. Type font
USD861704S1 (en) 2017-09-11 2019-10-01 Apple Inc. Electronic device with graphical user interface
USD987669S1 (en) 2017-09-11 2023-05-30 Apple Inc. Electronic device with graphical user interface
US10445429B2 (en) 2017-09-21 2019-10-15 Apple Inc. Natural language understanding using vocabularies with compressed serialized tries
US10755051B2 (en) 2017-09-29 2020-08-25 Apple Inc. Rule-based natural language processing
US10635109B2 (en) 2017-10-17 2020-04-28 Nio Usa, Inc. Vehicle path-planner monitor and controller
US10593087B2 (en) * 2017-10-23 2020-03-17 Paypal, Inc. System and method for generating emoji mashups with machine learning
CN109725957A (zh) * 2017-10-27 2019-05-07 钉钉控股（开曼）有限公司 团体配置方法及装置、内容共享系统
US10935978B2 (en) 2017-10-30 2021-03-02 Nio Usa, Inc. Vehicle self-localization using particle filters and visual odometry
US10606274B2 (en) 2017-10-30 2020-03-31 Nio Usa, Inc. Visual place recognition based self-localization for autonomous vehicles
US10717412B2 (en) 2017-11-13 2020-07-21 Nio Usa, Inc. System and method for controlling a vehicle using secondary access methods
US10636424B2 (en) 2017-11-30 2020-04-28 Apple Inc. Multi-turn canned dialog
US10733982B2 (en) 2018-01-08 2020-08-04 Apple Inc. Multi-directional dialog
USD844700S1 (en) 2018-01-18 2019-04-02 Apple Inc. Type font
US10733375B2 (en) 2018-01-31 2020-08-04 Apple Inc. Knowledge-based framework for improving natural language understanding
USD846596S1 (en) * 2018-02-05 2019-04-23 Lindsey A. Berry Portion of a display panel with a computer icon image
US12307082B2 (en) 2018-02-21 2025-05-20 Apple Inc. Scrollable set of content items with locking feature
US10789959B2 (en) 2018-03-02 2020-09-29 Apple Inc. Training speaker recognition models for digital assistants
US10592604B2 (en) 2018-03-12 2020-03-17 Apple Inc. Inverse text normalization for automatic speech recognition
KR20190109705A (ko) 2018-03-18 2019-09-26 김시환 스마트폰 문자 서비스 내에서 컨텐츠 제공 시스템 및 방법
US10818288B2 (en) 2018-03-26 2020-10-27 Apple Inc. Natural assistant interaction
US10909331B2 (en) 2018-03-30 2021-02-02 Apple Inc. Implicit identification of translation payload with neural machine translation
US12033296B2 (en) 2018-05-07 2024-07-09 Apple Inc. Avatar creation user interface
DK179992B1 (en) 2018-05-07 2020-01-14 Apple Inc. Visning af brugergrænseflader associeret med fysiske aktiviteter
US12602142B2 (en) 2018-05-07 2026-04-14 Apple Inc. User interfaces for sharing contextually relevant media content
DK180171B1 (en) 2018-05-07 2020-07-14 Apple Inc USER INTERFACES FOR SHARING CONTEXTUALLY RELEVANT MEDIA CONTENT
KR102583214B1 (ko) * 2018-05-07 2023-09-27 애플 인크. 아바타 생성 사용자 인터페이스
US11145294B2 (en) 2018-05-07 2021-10-12 Apple Inc. Intelligent automated assistant for delivering content from user experiences
DK180130B1 (da) 2018-05-07 2020-06-02 Apple Inc. Multi-participant live communication user interface
US10928918B2 (en) 2018-05-07 2021-02-23 Apple Inc. Raise to speak
US10984780B2 (en) 2018-05-21 2021-04-20 Apple Inc. Global semantic word embeddings using bi-directional recurrent neural networks
US10369966B1 (en) 2018-05-23 2019-08-06 Nio Usa, Inc. Controlling access to a vehicle using wireless access devices
DK180639B1 (en) 2018-06-01 2021-11-04 Apple Inc DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT
DK179822B1 (da) 2018-06-01 2019-07-12 Apple Inc. Voice interaction at a primary device to access call functionality of a companion device
US10892996B2 (en) 2018-06-01 2021-01-12 Apple Inc. Variable latency device coordination
DK201870355A1 (en) 2018-06-01 2019-12-16 Apple Inc. VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS
US11386266B2 (en) 2018-06-01 2022-07-12 Apple Inc. Text correction
US11170085B2 (en) 2018-06-03 2021-11-09 Apple Inc. Implementation of biometric authentication
USD880495S1 (en) 2018-06-03 2020-04-07 Apple Inc. Electronic device with graphical user interface
US10504518B1 (en) 2018-06-03 2019-12-10 Apple Inc. Accelerated task performance
USD846633S1 (en) 2018-06-03 2019-04-23 Apple Inc. Type font
AU2019100574B4 (en) 2018-06-03 2020-02-20 Apple Inc. Setup procedures for an electronic device
US10725506B2 (en) * 2018-08-21 2020-07-28 Dell Products, L.P. Context-aware user interface (UI) for multi-form factor information handling systems (IHSs)
CN109379270A (zh) * 2018-08-27 2019-02-22 北京达佳互联信息技术有限公司 表情信息处理方法和装置、移动终端、服务器及存储介质
US11010561B2 (en) 2018-09-27 2021-05-18 Apple Inc. Sentiment prediction from textual data
US11170166B2 (en) 2018-09-28 2021-11-09 Apple Inc. Neural typographical error modeling via generative adversarial networks
US10860096B2 (en) 2018-09-28 2020-12-08 Apple Inc. Device control using gaze information
US10839159B2 (en) 2018-09-28 2020-11-17 Apple Inc. Named entity normalization in a spoken dialog system
US11462215B2 (en) 2018-09-28 2022-10-04 Apple Inc. Multi-modal inputs for voice commands
US11100349B2 (en) 2018-09-28 2021-08-24 Apple Inc. Audio assisted enrollment
US10764224B2 (en) * 2018-10-05 2020-09-01 International Business Machines Corporation Conveying electronic messages according to representation of emotion
JP1662143S (ja) * 2018-10-13 2020-06-22
US11475898B2 (en) 2018-10-26 2022-10-18 Apple Inc. Low-latency multi-speaker speech recognition
US10547970B1 (en) 2018-12-19 2020-01-28 Snap Inc. Mapping discovery system
USD938495S1 (en) * 2018-12-21 2021-12-14 Waymo Llc Display screen or portion thereof with an icon image
USD937899S1 (en) * 2018-12-21 2021-12-07 Waymo Llc Display screen or portion thereof with an icon image
USD937898S1 (en) * 2018-12-21 2021-12-07 Waymo Llc Display screen or portion thereof with an icon image
USD937900S1 (en) * 2018-12-21 2021-12-07 Waymo Llc Display screen or portion thereof with an icon image
CN109710086A (zh) * 2018-12-28 2019-05-03 北京微播视界科技有限公司 表情面板的显示方法、装置、电子设备及可读存储介质
US11638059B2 (en) 2019-01-04 2023-04-25 Apple Inc. Content playback on multiple devices
US11107261B2 (en) 2019-01-18 2021-08-31 Apple Inc. Virtual avatar animation based on facial feature movement
CN109871165B (zh) * 2019-02-01 2022-03-01 天津字节跳动科技有限公司 表情回应的显示方法、装置、终端设备和服务器
USD902221S1 (en) 2019-02-01 2020-11-17 Apple Inc. Electronic device with animated graphical user interface
USD900925S1 (en) 2019-02-01 2020-11-03 Apple Inc. Type font and electronic device with graphical user interface
US12008217B2 (en) 2019-02-01 2024-06-11 Tianjin Bytedance Technology Co., Ltd. Method and apparatus for displaying emoji reply, terminal device, and server
USD900871S1 (en) 2019-02-04 2020-11-03 Apple Inc. Electronic device with animated graphical user interface
US20220121817A1 (en) * 2019-02-14 2022-04-21 Sony Group Corporation Information processing device, information processing method, and information processing program
CA3131489A1 (en) 2019-02-27 2020-09-03 Louisiana-Pacific Corporation Fire-resistant manufactured-wood based siding
US11348573B2 (en) 2019-03-18 2022-05-31 Apple Inc. Multimodality in digital assistant systems
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
US12008232B2 (en) 2019-03-24 2024-06-11 Apple Inc. User interfaces for viewing and accessing content on an electronic device
WO2020198238A1 (en) 2019-03-24 2020-10-01 Apple Inc. User interfaces for a media browsing application
DK201970531A1 (en) 2019-05-06 2021-07-09 Apple Inc Avatar integration with multiple applications
US11307752B2 (en) 2019-05-06 2022-04-19 Apple Inc. User configurable task triggers
DK201970509A1 (en) 2019-05-06 2021-01-15 Apple Inc Spoken notifications
US11475884B2 (en) 2019-05-06 2022-10-18 Apple Inc. Reducing digital assistant latency when a language is incorrectly determined
KR102393717B1 (ko) 2019-05-06 2022-05-03 애플 인크. 전자 디바이스의 제한된 동작
US11423908B2 (en) 2019-05-06 2022-08-23 Apple Inc. Interpreting spoken requests
EP3977245A1 (en) 2019-05-31 2022-04-06 Apple Inc. User interfaces for a podcast browsing and playback application
US11496600B2 (en) 2019-05-31 2022-11-08 Apple Inc. Remote execution of machine-learned models
DK201970533A1 (en) 2019-05-31 2021-02-15 Apple Inc Methods and user interfaces for sharing audio
DK201970510A1 (en) 2019-05-31 2021-02-11 Apple Inc Voice identification in digital assistant systems
DK180129B1 (en) 2019-05-31 2020-06-02 Apple Inc. User activity shortcut suggestions
KR102436985B1 (ko) 2019-05-31 2022-08-29 애플 인크. 오디오 미디어 제어를 위한 사용자 인터페이스
US11010121B2 (en) 2019-05-31 2021-05-18 Apple Inc. User interfaces for audio media control
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
US11289073B2 (en) 2019-05-31 2022-03-29 Apple Inc. Device text to speech
US11379113B2 (en) * 2019-06-01 2022-07-05 Apple Inc. Techniques for selecting text
US11194467B2 (en) 2019-06-01 2021-12-07 Apple Inc. Keyboard management user interfaces
US11074408B2 (en) 2019-06-01 2021-07-27 Apple Inc. Mail application features
US11481094B2 (en) 2019-06-01 2022-10-25 Apple Inc. User interfaces for location-related communications
US11477609B2 (en) 2019-06-01 2022-10-18 Apple Inc. User interfaces for location-related communications
US11360641B2 (en) 2019-06-01 2022-06-14 Apple Inc. Increasing the relevance of new available information
US10946294B1 (en) * 2019-08-30 2021-03-16 Sony Interactive Entertainment Inc. Summarizing notifications on a user display
CN110750198A (zh) * 2019-09-23 2020-02-04 维沃移动通信有限公司 一种表情发送方法及移动终端
US11488406B2 (en) 2019-09-25 2022-11-01 Apple Inc. Text detection using global geometry estimators
KR102734876B1 (ko) 2019-09-27 2024-11-28 애플 인크. 그래픽 객체들을 맞춤화하기 위한 사용자 인터페이스들
US11252274B2 (en) * 2019-09-30 2022-02-15 Snap Inc. Messaging application sticker extensions
USD917540S1 (en) * 2019-09-30 2021-04-27 Apple Inc. Electronic device with animated graphical user interface
CN110928429B (zh) * 2019-11-22 2020-12-22 北京海泰方圆科技股份有限公司 一种信息输入方法、装置、介质和设备
JP7159396B2 (ja) * 2019-12-12 2022-10-24 キヤノン株式会社 画像形成装置、画像処理装置の制御方法及びプログラム
CN112988030B (zh) * 2019-12-13 2022-05-17 深圳市万普拉斯科技有限公司 终端控制方法、装置、终端和存储介质
KR102324200B1 (ko) * 2019-12-19 2021-11-08 주식회사 카카오 인스턴트 메시징 서비스에서 이모티콘을 제공하는 방법, 이를 구현한 서버, 사용자 단말 및 어플리케이션
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
US11455078B1 (en) 2020-03-31 2022-09-27 Snap Inc. Spatial navigation and creation interface
CN112306224A (zh) * 2020-04-30 2021-02-02 北京字节跳动网络技术有限公司 人机交互方法、装置和电子设备
US11921998B2 (en) 2020-05-11 2024-03-05 Apple Inc. Editing features of an avatar
US11209964B1 (en) * 2020-06-05 2021-12-28 SlackTechnologies, LLC System and method for reacting to messages
AU2021290132C1 (en) 2020-06-08 2024-04-18 Apple Inc. Presenting avatars in three-dimensional environments
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11609640B2 (en) * 2020-06-21 2023-03-21 Apple Inc. Emoji user interfaces
US12294557B2 (en) * 2020-07-10 2025-05-06 Salesforce, Inc. Sharing of collaborative documents with users via instant messaging
KR20220012599A (ko) * 2020-07-23 2022-02-04 삼성전자주식회사 전자 장치에서 키패드를 이용한 컨텐츠 검색을 제공하는 방법 및 장치
US12511021B2 (en) 2020-09-14 2025-12-30 Apple Inc. Device management user interface
US11392291B2 (en) 2020-09-25 2022-07-19 Apple Inc. Methods and interfaces for media control with dynamic feedback
USD964391S1 (en) * 2020-09-28 2022-09-20 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD965013S1 (en) * 2020-09-28 2022-09-27 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD952661S1 (en) 2020-10-12 2022-05-24 Apple Inc. Display screen or portion thereof with animated graphical user interface
US12405717B2 (en) 2020-10-26 2025-09-02 Apple Inc. Methods and user interfaces for handling user requests
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
USD976959S1 (en) * 2020-12-21 2023-01-31 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD977523S1 (en) * 2020-12-21 2023-02-07 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
US12229342B2 (en) 2020-12-22 2025-02-18 Snap Inc. Gesture control on an eyewear device
US11782577B2 (en) 2020-12-22 2023-10-10 Snap Inc. Media content player on an eyewear device
KR102607377B1 (ko) 2020-12-22 2023-11-27 주식회사 카카오 컨텐츠 추천 방법 및 사용자 단말
US11797162B2 (en) 2020-12-22 2023-10-24 Snap Inc. 3D painting on an eyewear device
EP4268066A1 (en) 2020-12-22 2023-11-01 Snap Inc. Media content player on an eyewear device
US12105283B2 (en) * 2020-12-22 2024-10-01 Snap Inc. Conversation interface on an eyewear device
EP4264460B1 (en) 2021-01-25 2025-12-24 Apple Inc. Implementation of biometric authentication
KR102619340B1 (ko) * 2021-01-28 2023-12-28 주식회사 카카오 사용자에게 컨텐츠를 제공하는 방법 및 사용자 단말
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
US12210603B2 (en) 2021-03-04 2025-01-28 Apple Inc. User interface for enrolling a biometric feature
US11928167B2 (en) * 2021-03-31 2024-03-12 Snap Inc. Determining classification recommendations for user content
KR20220143433A (ko) * 2021-04-16 2022-10-25 삼성전자주식회사 전자 장치 및 전자 장치에서 외부 전자 장치를 이용하여 정보를 입력하는 방법
US11888797B2 (en) * 2021-04-20 2024-01-30 Snap Inc. Emoji-first messaging
US11531406B2 (en) 2021-04-20 2022-12-20 Snap Inc. Personalized emoji dictionary
US11593548B2 (en) 2021-04-20 2023-02-28 Snap Inc. Client device processing received emoji-first messages
US12216754B2 (en) 2021-05-10 2025-02-04 Apple Inc. User interfaces for authenticating to perform secure operations
WO2022245669A1 (en) 2021-05-15 2022-11-24 Apple Inc. User interfaces for group workouts
US12449961B2 (en) 2021-05-18 2025-10-21 Apple Inc. Adaptive video conference user interfaces
EP4323857B1 (en) 2021-05-21 2025-04-23 Apple Inc. Avatar sticker editor user interfaces
US11714536B2 (en) 2021-05-21 2023-08-01 Apple Inc. Avatar sticker editor user interfaces
EP4334811B1 (en) 2021-06-06 2025-11-19 Apple Inc. User interfaces for audio routing
US11847378B2 (en) 2021-06-06 2023-12-19 Apple Inc. User interfaces for audio routing
KR102652719B1 (ko) * 2021-06-25 2024-03-28 주식회사 카카오 커스텀 키워드를 이용하여 이모티콘을 표시하는 방법 및 사용자 단말
US12380910B2 (en) * 2021-06-30 2025-08-05 Ringcentral, Inc. Systems and methods for virtual meeting speaker separation
USD1051928S1 (en) * 2021-07-08 2024-11-19 Express Scripts Strategic Development, Inc. Display screen with icons
USD1118691S1 (en) * 2021-08-30 2026-03-17 Samsung Electronics Co., Ltd. Display screen or portion thereof with transitional graphical user interface
USD1017618S1 (en) * 2021-10-13 2024-03-12 Zoom Video Communications, Inc. Display screen or portion thereof with graphical user interface
US11841898B2 (en) * 2021-12-01 2023-12-12 Whitestar Communications, Inc. Coherent pictograph organizer based on structuring pattern markers for hierarchal pictograph presentation
USD1074727S1 (en) * 2021-12-13 2025-05-13 Open Workspace, LLC Display screen or portion thereof with graphical user interface
USD1055090S1 (en) 2021-12-13 2024-12-24 Open Workspace, LLC Display screen or portion thereof with transitional graphical user interface
US12579758B2 (en) 2022-02-08 2026-03-17 Apple Inc. Devices, methods, and graphical user interfaces for interacting with virtual objects using hand gestures
US12267623B2 (en) 2022-02-10 2025-04-01 Apple Inc. Camera-less representation of users during communication sessions
US12563299B2 (en) 2022-04-04 2026-02-24 Apple Inc. User interfaces for camera sharing
CN114780190B (zh) * 2022-04-13 2023-12-22 脸萌有限公司 消息处理方法、装置、电子设备及存储介质
US12386428B2 (en) 2022-05-17 2025-08-12 Apple Inc. User interfaces for device controls
US12197721B2 (en) * 2022-05-20 2025-01-14 Google Llc Predictive input interface having improved robustness for processing low precision inputs
US12236512B2 (en) 2022-08-23 2025-02-25 Snap Inc. Avatar call on an eyewear device
US12375435B2 (en) * 2022-09-02 2025-07-29 Baydin, Inc. Systems and methods for incorporating dynamic reactions into e-mail communications
US12578200B2 (en) 2022-09-06 2026-03-17 Apple Inc. Navigational user interfaces
US12615491B2 (en) 2022-09-06 2026-04-28 Apple Inc. Interfaces for device interactions
US12578837B2 (en) 2022-09-23 2026-03-17 Apple Inc. User interfaces for managing sharing of content in three-dimensional environments
US12417596B2 (en) 2022-09-23 2025-09-16 Apple Inc. User interfaces for managing live communication sessions
USD1101764S1 (en) * 2022-12-05 2025-11-11 Rapyuta Robotics Co. Ltd. Display screen with transitional graphical user interface
US12390727B2 (en) * 2023-01-04 2025-08-19 Dell Products L.P. Systems and methods for handheld controller character entry
US11825004B1 (en) * 2023-01-04 2023-11-21 Mattel, Inc. Communication device for children
US12608981B2 (en) 2023-05-23 2026-04-21 Apple Inc. Devices, methods, and graphical user interfaces for biometric feature enrollment
US12517626B2 (en) * 2023-06-13 2026-01-06 Snap Inc. Sticker search icon with multiple states
US12579204B1 (en) 2023-06-13 2026-03-17 Snap Inc. Automatic evaluation of sticker recommendations
US12513098B2 (en) 2023-06-13 2025-12-30 Snap Inc. Sticker search icon providing dynamic previews
USD1086205S1 (en) * 2023-09-20 2025-07-29 Google Llc Display screen or portion thereof with transitional graphical user interface
US20250238129A1 (en) 2024-01-18 2025-07-24 Apple Inc. User interfaces integrating hardware buttons
US12468883B2 (en) 2024-03-22 2025-11-11 Apple Inc. Generating or modifying text using a digital assistant and/or language model
KR102670162B1 (ko) * 2024-04-04 2024-05-27 김봉근 문자 입력 장치 및 방법

Family Cites Families (374)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH01172997A (ja) 1987-12-23 1989-07-07 Internatl Business Mach Corp <Ibm> メニユー表示を図形的にカストマイズする方法
US5169527A (en) * 1988-04-07 1992-12-08 Roediger Pittsburgh, Inc. Liquid extracting device and associated method
US5146556A (en) 1988-10-11 1992-09-08 Next Computer, Inc. System and method for managing graphic images
US5196838A (en) 1990-12-28 1993-03-23 Apple Computer, Inc. Intelligent scrolling
FR2693810B1 (fr) 1991-06-03 1997-01-10 Apple Computer Systemes d'interfaces d'utilisateurs a acces direct a une zone secondaire d'affichage.
US5592675A (en) 1992-01-08 1997-01-07 Hitachi, Ltd. Computer controlled method and system capable of preserving information representing plural work states and recovering the work states
JP3248981B2 (ja) 1992-06-02 2002-01-21 松下電器産業株式会社 計算機
US5414805A (en) 1992-11-06 1995-05-09 International Business Machines Corporation Visual display transition effects using sorted table of display cells
US5745910A (en) 1993-05-10 1998-04-28 Apple Computer, Inc. Frame structure which provides an interface between parts of a compound document
US5812862A (en) 1993-05-10 1998-09-22 Apple Computer, Inc. Computer-human interface system for compound documents
EP0626635B1 (en) 1993-05-24 2003-03-05 Sun Microsystems, Inc. Improved graphical user interface with method for interfacing to remote devices
US5490245A (en) 1993-08-12 1996-02-06 Ast Research, Inc. Component-based icon construction and customization system
US5825357A (en) 1993-12-13 1998-10-20 Microsoft Corporation Continuously accessible computer system interface
US5642490A (en) 1994-06-24 1997-06-24 International Business Machines Corporation Providing icon placement alternatives for dynamically added container records
DE69525308T2 (de) 1994-11-15 2002-07-04 Microsoft Corp Hinausgleitender Schnittstellenbalken
EP0717344B1 (en) 1994-12-13 2001-10-31 Microsoft Corporation Taskbar with start menu
US5760773A (en) 1995-01-06 1998-06-02 Microsoft Corporation Methods and apparatus for interacting with data objects using action handles
US5644739A (en) 1995-01-27 1997-07-01 Microsoft Corporation Method and system for adding buttons to a toolbar
US5611060A (en) 1995-02-22 1997-03-11 Microsoft Corporation Auto-scrolling during a drag and drop operation
US5914717A (en) 1995-07-21 1999-06-22 Microsoft Methods and system for providing fly out menus
US5877765A (en) 1995-09-11 1999-03-02 Microsoft Corporation Method and system for displaying internet shortcut icons on the desktop
US5796401A (en) 1996-08-09 1998-08-18 Winer; Peter W. System for designing dynamic layouts adaptable to various display screen sizes and resolutions
US6097431A (en) 1996-09-04 2000-08-01 Flashpoint Technology, Inc. Method and system for reviewing and navigating among images on an image capture unit
US5870683A (en) 1996-09-18 1999-02-09 Nokia Mobile Phones Limited Mobile station having method and apparatus for displaying user-selectable animation sequence
JP2008123553A (ja) * 1996-10-16 2008-05-29 Sharp Corp 情報機器
US6144863A (en) 1996-11-26 2000-11-07 U.S. Philips Corporation Electronic device with screen comprising a menu which can be customized by a user
US6710788B1 (en) 1996-12-03 2004-03-23 Texas Instruments Incorporated Graphical user interface
US6256008B1 (en) 1996-12-10 2001-07-03 Motorola Computer screen saver with wireless messaging capability and method therefor
US5923327A (en) 1997-04-23 1999-07-13 Bell-Northern Research Ltd. Scrolling with automatic compression and expansion
US5934707A (en) 1997-05-30 1999-08-10 Johnson; Joyce W. Message calendar
US5995119A (en) 1997-06-06 1999-11-30 At&T Corp. Method for generating photo-realistic animated characters
US6433801B1 (en) 1997-09-26 2002-08-13 Ericsson Inc. Method and apparatus for using a touch screen display on a portable intelligent communications device
FI109733B (fi) 1997-11-05 2002-09-30 Nokia Corp Viestin sisällön hyödyntäminen
JPH11154899A (ja) * 1997-11-19 1999-06-08 Toshiba Corp 通信端末装置
US6133914A (en) 1998-01-07 2000-10-17 Rogers; David W. Interactive graphical user interface
US6072486A (en) 1998-01-13 2000-06-06 Microsoft Corporation System and method for creating and customizing a deskbar
US8479122B2 (en) 2004-07-30 2013-07-02 Apple Inc. Gestures for touch sensitive input devices
KR100595926B1 (ko) 1998-01-26 2006-07-05 웨인 웨스터만 수동 입력 통합 방법 및 장치
US7840912B2 (en) 2006-01-30 2010-11-23 Apple Inc. Multi-touch gesture dictionary
US6466213B2 (en) 1998-02-13 2002-10-15 Xerox Corporation Method and apparatus for creating personal autonomous avatars
US6275935B1 (en) 1998-04-17 2001-08-14 Thingworld.Com, Llc Systems and methods for locking interactive objects
US6145083A (en) 1998-04-23 2000-11-07 Siemens Information And Communication Networks, Inc. Methods and system for providing data and telephony security
JP2000003316A (ja) * 1998-06-15 2000-01-07 Casio Comput Co Ltd メール装置及びメール処理プログラムを記録した記録媒体
US6229542B1 (en) 1998-07-10 2001-05-08 Intel Corporation Method and apparatus for managing windows in three dimensions in a two dimensional windowing system
JP2000105772A (ja) 1998-07-28 2000-04-11 Sharp Corp 情報管理装置
US20010015719A1 (en) 1998-08-04 2001-08-23 U.S. Philips Corporation Remote control has animated gui
US6049336A (en) 1998-08-12 2000-04-11 Sony Corporation Transition animation for menu structure
US6278454B1 (en) 1998-09-24 2001-08-21 Ericsson Inc. Call progress graphical user interface
US6195094B1 (en) 1998-09-29 2001-02-27 Netscape Communications Corporation Window splitter bar system
JP2000163193A (ja) 1998-11-25 2000-06-16 Seiko Epson Corp 携帯情報機器及び情報記憶媒体
US6353451B1 (en) 1998-12-16 2002-03-05 Intel Corporation Method of providing aerial perspective in a graphical user interface
US6628309B1 (en) 1999-02-05 2003-09-30 International Business Machines Corporation Workspace drag and drop
JP2000330526A (ja) 1999-03-12 2000-11-30 Minolta Co Ltd 液晶表示装置、携帯電子機器及び駆動方法
JP3726824B2 (ja) * 1999-03-12 2005-12-14 コニカミノルタホールディングス株式会社 液晶表示装置及び表示システム
US6545669B1 (en) 1999-03-26 2003-04-08 Husam Kinawi Object-drag continuity between discontinuous touch-screens
US7030863B2 (en) * 2000-05-26 2006-04-18 America Online, Incorporated Virtual keyboard system with automatic correction
US6317140B1 (en) 1999-08-02 2001-11-13 Hewlett-Packard Company Displaying interactive bitmap images within a display space
US6763388B1 (en) 1999-08-10 2004-07-13 Akamai Technologies, Inc. Method and apparatus for selecting and viewing portions of web pages
US6781575B1 (en) 2000-09-21 2004-08-24 Handspring, Inc. Method and apparatus for organizing addressing elements
US20020173721A1 (en) 1999-08-20 2002-11-21 Novasonics, Inc. User interface for handheld imaging devices
GB9920327D0 (en) 1999-08-28 1999-11-03 Koninkl Philips Electronics Nv Menu display for a graphical user interface
US6976210B1 (en) 1999-08-31 2005-12-13 Lucent Technologies Inc. Method and apparatus for web-site-independent personalization from multiple sites having user-determined extraction functionality
US7134095B1 (en) 1999-10-20 2006-11-07 Gateway, Inc. Simulated three-dimensional navigational menu system
US7369130B2 (en) 1999-10-29 2008-05-06 Hitachi Kokusai Electric Inc. Method and apparatus for editing image data, and computer program product of editing image data
US6820111B1 (en) 1999-12-07 2004-11-16 Microsoft Corporation Computer user interface architecture that saves a user's non-linear navigation history and intelligently maintains that history
US6978127B1 (en) 1999-12-16 2005-12-20 Koninklijke Philips Electronics N.V. Hand-ear user interface for hand-held device
KR20010056965A (ko) 1999-12-17 2001-07-04 박희완 부분 이미지 합성에 의한 인물 캐릭터 생성 방법
US7434177B1 (en) 1999-12-20 2008-10-07 Apple Inc. User interface for providing consolidation and access
US6396520B1 (en) 2000-01-05 2002-05-28 Apple Computer, Inc. Method of transition between window states
US7362331B2 (en) 2000-01-05 2008-04-22 Apple Inc. Time-based, non-constant translation of user interface objects between states
JP2003531418A (ja) 2000-02-02 2003-10-21 イージーログイン・ドット・コム・インコーポレイテッド ウェブページに含まれるエレメントのクリッピング及び操作
GB2365676B (en) 2000-02-18 2004-06-23 Sensei Ltd Mobile telephone with improved man-machine interface
JP2001265481A (ja) 2000-03-21 2001-09-28 Nec Corp ページ情報表示方法及び装置並びにページ情報表示用プログラムを記憶した記憶媒体
JP3763389B2 (ja) 2000-03-24 2006-04-05 シャープ株式会社 画像データ編集操作方法および情報処理装置
US20010048448A1 (en) 2000-04-06 2001-12-06 Raiz Gregory L. Focus state themeing
EP1143334A3 (en) 2000-04-06 2005-03-30 Microsoft Corporation Theme aware graphical user interface
US6545682B1 (en) 2000-05-24 2003-04-08 There, Inc. Method and apparatus for creating and customizing avatars using genetic paradigm
JP3665535B2 (ja) * 2000-05-26 2005-06-29 株式会社ケンウッド 移動通信端末装置、移動通信端末装置のロック制御方法及び記録媒体
US7624356B1 (en) 2000-06-21 2009-11-24 Microsoft Corporation Task-sensitive methods and systems for displaying command sets
AU2001269891A1 (en) 2000-07-07 2002-01-21 Openwave Systems Inc. Graphical user interface features of a browser in a hand-held wireless communication device
WO2002007452A2 (en) 2000-07-18 2002-01-24 Incredimail Ltd. System and method for visual feedback of command execution in electronic mail systems
US20020104096A1 (en) 2000-07-19 2002-08-01 Cramer Allen Brett System and methods for providing web-based multimedia presentations
CA2349649A1 (en) 2000-07-31 2002-01-31 International Business Machines Corporation Switching between virtual desktops
US6704024B2 (en) 2000-08-07 2004-03-09 Zframe, Inc. Visual content browsing using rasterized representations
JP2002062966A (ja) 2000-08-21 2002-02-28 Seiko Epson Corp 情報処理装置およびその制御方法
US20020054090A1 (en) 2000-09-01 2002-05-09 Silva Juliana Freire Method and apparatus for creating and providing personalized access to web content and services from terminals having diverse capabilities
US7003308B1 (en) * 2000-09-12 2006-02-21 At&T Corp. Method and system for handwritten electronic messaging
US7039676B1 (en) * 2000-10-31 2006-05-02 International Business Machines Corporation Using video image analysis to automatically transmit gestures over a network in a chat or instant messaging session
US6990452B1 (en) 2000-11-03 2006-01-24 At&T Corp. Method for sending multi-media messages using emoticons
AU2002216725A1 (en) 2000-11-03 2002-05-21 Outlet Group, Llc Method and system of an integrated business topography and virtual 3d network portal
AU2002226886A1 (en) 2000-11-09 2002-05-21 Change Tools, Inc. A user definable interface system, method and computer program product
US6590568B1 (en) 2000-11-20 2003-07-08 Nokia Corporation Touch screen drag and drop input technique
KR100377936B1 (ko) 2000-12-16 2003-03-29 삼성전자주식회사 이동통신 단말기의 감정 아이콘 입력방법
US7139982B2 (en) 2000-12-21 2006-11-21 Xerox Corporation Navigation methods, systems, and computer program products for virtual three-dimensional books
US6727916B1 (en) 2000-12-21 2004-04-27 Sprint Spectrum, L.P. Method and system for assisting a user to engage in a microbrowser-based interactive chat session
FR2819675B1 (fr) 2001-01-17 2003-05-16 Sagem Telephone portable a navigateur de capture et de rappel d'adresses informatiques
US6677932B1 (en) 2001-01-28 2004-01-13 Finger Works, Inc. System and method for recognizing touch typing under limited tactile feedback conditions
US6570557B1 (en) 2001-02-10 2003-05-27 Finger Works, Inc. Multi-touch system and method for emulating modifier keys via fingertip chords
US7730401B2 (en) 2001-05-16 2010-06-01 Synaptics Incorporated Touch screen with user interface enhancement
US20050024341A1 (en) 2001-05-16 2005-02-03 Synaptics, Inc. Touch screen with user interface enhancement
US7010758B2 (en) 2001-05-21 2006-03-07 Leap Wireless International, Inc. Dynamically defined context sensitive jump menu
US7434246B2 (en) * 2001-06-08 2008-10-07 Digeo, Inc. Systems and methods for automatic personalizing of channel favorites in a set top box
US8063923B2 (en) 2001-07-13 2011-11-22 Universal Electronics Inc. System and method for updating information in an electronic portable device
US20050134578A1 (en) 2001-07-13 2005-06-23 Universal Electronics Inc. System and methods for interacting with a control environment
US6819340B2 (en) 2001-07-23 2004-11-16 Paul E. Burke Adding a shortcut to a web site
US6987991B2 (en) 2001-08-17 2006-01-17 Wildseed Ltd. Emoticon input method and apparatus
US7221933B2 (en) 2001-10-22 2007-05-22 Kyocera Wireless Corp. Messaging system for mobile communication
JP2003162687A (ja) * 2001-11-28 2003-06-06 Toshiba Corp 手書き文字入力装置、手書き文字認識プログラム
US7310636B2 (en) 2002-01-15 2007-12-18 International Business Machines Corporation Shortcut enabled, context aware information management
US20030154446A1 (en) 2002-01-28 2003-08-14 Constant Nicholas Robert Character-based, graphically expressive mobile messaging system
JP2003248538A (ja) 2002-02-25 2003-09-05 Gakken Co Ltd プログラム及びそれを用いた情報処理装置、情報処理方法
US8972890B2 (en) 2002-03-06 2015-03-03 Apple Inc. Aminated menu bar
US7607102B2 (en) 2002-03-14 2009-10-20 Apple Inc. Dynamically changing appearances for user interface elements during drag-and-drop operations
US20030184552A1 (en) 2002-03-26 2003-10-02 Sanja Chadha Apparatus and method for graphics display system for markup languages
US6931601B2 (en) 2002-04-03 2005-08-16 Microsoft Corporation Noisy operating system user interface
US7689673B2 (en) 2002-04-23 2010-03-30 Canon Kabushiki Kaisha Remote creation of printer instances on a workstation
US6629793B1 (en) 2002-04-26 2003-10-07 Westie Intellectual Properties Limited Partnership Emoticon keyboard
US7810038B2 (en) 2002-05-03 2010-10-05 International Business Machines Corporation Method for modifying a GUI for an application
JP2003339079A (ja) 2002-05-20 2003-11-28 Ntt Docomo Inc 移動通信端末、プログラム及び記録媒体
FI20021162A0 (fi) 2002-06-14 2002-06-14 Nokia Corp Elektroninen laite ja menetelmä sen näppäimistön hallintaan
JP2004023651A (ja) 2002-06-19 2004-01-22 Matsushita Electric Ind Co Ltd 電話機
JP2004038310A (ja) * 2002-06-28 2004-02-05 Kyocera Corp 携帯情報端末装置及びこれに用いられる制御プログラム
US20040164973A1 (en) 2002-06-28 2004-08-26 Kyocera Corporation Personal digital assistant and program for controlling used for the same
US11275405B2 (en) 2005-03-04 2022-03-15 Apple Inc. Multi-functional hand-held device
WO2008156437A1 (en) 2006-04-10 2008-12-24 Avaworks Incorporated Do-it-yourself photo realistic talking head creation system and method
US7027054B1 (en) 2002-08-14 2006-04-11 Avaworks, Incorporated Do-it-yourself photo realistic talking head creation system and method
US6919892B1 (en) 2002-08-14 2005-07-19 Avaworks, Incorporated Photo realistic talking head creation system and method
US20040041849A1 (en) 2002-08-30 2004-03-04 Von Mock Display screen saver with two way messaging capability and method therefor
GB0220748D0 (en) 2002-09-06 2002-10-16 Saw You Com Ltd Improved communication using avatars
JP2004132741A (ja) 2002-10-08 2004-04-30 Kenwood Corp ナビゲーション装置
US20040085360A1 (en) * 2002-10-31 2004-05-06 Hallmark Interactive, Llc Icon-based graphical user interface for text messaging
US20040093582A1 (en) 2002-11-01 2004-05-13 Segura Tim E. Method for allowing a computer to be used as an information kiosk while locked
JP2004159180A (ja) * 2002-11-07 2004-06-03 Toshiba Corp 電子メール送受信システム
US7266776B2 (en) 2002-11-25 2007-09-04 Aol Llc Facilitating communications between computer users across a network
JP2004227393A (ja) 2003-01-24 2004-08-12 Sony Corp アイコン描画システム、アイコン描画方法及び電子機器装置
US20040155909A1 (en) 2003-02-07 2004-08-12 Sun Microsystems, Inc. Scroll tray mechanism for cellular telephone
US7185285B2 (en) * 2003-02-19 2007-02-27 Microsoft Corporation User interface and content enhancements for real-time communication
JP4074530B2 (ja) 2003-02-28 2008-04-09 京セラ株式会社 携帯情報端末装置
US7231229B1 (en) 2003-03-16 2007-06-12 Palm, Inc. Communication device interface
US20040215719A1 (en) 2003-04-09 2004-10-28 Altshuler Dennis Wayne Method and system for designing, editing and publishing web page content in a live internet session
US9607092B2 (en) 2003-05-20 2017-03-28 Excalibur Ip, Llc Mapping method and system
JP2005004396A (ja) 2003-06-11 2005-01-06 Sony Corp 情報表示方法及び情報表示装置、並びにコンピュータ・プログラム
US20060242607A1 (en) 2003-06-13 2006-10-26 University Of Lancaster User interface
EP1639434A2 (en) 2003-06-27 2006-03-29 Softscope LLC Virtual desktop - meta-organization control system
KR100508123B1 (ko) * 2003-07-04 2005-08-10 엘지전자 주식회사 기호 입력방법 및 장치
US20050066279A1 (en) 2003-07-23 2005-03-24 Lebarton Jeffrey Stop motion capture tool
US20050026644A1 (en) 2003-07-28 2005-02-03 Inventec Appliances Corp. Cellular phone for specific person
US7164410B2 (en) 2003-07-28 2007-01-16 Sig G. Kupka Manipulating an on-screen object using zones surrounding the object
US6973299B2 (en) 2003-08-01 2005-12-06 Microsoft Corporation Unified contact list
WO2005020129A2 (en) 2003-08-19 2005-03-03 Bandalong Entertainment Customizable avatar and differentiated instant messaging environment
US7325204B2 (en) 2003-08-29 2008-01-29 Yahoo! Inc. Slideout windows
KR20050022117A (ko) 2003-08-29 2005-03-07 엘지전자 주식회사 이동통신단말기의 절전장치 및 방법
US7411575B2 (en) 2003-09-16 2008-08-12 Smart Technologies Ulc Gesture recognition method and touch system incorporating the same
JP2005092441A (ja) * 2003-09-16 2005-04-07 Aizu:Kk 文字入力方法
JP2005115896A (ja) 2003-10-10 2005-04-28 Nec Corp 通信装置及び通信方法
US8527896B2 (en) 2003-10-23 2013-09-03 Microsoft Corporation User interface menu with hovering icons
FI116641B (fi) 2003-10-24 2006-01-13 Nokia Corp Menetelmä elektronisessa laitteessa olevan pikavalinnan muuttamiseksi, laitteen näyttöyksikkö sekä elektroninen laite
US20050097089A1 (en) 2003-11-05 2005-05-05 Tom Nielsen Persistent user interface for providing navigational functionality
US7355593B2 (en) 2004-01-02 2008-04-08 Smart Technologies, Inc. Pointer tracking across multiple overlapping coordinate input sub-regions defining a generally contiguous input region
JP2005202651A (ja) 2004-01-15 2005-07-28 Canon Inc 情報処理装置、情報処理方法、プログラムを記録した記録媒体及び制御プログラム
US8171084B2 (en) 2004-01-20 2012-05-01 Microsoft Corporation Custom emoticons
US20050202748A1 (en) 2004-03-11 2005-09-15 Beanhead Toys & Entertainment Freestanding, reconfigurable, disposable character form and kit for making same
US7546554B2 (en) 2004-03-31 2009-06-09 Fuji Xerox Co., Ltd. Systems and methods for browsing multimedia content on small mobile devices
US20050229102A1 (en) 2004-04-12 2005-10-13 Microsoft Corporation System and method for providing an interactive display
JP4241484B2 (ja) 2004-04-14 2009-03-18 日本電気株式会社 携帯端末装置、着信応答メッセージ送信方法およびサーバ装置
JP2005309933A (ja) 2004-04-23 2005-11-04 Canon Inc 拡張制御装置および画像処理システムおよびアプリケーションアイコン表示方法およびプログラムおよび記憶媒体
US7565625B2 (en) 2004-05-06 2009-07-21 Pixar Toolbar slot method and apparatus
US20050250438A1 (en) 2004-05-07 2005-11-10 Mikko Makipaa Method for enhancing communication, a terminal and a telecommunication system
JP2005352943A (ja) 2004-06-14 2005-12-22 Matsushita Electric Ind Co Ltd 情報端末及び表示制御プログラム
US7358962B2 (en) 2004-06-15 2008-04-15 Microsoft Corporation Manipulating association of data with a physical object
FI20045245A0 (fi) 2004-06-28 2004-06-28 Nokia Corp Selauksen tehostaminen elektronisessa laitteessa
US7689939B1 (en) * 2004-06-30 2010-03-30 Avaya Inc. Software application break through a screen blanker
US7669135B2 (en) 2004-07-15 2010-02-23 At&T Mobility Ii Llc Using emoticons, such as for wireless devices
US20060025110A1 (en) 2004-07-28 2006-02-02 Jun Liu Password protection for mobile phones
KR100610894B1 (ko) * 2004-07-28 2006-08-10 엘지전자 주식회사 스크린 세이버 자동 잠금 기능을 포함하는 이동통신단말기 및 그 제어방법
KR100958491B1 (ko) 2004-07-30 2010-05-17 애플 인크. 터치 감지 입력 장치용 모드 기반 그래픽 사용자 인터페이스
US20060025091A1 (en) * 2004-08-02 2006-02-02 Matsushita Electric Industrial Co., Ltd Method for creating and using phrase history for accelerating instant messaging input on mobile devices
KR20060019198A (ko) * 2004-08-27 2006-03-03 서동휘 그래픽 이모티콘 송수신 방법, 장치, 및 이모티콘 단축키의 설정 방법
CA2481065C (en) * 2004-09-07 2014-01-21 Research In Motion Limited System and method for inserting a graphic object in to a text based message
WO2006032721A1 (en) 2004-09-24 2006-03-30 Nokia Corporation Method for receiving inputs from user of electronic device
JP2006134288A (ja) 2004-10-06 2006-05-25 Sharp Corp インターフェース及びコンピュータにより実行されるインターフェースプログラム
US20060080616A1 (en) 2004-10-13 2006-04-13 Xerox Corporation Systems, methods and user interfaces for document workflow construction
US7603105B2 (en) 2004-11-12 2009-10-13 Research In Motion Limited Method of making phone calls from a locked out handheld electronic device and a handheld electronic device incorporating the same
US7925996B2 (en) 2004-11-18 2011-04-12 Microsoft Corporation Method and system for providing multiple input connecting user interface
US20060123360A1 (en) 2004-12-03 2006-06-08 Picsel Research Limited User interfaces for data processing devices and systems
JP2008527563A (ja) * 2005-01-16 2008-07-24 ズランゴー リミテッド アイコニック通信
TWI254558B (en) 2005-01-18 2006-05-01 Asustek Comp Inc Mobile communication device with a transition effect function
US20060209035A1 (en) 2005-03-17 2006-09-21 Jenkins Phillip D Device independent specification of navigation shortcuts in an application
US7340686B2 (en) 2005-03-22 2008-03-04 Microsoft Corporation Operating system program launch menu search
US7506268B2 (en) 2005-04-07 2009-03-17 Microsoft Corporation User interface with visual tracking feature
US7512898B2 (en) 2005-04-07 2009-03-31 Microsoft Corporation User interface with multi-state menu
US7614016B2 (en) 2005-04-21 2009-11-03 Microsoft Corporation Multiple roots in navigation pane
US7530029B2 (en) 2005-05-24 2009-05-05 Microsoft Corporation Narrow mode navigation pane
US20060277460A1 (en) 2005-06-03 2006-12-07 Scott Forstall Webview applications
US7195170B2 (en) 2005-06-09 2007-03-27 Fuji Xerox Co., Ltd. Post-bit: multimedia ePaper stickies
US7432928B2 (en) 2005-06-14 2008-10-07 Microsoft Corporation User interface state reconfiguration through animation
US7676767B2 (en) 2005-06-15 2010-03-09 Microsoft Corporation Peel back user interface to show hidden functions
US8963926B2 (en) 2006-07-11 2015-02-24 Pandoodle Corporation User customized animated video and method for making the same
JP2007052403A (ja) 2005-07-19 2007-03-01 Canon Inc 表示装置及び表示方法及びプログラム及び記憶媒体
JP4815927B2 (ja) 2005-07-27 2011-11-16 ソニー株式会社 表示装置、メニュー表示方法、メニュー表示方法のプログラム及びメニュー表示方法のプログラムを記録した記録媒体
US20070055947A1 (en) 2005-09-02 2007-03-08 Microsoft Corporation Animations and transitions
WO2007031816A1 (en) 2005-09-14 2007-03-22 Nokia Corporation A device, method, computer program and user interface for enabling a user to vary which items are displayed to the user
US20070152980A1 (en) * 2006-01-05 2007-07-05 Kenneth Kocienda Touch Screen Keyboards for Portable Electronic Devices
US20070067738A1 (en) 2005-09-16 2007-03-22 Microsoft Corporation Extensible, filtered lists for mobile device user interface
US20070072602A1 (en) * 2005-09-21 2007-03-29 Iyer Radha J Automated reply to voice call
US7966577B2 (en) 2005-10-11 2011-06-21 Apple Inc. Multimedia control center
US8769408B2 (en) 2005-10-07 2014-07-01 Apple Inc. Intelligent media navigation
US7603424B2 (en) * 2005-11-03 2009-10-13 Research In Motion Limited Method and system for generating template replies to electronic mail messages
US7730425B2 (en) 2005-11-30 2010-06-01 De Los Reyes Isabelo Function-oriented user interface
JPWO2007066662A1 (ja) 2005-12-05 2009-05-21 パイオニア株式会社 コンテンツ検索装置、コンテンツ検索システム、コンテンツ検索システム用サーバ装置、コンテンツ検索方法及びコンピュータプログラム並びに検索機能付きコンテンツ出力装置
US20070132789A1 (en) * 2005-12-08 2007-06-14 Bas Ording List scrolling in response to moving contact over list of index symbols
KR100801089B1 (ko) 2005-12-13 2008-02-05 삼성전자주식회사 터치 및 드래그를 이용하여 제어 가능한 모바일 장치 및 그조작 방법
EP1801711A1 (en) 2005-12-21 2007-06-27 Transmedia Communications Sàrl Method for remotely organizing audio-visual items stored in a central database
US7657849B2 (en) * 2005-12-23 2010-02-02 Apple Inc. Unlocking a device by performing gestures on an unlock image
US7509588B2 (en) * 2005-12-30 2009-03-24 Apple Inc. Portable electronic device with interface reconfiguration mode
US8370360B2 (en) 2005-12-31 2013-02-05 G & G Commerce Ltd. Merchandise recommending system and method thereof
EP1977312A2 (en) * 2006-01-16 2008-10-08 Zlango Ltd. Iconic communication
US7961903B2 (en) * 2006-01-25 2011-06-14 Microsoft Corporation Handwriting style data input via keys
US7450003B2 (en) 2006-02-24 2008-11-11 Yahoo! Inc. User-defined private maps
US8139514B2 (en) 2006-02-24 2012-03-20 Yahoo! Inc. Method and system for communicating with multiple users via a map over the internet
JP2007274240A (ja) * 2006-03-30 2007-10-18 Nec Corp 携帯端末
EP1840512B1 (en) 2006-03-31 2013-03-06 Research In Motion Limited Method and apparatus for providing map locations in user applications using URL strings
US8968077B2 (en) 2006-04-13 2015-03-03 Idt Methods and systems for interfacing with a third-party application
US8548452B2 (en) 2006-04-13 2013-10-01 Blackberry Limited System and method for controlling device usage
US20070245250A1 (en) 2006-04-18 2007-10-18 Microsoft Corporation Microsoft Patent Group Desktop window manager using an advanced user interface construction framework
US7783990B2 (en) 2006-05-05 2010-08-24 Microsoft Corporation Association of display elements
WO2007130693A2 (en) 2006-05-07 2007-11-15 Sony Computer Entertainment Inc. Methods and systems for processing an interchange of real time effects during video communication
US8255819B2 (en) 2006-05-10 2012-08-28 Google Inc. Web notebook tools
US8571580B2 (en) 2006-06-01 2013-10-29 Loopt Llc. Displaying the location of individuals on an interactive map display on a mobile communication device
JP4753801B2 (ja) 2006-06-07 2011-08-24 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 情報処理装置、情報処理方法、情報処理プログラム、及び携帯端末装置
KR100827230B1 (ko) 2006-06-09 2008-05-07 삼성전자주식회사 메뉴 아이콘을 제공하는 휴대용 장치 및 그 방법
US8086971B2 (en) 2006-06-28 2011-12-27 Nokia Corporation Apparatus, methods and computer program products providing finger-based and hand-based gesture commands for portable electronic device applications
US7880728B2 (en) 2006-06-29 2011-02-01 Microsoft Corporation Application switching via a touch screen interface
US8369843B2 (en) * 2006-07-27 2013-02-05 Research In Motion Limited Method of responding to an incoming communication received by a handheld device
US20080034309A1 (en) 2006-08-01 2008-02-07 Louch John O Multimedia center including widgets
US7996789B2 (en) 2006-08-04 2011-08-09 Apple Inc. Methods and apparatuses to control application programs
US7805684B2 (en) 2006-09-01 2010-09-28 Nokia Corporation Mobile communications terminal
US9304675B2 (en) 2006-09-06 2016-04-05 Apple Inc. Portable electronic device for instant messaging
US10313505B2 (en) 2006-09-06 2019-06-04 Apple Inc. Portable multifunction device, method, and graphical user interface for configuring and displaying widgets
US8564544B2 (en) 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
US7853972B2 (en) 2006-09-11 2010-12-14 Apple Inc. Media preview user interface
US20080104515A1 (en) 2006-10-30 2008-05-01 Dan Dumitru System and method for slide presentation
US8161395B2 (en) * 2006-11-13 2012-04-17 Cisco Technology, Inc. Method for secure data entry in an application
US20080133580A1 (en) 2006-11-30 2008-06-05 James Andrew Wanless Method and system for providing automated real-time contact information
KR100822295B1 (ko) 2006-12-07 2008-04-16 삼성전자주식회사 메시지 정보 표시 방법 및 시스템
US8373799B2 (en) * 2006-12-29 2013-02-12 Nokia Corporation Visual effects for video calls
US8214768B2 (en) 2007-01-05 2012-07-03 Apple Inc. Method, system, and graphical user interface for viewing multiple application windows
US7890778B2 (en) 2007-01-06 2011-02-15 Apple Inc. Power-off methods for portable electronic devices
US20080168367A1 (en) 2007-01-07 2008-07-10 Chaudhri Imran A Dashboards, Widgets and Devices
JP4189004B2 (ja) * 2007-01-10 2008-12-03 シャープ株式会社 携帯情報端末および制御プログラム
US7742774B2 (en) 2007-01-11 2010-06-22 Virgin Mobile Usa, L.P. Location-based text messaging
US20080182628A1 (en) 2007-01-26 2008-07-31 Matthew Lee System and method for previewing themes
US8996045B2 (en) 2007-01-29 2015-03-31 Blackberry Limited Method of e-mailing a map location using predefined context-sensitive messages
US8601370B2 (en) 2007-01-31 2013-12-03 Blackberry Limited System and method for organizing icons for applications on a mobile device
US20080189108A1 (en) 2007-02-05 2008-08-07 Comverse Ltd. Text messaging in a telephony network
US20080242423A1 (en) 2007-03-27 2008-10-02 Shelford Securities, S.A. Real-money online multi-player trivia system, methods of operation, and storage medium
US20080268882A1 (en) 2007-04-30 2008-10-30 Palm, Inc. Short message service enhancement techniques for added communication options
US9317110B2 (en) 2007-05-29 2016-04-19 Cfph, Llc Game with hand motion control
US20080300572A1 (en) 2007-06-01 2008-12-04 Medtronic Minimed, Inc. Wireless monitor for a personal medical device system
US8130219B2 (en) 2007-06-11 2012-03-06 Autodesk, Inc. Metadata for avatar generation in virtual environments
US8218734B2 (en) 2007-06-12 2012-07-10 Microsoft Corporation Messaging with a locked communication device
US9772751B2 (en) 2007-06-29 2017-09-26 Apple Inc. Using gestures to slide between user interfaces
GB2450757A (en) 2007-07-06 2009-01-07 Sony Comp Entertainment Europe Avatar customisation, transmission and reception
US9716764B2 (en) 2007-07-25 2017-07-25 Yahoo! Inc. Display of communication system usage statistics
US8146005B2 (en) 2007-08-07 2012-03-27 International Business Machines Corporation Creating a customized avatar that reflects a user's distinguishable attributes
EP2028611A1 (en) 2007-08-20 2009-02-25 Research In Motion Limited System and method for representation of electronic mail users using avatars
US20090055484A1 (en) 2007-08-20 2009-02-26 Thanh Vuong System and method for representation of electronic mail users using avatars
US11126321B2 (en) 2007-09-04 2021-09-21 Apple Inc. Application menu user interface
US9619143B2 (en) 2008-01-06 2017-04-11 Apple Inc. Device, method, and graphical user interface for viewing application launch icons
US8446371B2 (en) 2007-12-19 2013-05-21 Research In Motion Limited Method and apparatus for launching activities
EP2232899B1 (en) * 2007-12-31 2019-03-13 Bklk Ltd. Method and apparatus for rapid awareness, recognition and response to digital messages
US8356258B2 (en) 2008-02-01 2013-01-15 Microsoft Corporation Arranging display areas utilizing enhanced window states
US20090222765A1 (en) * 2008-02-29 2009-09-03 Sony Ericsson Mobile Communications Ab Adaptive thumbnail scrollbar
US9744466B2 (en) 2008-03-13 2017-08-29 Mattel, Inc. Widgetized avatar and a method and system of creating and using same
US20100211899A1 (en) 2009-02-17 2010-08-19 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US20110025707A1 (en) 2009-02-17 2011-02-03 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US20100211900A1 (en) 2009-02-17 2010-08-19 Robb Fujioka Virtual Marketplace Accessible To Widgetized Avatars
US20090247112A1 (en) * 2008-03-28 2009-10-01 Sprint Communications Company L.P. Event disposition control for mobile communications device
US8832552B2 (en) 2008-04-03 2014-09-09 Nokia Corporation Automated selection of avatar characteristics for groups
US20090254799A1 (en) * 2008-04-04 2009-10-08 Michael Unger System for creating graphical display from text
US20090271731A1 (en) 2008-04-27 2009-10-29 Htc Corporation Electronic device and user interface display method thereof
EP2293855A1 (en) 2008-06-02 2011-03-16 Nike International Ltd. System and method for creating an avatar
KR100989624B1 (ko) * 2008-09-18 2010-10-26 오광만 이동통신 단말기의 이모티콘 문자 입력 방법
US8941642B2 (en) 2008-10-17 2015-01-27 Kabushiki Kaisha Square Enix System for the creation and editing of three dimensional models
US8584031B2 (en) 2008-11-19 2013-11-12 Apple Inc. Portable touch screen device, method, and graphical user interface for using emoji characters
US20100169376A1 (en) 2008-12-29 2010-07-01 Yahoo! Inc. Visual search engine for personal dating
JP4686619B2 (ja) 2009-03-23 2011-05-25 株式会社東芝 顔認証を利用した情報処理方法および情報表示装置
JP5218989B2 (ja) 2009-08-07 2013-06-26 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 通信端末装置、及び、プログラム
JP5501815B2 (ja) 2010-03-18 2014-05-28 京セラ株式会社 情報通信装置
US9542038B2 (en) 2010-04-07 2017-01-10 Apple Inc. Personalizing colors of user interfaces
TWI439960B (zh) 2010-04-07 2014-06-01 蘋果公司 虛擬使用者編輯環境
US8694899B2 (en) 2010-06-01 2014-04-08 Apple Inc. Avatars reflecting user states
US20110298808A1 (en) 2010-06-02 2011-12-08 Toyota Motor Engineering & Manufacturing North America, Inc. Animated Vehicle Attendance Systems
US20110304629A1 (en) 2010-06-09 2011-12-15 Microsoft Corporation Real-time animation of facial expressions
US8749557B2 (en) 2010-06-11 2014-06-10 Microsoft Corporation Interacting with user interface via avatar
JP5134653B2 (ja) 2010-07-08 2013-01-30 株式会社バンダイナムコゲームス プログラム及びユーザ端末
CN102347912B (zh) 2010-08-02 2014-11-05 腾讯科技（深圳）有限公司 即时通讯软件中获取动态更新的方法及系统
US8558844B2 (en) 2010-09-28 2013-10-15 Apple Inc. Systems, methods, and computer-readable media for changing colors of displayed assets
CA2813758C (en) 2010-10-08 2023-01-03 Brian Lee Moffat Private data sharing system
US20140220855A1 (en) 2010-10-19 2014-08-07 I-Star Entertainment Llc Illumination display and communication device and method
KR20120059994A (ko) 2010-12-01 2012-06-11 삼성전자주식회사 표정 제어점을 이용한 아바타 제어 장치 및 방법
JP2012181704A (ja) 2011-03-01 2012-09-20 Sony Computer Entertainment Inc 情報処理装置および情報処理方法
US9563703B2 (en) 2011-03-10 2017-02-07 Cox Communications, Inc. System, method and device for sharing of playlists of authorized content with other users
US9013489B2 (en) 2011-06-06 2015-04-21 Microsoft Technology Licensing, Llc Generation of avatar reflecting player appearance
US10262327B1 (en) 2011-09-22 2019-04-16 Glance Networks, Inc. Integrating screen sharing sessions with customer relationship management
US8867849B1 (en) 2011-10-05 2014-10-21 Google Inc. Suggesting profile images for a social network
US9747495B2 (en) 2012-03-06 2017-08-29 Adobe Systems Incorporated Systems and methods for creating and distributing modifiable animated video messages
US9402057B2 (en) 2012-04-02 2016-07-26 Argela Yazilim ve Bilisim Teknolojileri San. ve Tic. A.S. Interactive avatars for telecommunication systems
CN111275795A (zh) 2012-04-09 2020-06-12 英特尔公司 用于化身生成、渲染和动画的系统和方法
US10155168B2 (en) 2012-05-08 2018-12-18 Snap Inc. System and method for adaptable avatars
US20140115451A1 (en) 2012-06-28 2014-04-24 Madeleine Brett Sheldon-Dante System and method for generating highly customized books, movies, and other products
US9936165B2 (en) 2012-09-06 2018-04-03 Intel Corporation System and method for avatar creation and synchronization
US20140078144A1 (en) 2012-09-14 2014-03-20 Squee, Inc. Systems and methods for avatar creation
KR20140042427A (ko) 2012-09-28 2014-04-07 삼성전자주식회사 애니메이션 이모티콘을 생성하는 장치 및 그 방법
US9148489B2 (en) 2013-03-11 2015-09-29 Qualcomm Incorporated Exchanging a contact profile between client devices during a communication session
US20140279062A1 (en) 2013-03-15 2014-09-18 Rodan & Fields, Llc Consultant tool for direct selling
WO2014153689A1 (en) 2013-03-29 2014-10-02 Intel Corporation Avatar animation, social networking and touch screen applications
IL226047A (en) 2013-04-29 2017-12-31 Hershkovitz Reshef May A method and system for giving personal expressions
US10877629B2 (en) 2016-10-13 2020-12-29 Tung Inc. Conversion and display of a user input
WO2015070416A1 (en) 2013-11-14 2015-05-21 Intel Corporation Mechanism for facilitating dynamic simulation of avatars corresponding to changing user performances as detected at computing devices
CN104836879A (zh) 2014-02-12 2015-08-12 腾讯科技（深圳）有限公司 通讯录的更新方法、服务器及系统
US20150254886A1 (en) 2014-03-07 2015-09-10 Utw Technology Co., Ltd. System and method for generating animated content
US10237276B2 (en) 2014-03-09 2019-03-19 Diro, Inc. Managing access rights to a group directory
CN106104633A (zh) 2014-03-19 2016-11-09 英特尔公司 面部表情和/或交互驱动的化身装置和方法
US9536228B2 (en) 2014-07-31 2017-01-03 Gretel, LLC Contact management systems
US20160055370A1 (en) 2014-08-21 2016-02-25 Futurewei Technologies, Inc. System and Methods of Generating User Facial Expression Library for Messaging and Social Networking Applications
US20160057087A1 (en) 2014-08-21 2016-02-25 Facebook, Inc. Processing media messages based on the capabilities of the receiving device
KR101540544B1 (ko) 2014-09-05 2015-07-30 서용창 캐릭터를 이용한 메시지 서비스 방법, 상기 방법을 수행하는 사용자 단말, 상기 방법을 포함하는 메시지 애플리케이션
WO2016045010A1 (en) 2014-09-24 2016-03-31 Intel Corporation Facial gesture driven animation communication system
WO2016070354A1 (en) 2014-11-05 2016-05-12 Intel Corporation Avatar video apparatus and method
US9491258B2 (en) 2014-11-12 2016-11-08 Sorenson Communications, Inc. Systems, communication endpoints, and related methods for distributing images corresponding to communication endpoints
US9824502B2 (en) 2014-12-23 2017-11-21 Intel Corporation Sketch selection for rendering 3D model avatar
JP6152125B2 (ja) 2015-01-23 2017-06-21 任天堂株式会社 プログラム、情報処理装置、情報処理システム及びアバター画像の生成方法
JP6461630B2 (ja) 2015-02-05 2019-01-30 任天堂株式会社 通信システム、通信装置、プログラム及び表示方法
WO2016144385A1 (en) 2015-03-08 2016-09-15 Apple Inc. Sharing user-configurable graphical constructs
KR102450865B1 (ko) 2015-04-07 2022-10-06 인텔 코포레이션 아바타 키보드
US20160307028A1 (en) 2015-04-16 2016-10-20 Mikhail Fedorov Storing, Capturing, Updating and Displaying Life-Like Models of People, Places And Objects
KR102305525B1 (ko) 2015-06-09 2021-09-27 삼성전자주식회사 이동 통신 시스템에서 단말을 이용하는 사용자 프로필 정보 공유 기법
US9891933B2 (en) 2015-06-24 2018-02-13 International Business Machines Corporation Automated testing of GUI mirroring
US10171985B1 (en) 2015-07-22 2019-01-01 Ginko LLC Method and apparatus for data sharing
US11048739B2 (en) 2015-08-14 2021-06-29 Nasdaq, Inc. Computer-implemented systems and methods for intelligently retrieving, analyzing, and synthesizing data from databases
WO2017101094A1 (en) 2015-12-18 2017-06-22 Intel Corporation Avatar animation system
US10366090B2 (en) 2016-03-30 2019-07-30 Facebook, Inc. Displaying temporary profile content items on communication networks
US11320982B2 (en) 2016-05-18 2022-05-03 Apple Inc. Devices, methods, and graphical user interfaces for messaging
US10491553B2 (en) 2016-05-26 2019-11-26 International Business Machines Corporation Dynamically integrating contact profile pictures into messages based on user input
CN106101358A (zh) 2016-05-27 2016-11-09 珠海市魅族科技有限公司 一种联系人信息更新的方法及智能设备
US10607386B2 (en) 2016-06-12 2020-03-31 Apple Inc. Customized avatars and associated framework
US10855632B2 (en) 2016-07-19 2020-12-01 Snap Inc. Displaying customized electronic messaging graphics
US11003898B2 (en) 2016-07-25 2021-05-11 BGR Technologies Pty Limited Creating videos with facial expressions
US20180047200A1 (en) 2016-08-11 2018-02-15 Jibjab Media Inc. Combining user images and computer-generated illustrations to produce personalized animated digital avatars
CN110109592B (zh) 2016-09-23 2022-09-23 苹果公司 头像创建和编辑
US10432559B2 (en) 2016-10-24 2019-10-01 Snap Inc. Generating and displaying customized avatars in electronic messages
US10528801B2 (en) 2016-12-07 2020-01-07 Keyterra LLC Method and system for incorporating contextual and emotional visualization into electronic communications
US10242503B2 (en) 2017-01-09 2019-03-26 Snap Inc. Surface aware lens
EP3580686B1 (en) 2017-02-07 2023-03-15 InterDigital VC Holdings, Inc. System and method to prevent surveillance and preserve privacy in virtual reality
US10778831B2 (en) 2017-02-17 2020-09-15 Whatsapp Inc. Methods and systems for displaying an ephemeral content message
JP2018151966A (ja) 2017-03-14 2018-09-27 フィールズ株式会社 情報処理装置及びプログラム
KR101866407B1 (ko) 2017-03-15 2018-06-12 주식회사 한글과컴퓨터 아바타 생성 시스템 및 이를 이용한 아바타 생성 방법
KR20180120449A (ko) 2017-04-27 2018-11-06 삼성전자주식회사 프로필 이미지 공유 방법 및 이를 지원하는 전자 장치
CN107171934B (zh) 2017-05-05 2019-10-25 沈思远 即时通讯工具的信息处理方法、即时通讯客户端及系统
DK179948B1 (en) 2017-05-16 2019-10-22 Apple Inc. Recording and sending Emoji
US10397391B1 (en) 2017-05-22 2019-08-27 Ginko LLC Two-way permission-based directory of contacts
US20190114037A1 (en) 2017-10-17 2019-04-18 Blend Systems, Inc. Systems and methods for distributing customized avatars responsive to events
CN107613085A (zh) 2017-10-31 2018-01-19 武汉诚迈科技有限公司 手机通讯录自动更新方法、服务器和用户终端
KR102813909B1 (ko) 2017-11-29 2025-05-29 스냅 인코포레이티드 전자 메시징 애플리케이션들을 위한 그래픽 렌더링
KR102661019B1 (ko) 2018-02-23 2024-04-26 삼성전자주식회사 얼굴에 대응하는 3차원 아바타를 이용하여 얼굴의 움직임이 반영된 3차원 아바타를 포함하는 이미지를 생성하는 전자 장치 및 그 동작 방법
KR102565755B1 (ko) 2018-02-23 2023-08-11 삼성전자주식회사 얼굴의 특징점의 움직임에 따라 모션이 수행된 아바타를 표시하는 전자 장치와 이의 동작 방법
WO2019173108A1 (en) 2018-03-06 2019-09-12 Didimo, Inc. Electronic messaging utilizing animatable 3d models
US20190295056A1 (en) 2018-03-20 2019-09-26 Rocky Jerome Wright Augmented Reality and Messaging
KR102002863B1 (ko) 2018-04-13 2019-07-24 라인플러스 주식회사 사람의 얼굴을 이용한 동물 형상의 아바타를 생성하는 방법 및 시스템
US10607065B2 (en) 2018-05-03 2020-03-31 Adobe Inc. Generation of parameterized avatars
KR102707337B1 (ko) 2019-01-28 2024-09-20 삼성전자주식회사 전자 장치 및 전자 장치의 그래픽 객체 제어 방법
US10953334B2 (en) 2019-03-27 2021-03-23 Electronic Arts Inc. Virtual character generation from image or video data
DK201970531A1 (en) 2019-05-06 2021-07-09 Apple Inc Avatar integration with multiple applications

Also Published As

Publication number Publication date
US20190199848A1 (en) 2019-06-27
US20220221985A1 (en) 2022-07-14
JP5319781B2 (ja) 2013-10-16
KR101590462B1 (ko) 2016-02-04
WO2010059306A2 (en) 2010-05-27
JP2017097911A (ja) 2017-06-01
JP6085006B2 (ja) 2017-02-22
KR101787035B1 (ko) 2017-11-15
CN104133589A (zh) 2014-11-05
US20240168628A1 (en) 2024-05-23
CN104133589B (zh) 2018-06-15
KR101590457B1 (ko) 2016-02-04
US8584031B2 (en) 2013-11-12
US20210227065A1 (en) 2021-07-22
HK1203671A1 (en) 2015-10-30
KR20150084072A (ko) 2015-07-21
KR101967353B1 (ko) 2019-04-10
US20100123724A1 (en) 2010-05-20
CN104156142B (zh) 2017-10-24
JP6584710B2 (ja) 2019-10-02
JP2012509641A (ja) 2012-04-19
CN104156142A (zh) 2014-11-19
JP2019164804A (ja) 2019-09-26
US11307763B2 (en) 2022-04-19
KR20170118237A (ko) 2017-10-24
HK1204115A1 (en) 2015-11-06
US12242718B2 (en) 2025-03-04
JP2015215914A (ja) 2015-12-03
US20120319985A1 (en) 2012-12-20
KR20110089429A (ko) 2011-08-08
CN102265586A (zh) 2011-11-30
JP6518705B2 (ja) 2019-05-22
US20100125811A1 (en) 2010-05-20
KR101317547B1 (ko) 2013-10-16
CN102265586B (zh) 2014-07-16
US8255810B2 (en) 2012-08-28
KR20160018816A (ko) 2016-02-17
JP2014002755A (ja) 2014-01-09
US20100125785A1 (en) 2010-05-20
KR20130064806A (ko) 2013-06-18

Similar Documents

Publication Publication Date Title
JP6584710B2 (ja) 絵文字キャラクタを使用するためのポータブルタッチスクリーン装置、方法及びグラフィックユーザインターフェイス
US9207855B2 (en) Portable multifunction device, method, and graphical user interface for adjusting an insertion point marker
US8451232B2 (en) Portable multifunction device, method, and graphical user interface for interacting with user input elements in displayed content
US20090322688A1 (en) Touch Screen Device, Method, and Graphical User Interface for Inserting a Character from an Alternate Keyboard
HK1204115B (en) Portable touch screen device and method for using emoji characters
HK1203671B (zh) 使用表情字符的便携式触摸屏设备、方法和图形用户界面

Legal Events

Date Code Title Description
A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140630

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20140926

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20141001

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20141030

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20141105

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20141128

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20150427

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20150527

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150626

R150 Certificate of patent or registration of utility model

Ref document number: 5771243

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250