JP5928048B2 - 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置 - Google Patents

情報処理装置、情報処理方法、情報処理プログラムおよび端末装置 Download PDF

Info

Publication number
JP5928048B2
JP5928048B2 JP2012065840A JP2012065840A JP5928048B2 JP 5928048 B2 JP5928048 B2 JP 5928048B2 JP 2012065840 A JP2012065840 A JP 2012065840A JP 2012065840 A JP2012065840 A JP 2012065840A JP 5928048 B2 JP5928048 B2 JP 5928048B2
Authority
JP
Japan
Prior art keywords
application
information
unit
keyword
shared
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2012065840A
Other languages
English (en)
Other versions
JP2013198085A (ja
Inventor
隆志 小野原
隆志 小野原
朗可 上田
朗可 上田
恵司 大二
恵司 大二
太一 吉尾
太一 吉尾
雄司 川辺
雄司 川辺
清二 岩屋ヶ野
清二 岩屋ヶ野
琢磨 肥後
琢磨 肥後
絵里 酒井
絵里 酒井
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2012065840A priority Critical patent/JP5928048B2/ja
Application filed by Sony Corp filed Critical Sony Corp
Priority to US14/379,888 priority patent/US10452347B2/en
Priority to PCT/JP2013/058453 priority patent/WO2013141390A1/en
Priority to EP13714011.7A priority patent/EP2828736B1/en
Priority to CN201380014186.XA priority patent/CN104205038A/zh
Publication of JP2013198085A publication Critical patent/JP2013198085A/ja
Application granted granted Critical
Publication of JP5928048B2 publication Critical patent/JP5928048B2/ja
Priority to US16/044,640 priority patent/US11327712B2/en
Priority to US17/729,956 priority patent/US12067332B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482—Interaction with lists of selectable items, e.g. menus
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/20—Speech recognition techniques specially adapted for robustness in adverse environments, e.g. in noise, of stress induced speech
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/74—Details of telephonic subscriber devices with voice recognition means

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • General Health & Medical Sciences (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

本技術は、情報処理装置、情報処理方法、情報処理プログラムおよび端末装置に関する。
近年、様々なサービス、機能を提供する多種多様なアプリケーションを有する携帯電話機、スマートフォンなどの携帯端末装置が普及している。そして、よりアプリケーションによる利便性を高めるために、それら携帯端末装置と他の装置との連携が望まれている。そこで、端末装置と車載装置とを連携させることにより、車載装置を音声作動させる音声作動システムが提案されている（特許文献１）。
特開２００９−３００５３７号公報
特許文献１に記載された技術は、音声の取得を端末装置に設けられたマイクロホンで行うものである。しかし、自動車内においては走行中に携帯電話機、スマートフォンなどの端末装置を操作することができないため、端末装置は必ずしも音声取得に適した装置であるとはいえない。
本技術は、このような点に鑑みてなされたものであり、端末装置と他の装置を連携させ、さらに、端末装置以外の装置に対する音声入力により端末装置を動作させる情報処理装置、情報処理方法、情報処理プログラムおよび端末装置を提供することを目的とする。
上述した課題を解決するために、第１の発明は、第１の装置と接続され、第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において動作し、第１の装置が有するアプリケーションを示す第１のアプリケーション情報を第２の装置における通信部を介して取得し、さらに第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得する情報取得部と、情報取得部により取得した第１のアプリケーション情報と第２のアプリケーション情報とに基づいて、第１の装置と第２の装置とが共有する共有情報を生成する共有情報生成部と、共有情報を、通信部を介して第１の装置に送信する送信制御部と、音声認識部からキーワードが供給されると、アプリケーションの起動に対応したキーワードの場合にはキーワードに応じた第１の装置または第２の装置が有するアプリケーションを起動させ、さらに、アプリケーションの動作に対応したキーワードの場合にはキーワードに応じてアプリケーションを動作させるアプリケーション実行部とを備える情報処理装置である。
また、第２の発明は、第１の装置と接続され、第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において、第１の装置が有するアプリケーションを示す第１のアプリケーション情報を第２の装置における通信部を介して取得し、さらに第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得し、取得した第１のアプリケーション情報と第２のアプリケーション情報とに基づいて、第１の装置と第２の装置とが共有する共有情報を生成し、共有情報を、通信部を介して第１の装置に送信し、音声認識部からキーワードが供給されると、アプリケーションの起動に対応したキーワードの場合にはキーワードに応じた第１の装置または第２の装置が有するアプリケーションを起動させ、さらに、アプリケーションの動作に対応したキーワードの場合にはキーワードに応じてアプリケーションを動作させる情報処理方法である。
また、第３の発明は、第１の装置と接続され、第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において、第１の装置が有するアプリケーションを示す第１のアプリケーション情報を第２の装置における通信部を介して取得し、さらに第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得し、取得した第１のアプリケーション情報と第２のアプリケーション情報とに基づいて、第１の装置と第２の装置とが共有する共有情報を生成し、共有情報を、通信部を介して第１の装置に送信し、音声認識部からキーワードが供給されると、アプリケーションの起動に対応したキーワードの場合にはキーワードに応じた第１の装置または第２の装置が有するアプリケーションを起動させ、さらに、アプリケーションの動作に対応したキーワードの場合にはキーワードに応じてアプリケーションを動作させる情報処理方法をコンピュータに実行させる情報処理プログラムである。
また、第４の発明は、接続された他の装置から送信された音声からキーワードを抽出する音声認識部と、他の装置が有するアプリケーションを示す第１のアプリケーション情報を通信部を介して取得し、さらに自身が有するアプリケーションを示す第２のアプリケーション情報を取得する情報取得部と、情報取得部により取得した第１のアプリケーション情報と第２のアプリケーション情報とに基づいて、他の装置と自身とが共有する共有情報を生成する共有情報生成部と、共有情報を、通信部を介して他の装置に送信する送信制御部と、音声認識部からキーワードが供給されると、アプリケーションの起動に対応したキーワードの場合にはキーワードに応じた他の装置または自身が有するアプリケーションを起動させ、さらに、アプリケーションの動作に対応したキーワードの場合にはキーワードに応じてアプリケーションを動作させるアプリケーション実行部とを備える端末装置である。
本技術によれば、端末装置と他の装置を連携させ、さらに、端末装置以外の装置に対する音声入力により端末装置を動作させることができるため、端末装置を操作せずに端末装置を動作させることができる。
図１は、本技術の係る第２の装置の一例である端末装置の構成を示すブロック図である。 図２は、共有情報の具体例を示す図である。 図３は、端末装置の外観構成の例を示す図である。 図４は、端末装置の表示部におけるページ送り操作について説明するための図である。 図５は、本技術に係る第１の装置の一例であるコンテンツ再生装置の構成を示すブロック図である。 図６は、コンテンツ再生装置の外観構成の例を示す図である。 図７は、端末装置とコンテンツ再生装置間の情報の受け渡しの説明するための概念図である。 図８は、端末装置とコンテンツ再生装置間で行われる処理の流れを示すシーケンス図である。 図９は、コンテンツ再生装置と端末装置におけるアプリケーション選択表示の連動を示す図である。
以下、本技術の実施の形態について図面を参照しながら説明する。ただし、本技術は以下の実施の形態のみに限定されるものではない。なお、説明は以下の順序で行う。
＜１．実施の形態＞
［１−１．端末装置の構成］
［１−２．コンテンツ再生装置の構成］
［１−３．端末装置とコンテンツ再生装置間における処理］
＜２．変形例＞
＜１．第１の実施の形態＞
［１−１．端末装置の構成］
図１は本実施の形態における端末装置１００の構成を示すブロック図である。端末装置１００は、特許請求の範囲における第２の装置の一例である。端末装置１００は、データバス１０１を備え、このデータバス１０１には、制御部１０２、ネットワークインターフェース１０３、信号処理部１０４、入力部１０５、表示部１０６、通信部１０７、記憶部１０８、アプリケーションプロセッサ１１０が接続されている。
制御部１０２は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random Access Memory）およびＲＯＭ（Read Only Memory）などから構成されている。ＲＯＭには、ＣＰＵにより読み込まれて動作されるプログラムなどが記憶されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに記憶されたプログラムに従い様々な処理を実行することによって、端末装置１００の各部および全体の制御を行う。
ネットワークインターフェース１０３は、例えば、所定のプロトコルに基づいて外部基地局などとの間でデータの送受信を行うものである。通信方式は無線ＬＡＮ（Local Area Network）、Ｗｉ−Ｆｉ（Wireless Fidelity）、３Ｇ回線を用いた通信など、どのような方式でもよい。ネットワークインターフェース１０３による通信により、端末装置１００はインターネット接続、他者との通話などを行うことが可能となる。
信号処理部１０４は、変復調器、ＡＤ／ＤＡ変換器、音声コーデック（図示せず。）などを備えている。信号処理部１０４の変復調器で、送信する音声信号を変調し、あるいは受信した信号を復調する。送信する信号は、ＡＤ／ＤＡ変換器でデジタル信号に変換され、受信した信号はＡＤ／ＤＡ変換器でアナログ信号に変換される。そして信号処理部１０４には、音声を出力するスピーカ１１１と、音声を入力するマイクロホン１１２とが接続されている。
入力部１０５は、ユーザが端末装置１００に対して各種入力を行うための入力手段である。例えば、ボタン、タッチパネル、スイッチなどにより構成されている。また、入力部１０５は、表示部１０６と一体に構成されたタッチスクリーンとして構成してもよい。入力部１０５に対してユーザによる入力操作がなされると、その入力に対応した制御信号が生成されて制御部１０２に出力される。そして、制御部１０２によりその制御信号に対応した演算処理や制御が行われる。
表示部１０６は、例えば、ＬＣＤ（Liquid Crystal Display）、ＰＤＰ(Plasma Display Panel)、有機ＥＬ(Electro Luminescence)パネルなどにより構成された表示手段である。表示部１０６には、端末装置１００の各種操作のメニューを表示するホーム画面、楽曲リスト、再生中の楽曲情報（アーティスト名、曲名など）、動画コンテンツ、画像コンテンツなどが表示される。
通信部１０７は、Bluetooth、ＵＳＢ接続などの方法により端末装置１００との通信を行うための通信モジュールである。通信部１０７における通信方法としては、無線通信であるBluetooth、有線通信であるＵＳＢによる通信などがある。Bluetooth通信を行うBluetoothモジュールは、Bluetooth方式の近距離無線通信によるデータの送受信が可能なモジュールである。Bluetoothモジュールによって、外部Bluetooth機器であるコンテンツ再生装置とのデータのやり取りが行われる。
Bluetoothモジュールは、アンテナ、信号処理部（図示せず。）などを備える。例えば外部のBluetooth機器であるコンテンツ再生装置２００に音声データを送信する場合等、Bluetoothモジュールは、信号処理部によって送信する音声データに所定の信号処理を施し、その音声データを内蔵するアンテナを介してコンテンツ再生装置２００に送信する。また、コンテンツ再生装置２００に音声データを送信する場合等、Bluetoothモジュールは、コンテンツ再生装置から送信された音声データを内蔵するアンテナで受信し、内蔵する信号処理部１０４に供給する。そして、信号処理部において音声データに所定の信号処理を施すことによって音声信号を生成する。これにより、端末装置１００で再生した音声データをコンテンツ再生装置２００から出力すること、および、コンテンツ再生装置２００で再生した音声データを端末装置１００から出力することができる。
通信部１０７における通信方式として有線通信であるＵＳＢを用いる場合には、ＵＳＢケーブルによってコンテンツ再生装置２００と端末装置１００とが接続される。音声データはＵＳＢケーブルを介して端末装置１００からコンテンツ再生装置２００に供給される。
よって、本実施の形態においては、端末装置１００とコンテンツ再生装置２００とを接続し、端末装置１００が保存する楽曲データを再生し、その楽曲が音声としてコンテンツ再生装置２００から出力されるようにすることもできる。
ただし、接続方法はいずれの方法であってもよい。また、Bluetooth、ＵＳＢ以外にも任意のデータ通信が可能な接続方法であればどのようなものを採用してもよい。また、通信方式は、端末装置１００の機種、ＯＳ（Operation System）の種類などに基づいて適宜選択するとよい。
記憶部１０８は、例えば、ＨＤＤ、フラッシュメモリなどの大容量記憶媒体から構成されており、端末装置１００によって再生される楽曲などのコンテンツデータなどを保存するものである。楽曲データは、ＷＡＶ（RIFF waveform Audio Format）、またはＭＰ３（MPEG Audio Layer-3）、ＡＡＣ（Advanced Audio Coding）などの方式で音声圧縮された状態で記憶部１０８に記憶される。また、楽曲のアーティスト名、アルバム名、曲名、総再生時間、再生時間情報などを含む楽曲情報も楽曲データのメタデータとして記憶部１０８に保存されている。楽曲情報は例えば、ＣＤＤＢ(Compact Disc Data Base)を利用することにより取得することができる。また、ユーザが任意に設定できるようにしてもよい。
音声認識部１０９は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭなどから構成され、通信部１０７から供給された音声データに基づいて言語認識を行い、音声信号に含まれる言葉を単語単位で認識してキーワードを抽出する。なお、音声認識の手法は種々提案されているため、音声認識部１０９は、いずれかの手法を利用して音声認識処理を行うとよい。
音声認識の手法としては、例えば、学習用データから音声の特徴を蓄積し、その特徴と供給された音声とを比較してキーワードを抽出する手法、隠れマルコフモデル（ＨＭＭ：Hidden Markov Model）を用いた手法などがある。音声認識部１０９は、抽出したキーワードを例えば、テキストデータなどの所定の形式のデータとしてアプリケーションプロセッサ１１０に供給する。
アプリケーションプロセッサ１１０は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭなどから構成され、端末装置１００にインストールされた各種アプリケーションを実行する処理部である。アプリケーションとしては、例えば、音楽再生、動画再生、地図、天気、ナビゲーション、ゲーム、インターネットブラウザ、動画共有サイト利用、計算機などの様々な種類がある。
本技術は、端末装置１００にインストールされる情報処理アプリケーションがアプリケーションプロセッサ１１０に実行されることにより実現される。アプリケーションプロセッサ１１０は情報処理アプリケーションを実行することにより、情報取得部１２１、共有情報生成部１２２、送信制御部１２３、表示制御部１２４、アプリケーション実行部１２５として機能する。情報処理アプリケーションの実行により実現される各機能が特許請求の範囲における情報処理装置に相当する。
情報取得部１２１は、コンテンツ再生装置２００が有するコンテンツソースからのコンテンツを出力するアプリケーション（特許請求の範囲における第１の装置が有するアプリケーションに相当する）を示す情報（第１のアプリケーション情報）を通信部１０７を介してコンテンツ再生装置２００から取得する。コンテンツソースとしてはインターネットラジオ、ＵＳＢなどにより接続された外部ストレージ、ディスク媒体を再生するディスク媒体モジュールなどがある。
また、情報取得部１２１は、端末装置１００が有するアプリケーションの中から、ユーザがコンテンツ再生装置２００と端末装置１００とにおいて共有させるために選択したアプリケーションを示す情報（第２のアプリケーション情報）を取得する。
さらに、情報取得部１２１は、コンテンツ再生装置２００において行われたアプリケーションの選択操作の内容を示す情報（操作情報）を通信部１０７を介して受信する。操作情報の詳細については後述する。
共有情報生成部１２２は、情報取得部１２１により取得した第１のアプリケーション情報と第２のアプリケーション情報とを共存させることによって共有情報を生成する。共有情報は、端末装置１００において用いられるとともに、通信制御部１０２による制御のもと通信部１０７を介してコンテンツ再生装置２００に送信される。このように、共有情報は、コンテンツ再生装置２００と端末装置１００間で共有されるものである。
共有情報は例えば、図２に示されるように、第１のアプリケーション情報と第２のアプリケーション情報に示されるアプリケーションが順序付けられたリスト形式の情報である。この順序は、端末装置１００およびコンテンツ再生装置の表示部１０６におけるアプリケーションを示すアイコンの表示順序に対応している。
なお、本技術においては、Bluetoothを用いて通信を行う場合には、シリアルポートプロファイルを用いて端末装置１００とコンテンツ再生装置２００間で第１のアプリケーション情報、共有情報、操作情報などの送受信が行われる。また、コンテンツ再生装置２００と端末装置１００との接続にＵＳＢを用いる場合には、ｉＡＰを用いて第１のアプリケーション情報、共有情報、操作情報などの送受信が行われる。
シリアルポートプロファイル、ｉＡＰでは任意の情報の送受信が可能であるため、それらを利用することにより、本技術に用いられる上述した各種情報の送受信を行うことができる。ただし、上述した各種情報を送受信することが出来る方法であれば、他の方法を用いてもよい。また、Bluetooth、ＵＳＢ以外にも任意のデータ通信が可能な接続方法であればどのようなものを採用してもよい。
表示制御部１２４は、共有情報に基づいて、コンテンツ再生装置２００のコンテンツソース用アプリケーション（コンテンツソース内のコンテンツを再生するアプリケーション）と、ユーザが選択した端末装置１００のアプリケーションとを示すアイコンを表示部１０６に表示する制御を行うものである。また、表示制御部１２４は、音声認識部１０９から供給されたキーワードに基づいてアプリケーション実行部１２５が起動／動作させたアプリケーションに対応した表示制御を行う。
アプリケーション実行部１２５は、音声認識部１０９から供給されたキーワードに基づいて端末装置１００にインストールされたアプリケーションを起動し、さらにそのアプリケーションを動作させる。キーワードに基づきアプリケーションを起動、動作させる方法としては、例えば、予めアプリケーションの起動および動作と、それに対応したキーワードをテーブルとして保持しておく。そして、音声認識部１０９からキーワードが供給されると、アプリケーションプロセッサ１１０はそのテーブルを参照して、キーワードに対応するアプリケーションまたは動作を検索する。そして、キーワードに対応するアプリケーションまたは動作が存在する場合にはそのアプリケーションの起動または動作を実行する。
例えば、入力されたキーワードがアプリケーション名である場合にはアプリケーションを起動する。そして、例えば、ナビゲーションアプリケーションが起動している状態で、地名がキーワードで入力された場合には、その地名までのルートを検索してナビゲーション開始する。また、動画共有サイト利用アプリケーションが起動している状態で、キーワードが入力された場合には、アプリケーションにそのキーワードで動画検索行い、検索結果の提示、動画再生、動画停止、早送り、巻戻しなどを行う。アプリケーション実行部１２５は入力されたキーワードに基づいてこのような処理を行う。
なお、上述の方法以外にも、供給されたキーワードに基づいて、それに対応するアプリケーションの起動、動作を実行することが出来る方法であればどのような方法を採用してもよい。
なお、情報処理アプリケーションは予め端末装置１００にインストールした状態でユーザに提供するようにしてもよいし、ユーザが自ら端末装置１００にインストールするようにしてもよい。情報処理アプリケーションは、例えば、インターネット上のアプリケーション販売サイト、アプリケーションダウンロードサービスを介して提供または販売される。また、情報処理アプリケーションが記録された光ディスクや半導体メモリなどの可搬型記録媒体によって提供または販売されてもよい。
スピーカ１１１は音声を出力するための音声出力手段であり、信号処理部１０４により所定の処理が施された音声信号などを音声として出力する。これによりユーザは通話音声、端末装置１００に保存された音声データなどを聴取することができる。また、マイクロホン１１２は通話、音声による指示入力などのために音声を端末装置１００に入力するためのものである。マイクロホン１１２から入力された音声は信号処理部１０４によって所定の処理が施される。
以上のようにして端末装置１００が構成されている。端末装置１００としては、携帯電話機、スマートフォン、携帯音楽プレーヤ、タブレット端末などがある。また、図示はしないが、端末装置１００には撮像部と画像処理部などからなるカメラ機能、ラジオ機能などが設けられていてもよい。
図３は、端末装置１００の外観構成の一例を示す図である。図３においては、端末装置１００の表示部１０６および、入力部１０５としてのタッチスクリーンおよび入力部１０５としてのボタンが示されている。
端末装置１００の表示部１０６には共有情報で示されたアプリケーションを示す複数のアイコン１３１、１３１、・・が表示されている。本実施の形態では、コンテンツ再生装置のコンテンツソースと端末装置１００においてユーザにより選択されたアプリケーションを示すアイコンが表示されることとなる。
ユーザは、表示部１０６に表示されたアイコン１３１に指を接触させる、または入力部１０５としてのボタンを押圧することにより、アプリケーションを選択する。アプリケーションが選択されると、例えば、図４Ａの状態から図４Ｂの状態へと、選択されたアプリケーションを示す太枠状のカーソル１３２が移動する。その後、例えば、選択したアプリケーションのアイコン１３１に再度入力を行うなどによりアプリケーション決定入力を行うと、選択されたアプリケーションが起動する。
ここで、端末装置１００におけるページ送り操作について説明する。図４Ａは、端末装置１００の表示部１０６においてアプリケーションを示す複数のアイコン１３１が表示されている１ページ目を示すものである。１ページ目が表示されている図４Ａの状態において、タッチスクリーンに対する入力などにより画面を横方向にスライドさせる。そうすると、図４Ｂに示されるように、１ページ目がスライド方向に流れて消えていくと同時に、２ページ目が表示部１０６の端からスライドして現れてくる遷移状態となる。そして、その遷移状態を経て、２ページ目のスライド動作が完了すると図４Ｃに示されるように２ページ目全体が表示部１０６に表示される。２ページ目に表示されるアイコン１３１は１ページ目に表示されたものとは異なっている。この一連の表示部１０６のおける表示の遷移を「ページ送り」と称し、それを行うための入力操作を「ページ送り操作」と称する。
なお、図４の説明は１ページ目から２ページ目への遷移を例にして説明したが、２ページ目から３ページ目、３ページ目から４ページ目、２ページ目から１ページ目なども同様にページ送りが可能である。端末装置１００においてはインストールされるアプリケーションの数によってページ数が異なる。アプリケーションの数が多い場合にはそれに伴いページ数も増えていく。
通常、携帯電話機、スマートフォン、タブレット端末などにおけるアプリケーションのアイコン表示は縦５×横４、縦４×横４などの配置で行われるのが通常である。しかし、本実施の形態において表示制御部１２４は、図４に示されるように例えば縦２×横２など、よりアイコンが大きく表示されるように表示制御を行うようにしてもよい。これにより、端末装置１００における入力操作が容易となる。
なお、図４に示される端末装置１００の外観構成、表示部１０６における表示態様、入力部１０５としてのボタンの配置はあくまで一例であり、それらは図４に示されるものに限られるものではない。
［１−２．コンテンツ再生装置の構成］
図５は、本技術の実施の形態におけるコンテンツ再生装置２００の構成を示すブロック図である。コンテンツ再生装置２００は特許請求の範囲における第１の装置の一例である。コンテンツ再生装置２００はいわゆる据え置き型の装置であり、据え置き型の装置としては例えば、車両内でコンテンツを再生するカーオーディオ装置、主に家庭内で用いられるドックスピーカなどがある。
コンテンツ再生装置２００は、制御部２０１、ラジオ用アンテナ２０２、チューナ２０３、ディスク媒体モジュール２０４、電子ボリューム２０５、アンプ部２０６、スピーカ２０７、リモートコントローラ受光部２０８、入力部２０９、通信部２１０、表示部２１１、ＵＳＢ端子２１２、フラッシュＲＯＭ２１３、マイクロホン２１４、サウンドＤＳＰ（Digital Signal Processing）２１５、アプリケーションプロセッサ２１６とから構成されている。
制御部２０１は例えば、ＣＰＵ、ＲＡＭおよびＲＯＭなどから構成されている。ＲＯＭには、ＣＰＵにより読み込まれて動作されるプログラムなどが記憶されている。ＲＡＭは、ＣＰＵのワークメモリとして用いられる。ＣＰＵは、ＲＯＭに記憶されたプログラムに従い様々な処理を実行することによって、コンテンツ再生装置２００の各部および全体の制御を行う。
ラジオ用アンテナ２０２は、ラジオ放送電波を受信するためのアンテナであり、チューナ２０３に接続されている。チューナ２０３は、ラジオ用アンテナ２０２により受信されたラジオ放送信号の復調やアナログ／デジタル変換、符号化されているデータの復号等の処理などを行い、ラジオ音声データを復元する。ラジオ音声データは制御部２０１の制御のもと電子ボリューム２０５、アンプ部２０６を介してスピーカ２０７へ送られ、スピーカ２０７により音声として出力される。
ディスク媒体モジュール２０４は、ディスク状記録媒体に書込まれているオーディオ信号を読出し、読出したオーディオ信号に対して所定の信号処理を施して音声信号を取得するディスク再生装置である。得られた音声信号は、制御部２０１の制御のもと電子ボリューム２０５、アンプ部２０６を介してスピーカ２０７へ送られ、スピーカ２０７により音声として出力される。なお、ディスク状記録媒体としてはＣＤ(Compact Disc)、ＤＶＤ（Digital Versatile Disc）、ＢＤ（Blu-ray Disc）などがある。
電子ボリューム２０５は、制御部２０１の制御に基づき、ラジオチューナ２０３、ディスク媒体モジュール２０４、通信部２１０、ＵＳＢ端子２１２などから供給された音声信号を増幅して音量を調整する。音量が調整された音声信号は、アンプ部２０６に供給される。アンプ部２０６は、電子ボリューム２０５から供給された音声信号を所定に増幅し、スピーカ２０７に供給する。スピーカ２０７は、アンプ部２０６から供給された音声信号を外部に音声として出力する音声出力手段である。
リモートコントローラ受光部２０８は、ユーザの操作によりコンテンツ再生装置２００付属のリモートコントローラ３００から送信されたコントロール信号を受信して制御部２０１に出力する。
入力部２０９は、ユーザがコンテンツ再生装置２００への各種入力操作を行うための入力手段である。入力部２０９は例えば、ボタン、タッチパネル、スイッチなどにより構成されている。また、入力部２０９は、表示部２１１と一体に構成されたタッチスクリーンとして構成してもよい。入力部２０９に対してユーザによる入力がなされると、その入力に対応した制御信号が生成されて制御部２０１に出力される。そして、制御部２０１によりその制御信号に対応した演算処理や制御が行われる。
本実施の形態においては、ユーザは、入力部２０９に対して、アプリケーション選択操作および、選択したアプリケーションを起動するための決定操作などを行うことが可能である。
表示部２１１は、例えば、ＬＣＤ、ＰＤＰ、有機ＥＬパネルなどにより構成された表示手段である。表示部２１１には、コンテンツ再生装置２００の各種操作のメニューを表示するホーム画面、楽曲リスト、再生中の楽曲情報（アーティスト名、曲名など）などが表示される。さらに、コンテンツ再生装置２００が動画コンテンツ、画像コンテンツなどにも対応している場合にはそれらも表示される。
さらに、入力部２０９と表示部２１１によりタッチスクリーンが構成される場合には、表示部２１１には入力部２０９としてのソフトボタン、音量調整、コンテンツ選択などの個々の操作画面などのユーザインターフェース画像も表示される。
通信部２１０は、端末装置１００との通信を行うものである。通信部２１０の構成は端末装置におけるものと同様である。通信部２１０で受信した端末装置からの音声データはサウンドＤＳＰ２１５に供給される。
また、通信方式としてBluetoothを用いる場合、シリアルポートプロファイルを用いて、コンテンツ再生装置２００と端末装置１００間で、第１のアプリケーション情報、共有情報、操作情報などの送受信を行われる。また、コンテンツ再生装置２００と端末装置１００との接続にＵＳＢを用いる場合には、ｉＡＰを用いて第１のアプリケーション情報、共有情報、操作情報などの任意の情報の送受信が可能となる。
ただし、接続方法はいずれの方法であってもよい。また、Bluetooth、ＵＳＢ以外にも任意のデータ通信が可能な接続方法であればどのようなものを採用してもよい。
ＵＳＢ端子２１２は、コンテンツ再生装置２００に外部装置、外部記録媒体などを接続するためのＵＳＢ規格に準拠した接続端子である。ＵＳＢ端子２１２には例えば、音声データは格納する外部ＨＤＤ（Hard Disc Drive）、ＵＳＢメモリなどの外部ストレージが接続される。外部ストレージに格納された音声データは制御部２０１による制御のもと電子ボリューム２０５、アンプ部２０６を介してスピーカ２０７へ送られ、スピーカ２０７により音声として出力される。
フラッシュＲＯＭ２１３は不揮発性メモリであり、Bluetooth機器に関する情報である機器情報やラジオ放送の周波数情報といった各種のデータが格納される。そして、格納された機器情報や周波数情報が制御部２０１からの要求に応じて読出され、制御部２０１に供給される。
マイクロホン２１４は、ユーザが発した音声を取得するものであり、マイクロホン２１４に入力された声は音声信号に変換され、アプリケーションプロセッサ２１６に供給される。音声信号はアプリケーションプロセッサ２１６によりサウンドＤＳＰ２１５に供給される。
サウンドＤＳＰ２１５は、通信部２１０としてのBluetoothモジュールなどから供給された音声データに対して所定の音声信号処理を施して電子ボリューム２０５に供給する。音声信号は電子ボリューム２０５、アンプ部２０６を介して最終的に音声としてスピーカ２０７から出力される。
また、サウンドＤＳＰ２１５は、マイクロホン２１４からの音声信号に対して、ノイズキャンセリング処理を施す。ノイズキャンセリングの手法は種々提案されているため、任意の手法を利用してノイズキャンセリング処理を行うとよい。ノイズキャンセリングの手法としては、例えば、マイクロホン２１４で取得した騒音、環境音とは逆の位相の音波成分を発生させて互いを消し合うことにより、ユーザの声以外のノイズを低減させる方法などがある。
アプリケーションプロセッサ２１６は、端末装置における情報処理アプリケーションの動作に対応してコンテンツ再生装置２００側で所定の処理を行うものである。アプリケーションプロセッサ２１６は、所定のアプリケーションを実行することにより情報取得部２１７、および表示制御部２１８として機能する。
情報取得部２１７は、端末装置１００から送信された共有情報を通信部２１０を介して取得する。また、情報取得部２１７は、端末装置１００においてユーザにより行われたアプリケーションの選択操作を示す情報（操作情報）を通信部２１０を介して取得する。
表示制御部２１８は、情報取得部２１７により取得した共有情報に基づいて、表示部２１１における表示制御を行うものである。また、アプリケーションの選択を示すカーソルなどの表示制御も行う。さらに、操作情報に基づいた表示部２１１における表示の更新処理も行う。これら表示制御の詳細については後述する。
本実施の形態においては、コンテンツ再生装置２００には、チューナ、ＵＳＢ接続されており音声データを蓄えた外部ストレージ、ディスク媒体モジュールの３つのコンテンツソースを有している。ただし、コンテンツソースの数および種類はそれに限られるものではない。１つのコンテンツソースを備えていてもよいし、より多くのコンテンツソースを備えていてもよい。
図６は、コンテンツ再生装置２００のフロントパネルの外観構成の一例を示す図である。図６においては、コンテンツ再生装置２００のフロントパネルに設けられた入力部２０９および表示部２１１が示されている。
コンテンツ再生装置２００の表示部２１１には共有情報で示されたアプリケーションを示す複数のアイコン２３１、２３１、・・が表示されている。本実施の形態では、コンテンツ再生装置２００のコンテンツソースと端末装置１００においてユーザにより選択されたアプリケーションを示すアイコンが表示されることとなる。
図６に示す例においては、ユーザにより選択されたアプリケーションは表示部２１１の略中央において表示されることとなる。図６においてはＵＳＢが選択されている。そして、ユーザが異なるアプリケーションを選択すると、図６Ａに示される状態からアイコンが横に移動し、図６Ｂに示す状態となる。図６Ｂにおいては、表示部２１１の略中央には次に選択されたＭＵＳＩＣのアイコンが表示される。なお、「ＵＳＢ」とは、ＵＳＢ端子２１２に接続された外部ストレージに保存された音声データを再生するアプリケーションを示すアイコンである。また、「ＭＵＳＩＣ」はディスク媒体モジュールの音声データを再生するアプリケーションを示すアイコンである。
なお、図６に示されるコンテンツ再生装置２００の外観構成、表示部２１１における表示態様はあくまで一例であり、それらは図６に示されるものに限られるものではない。例えば、コンテンツ再生装置２００における表示も端末装置における表示と同様に、アイコンを一列ではなく、複数列に並べて表示してもよい。
［１−３．端末装置とコンテンツ再生装置間における処理］
次に、上述した端末装置１００とコンテンツ再生装置２００間における処理について説明する。
本技術においては、第１の装置であるコンテンツ再生装置２００の表示部２１１と、第２の装置である端末装置１００の表示部１０６に、共有するアプリケーションを示すアイコンが表示される。また、いずれか一方の装置においてアプリケーションの選択操作を行うと、それに連動して他方の装置において、同一のアプリケーションを選択する動作が行われる。
よって、例えば、端末装置１００におけるアプリケーションをコンテンツ再生装置２００に対する入力で選択することが可能となる。そして、アプリケーション選択後、一方の装置においてアプリケーション決定操作を行うと、そのアプリケーションを備える他方の装置においてアプリケーション決定がなされてそのアプリケーションが起動することなる。よって、一方の装置に対する操作で、他方の装置におけるアプリケーションの選択および起動が可能となる。
また、コンテンツ再生装置２００のマイクロホン２１４に対して音声入力を行うと、その音声が端末装置１００に送信され、端末装置１００において音声認識およびその音声認識により抽出されたキーワードによりアプリケーションの起動／動作が行われる。よって、ユーザは、端末装置１００に触れることなく端末装置１００におけるアプリケーションを利用することができる。
図７はコンテンツ再生装置２００と端末装置１００間の情報の受け渡しの説明するための概念図である。図８はコンテンツ再生装置２００と端末装置１００間における処理を示すシーケンス図である。図９は、コンテンツ再生装置２００と端末装置１００においてアプリケーションの選択が同期している状態を示す図である。
まず、処理の前提として、図７に示されるように、端末装置１００には例えば、ゲーム、天気、ＭＡＰなどの複数のアプリケーションがインストールされている。また、上述したように情報処理アプリケーションもインストールされているものとする。
そして、事前に、図７中（１）に示されるように、ユーザは端末装置１００にインストールされているアプリケーションの中からコンテンツ再生装置２００と共有するアプリケーションを選択しており、情報取得部１２１は、その選択されたアプリケーションの情報（第２のアプリケーション情報）を取得しているものとする。
また、コンテンツ再生装置２００は、１または複数のコンテンツソースを備える。図５および図７に示されるように本実施の形態においては、コンテンツ再生装置２００はラジオチューナ、ＵＳＢ接続され、音声データを蓄えた外部ストレージ、ディスク媒体モジュールの３つのコンテンツソースを有している。ただし、コンテンツソースの数および種類はそれに限られるものではない。
まず、ステップＳ１で、コンテンツ再生装置２００と端末装置１００との接続が行われる。接続は上述したように双方の通信部においてBluetooth、ＵＳＢ接続などの方法により行われる。Bluetoothで接続された場合にはシリアルポートプロファイルを利用してコンテンツ再生装置２００と端末装置１００間の情報の送受信が行われる。ＵＳＢにより接続された場合にはｉＡＰを利用してコンテンツ再生装置２００と端末装置１００間の情報の送受信が行われる。
コンテンツ再生装置２００と端末装置１００との接続が確立した場合、次にステップＳ２で、端末装置１００からコンテンツ再生装置２００に対して接続完了通知が送信される。なお、図８に示される処理とは逆に、端末装置１００からコンテンツ再生装置２００に対して接続がなされ、コンテンツ再生装置２００から端末装置１００へ接続完了通知がなされるようにしてもよい。
次にステップＳ３で、図７中（２）に示されるように、コンテンツ再生装置２００から端末装置１００に対して、コンテンツ再生装置２００が備えるコンテンツソース再生用アプリケーションの種類を示す情報（第１のアプリケーション情報）が送信される。図７においては、コンテンツ再生装置２００がチューナ、ＵＳＢ接続された外部ストレージ、ディスク媒体モジュールの３つのコンテンツソースを有していることを示す情報がコンテンツ再生装置２００に送信される。
次にステップＳ４で、端末装置１００の共有情報生成部１２２は、ユーザにより選択された第２のアプリケーション情報と、第１のアプリケーション情報とをまとめて、双方の装置のアプリケーション情報を共存させることにより共有情報を生成する。共有情報は、図４を参照して上述したように、アプリケーションの種別が順序付けられたリスト形式のものである。共有情報にはコンテンツ再生装置２００のアプリケーションと端末装置１００とアプリケーションの両方が含まれている。
次にステップＳ５で、図４中の（３）に示されるように、端末装置１００の送信制御部１２３の制御のもと、端末装置１００からコンテンツ再生装置２００に対して共有情報が送信される。この共有情報によってコンテンツ再生装置２００と端末装置１００とは互いのアプリケーションの情報を共有する。そして、ステップＳ６で、端末装置１００の表示制御部１２４は共有情報に基づいた表示処理を行う。これにより、図９Ａ上段に示されるように、端末装置１００の表示部１０６においてコンテンツ再生装置２００におけるコンテンツソースと、端末装置１００においてユーザが選択したアプリケーションとを示すアイコンが表示される。
また、ステップＳ７においても同様に、コンテンツ再生装置２００の表示制御部２１８は、共有情報に基づいた表示処理を行う。これにより、図９Ｂ上段に示されるように、コンテンツ再生装置２００の表示部２１１においてコンテンツ再生装置２００におけるコンテンツソースと、端末装置１００においてユーザが選択したアプリケーションとを示すアイコンが表示される。
なお、図８のシーケンス図においては端末装置１００における表示制御の後にコンテンツ再生装置２００における表示制御が行われるように記載されているが、順序はそれに限られず、双方の表示制御はほぼ同時に行われるのが望ましい。
次にステップＳ８で、コンテンツ再生装置２００は共有情報に示されるアプリケーションの中の１番目のアプリケーションを選択状態にする。選択状態とは、例えば、カーソルの移動によってアプリケーションの選択を行う場合にはそのカーソルを一番目のアプリケーションに合わせることである。そして、ステップ９で端末装置１００側の情報取得部１２１は、コンテンツ再生装置２００の操作情報を取得する。なお、ステップＳ９で取得される操作情報は、共有情報で示されるアプリケーションの中の１番目に位置するアプリケーションが選択されたことを示す情報である。
次にステップＳ１０で、端末装置１００の表示制御部１２４は、操作情報に基づいて端末装置１００の表示部１０６における表示を更新する。なお、この場合、表示制御部１２４は、共有情報において一番目に位置するアプリケーションが選択されたことを示す表示となるように表示制御を行う。例えば、アプリケーション選択用カーソルを１番目のアプリケーションに合わせるなどである。
以上、ステップＳ１０までの処理により、コンテンツ再生装置２００と端末装置１００とが互いにコンテンツ再生装置２００のソースと、端末装置１００のアプリケーションを共有した同期状態となる。
次にステップＳ１１で、コンテンツ再生装置２００は、音声認識モードへの遷移を指示するユーザからの入力操作を受け付ける。この入力はコンテンツ再生装置２００の入力部２０９に対して行われる。音声認識モードへの遷移を指示する入力操作を受け付けると、次にステップＳ１２で、コンテンツ再生装置２００から端末装置１００に対して、音声認識モードへの遷移の要求が行われる。
次にステップＳ１３で、端末装置１００は、コンテンツ再生装置２００からの要求に従い音声認識モードに遷移する。端末装置１００が音声認識モードに遷移すると、音声認識部１０９がオンとなる。さらに、音声認識部１０９に対する音声入力のソースをマイクロホン１１２から通信部１０７に切り替える。これにより、マイクロホン１１２に入力される音声ではなく、通信部１０７を介してコンテンツ再生装置２００から入力される音声によって端末装置１００が操作可能となる。よって、コンテンツ再生装置２００が端末装置１００の音声入力源として機能することとなる。
次にステップＳ１４で、端末装置１００はコンテンツ再生装置２００に対して音声認識モードに遷移したことの通知を行う。そして、ステップＳ１５で、音声認識モードに遷移したことの通知を受けたコンテンツ再生装置２００は、音声取得モードに遷移して、マイクロホン２１４をオンにして音声取得を開始する。この状態で、ユーザは、コンテンツ再生装置２００のマイクロホン２１４に対して起動したいアプリケーション名、キーワードなどを声で入力する。
コンテンツ再生装置２００のマイクロホン２１４でユーザからの音声を取得すると、サウンドＤＳＰ２１５により音声信号に対してノイズキャンセリング処理が施される。そして、ステップＳ１６でコンテンツ再生装置２００は、通信部２１０を介してその音声信号を端末装置１００に送信する。
次にステップＳ１７で、端末装置１００の音声認識部１０９は音声信号に対して音声認識処理を行ってキーワードを抽出する。その抽出結果を示すキーワード情報は、アプリケーションプロセッサ１１０に供給される。そしてステップＳ１８で、アプリケーションプロセッサ１１０のアプリケーション実行部１２５は、供給されたキーワードに対応するアプリケーションを起動する。
また、アプリケーション実行部１２５は、アプリケーションの起動後に音声認識部１０９からキーワードが供給されると、そのキーワードに対応したアプリケーションの動作を実行する。キーワードに基づきアプリケーション動作させる方法としては、上述したように、例えば、予め、アプリケーションの動作と対応したキーワードをテーブルとして保持しておき、そのテーブルを参照することにより、キーワードに対応する動作を実行する。
例えば、ナビゲーション用アプリケーションの場合、「ナビゲーション」と音声入力してアプリケーションを起動させた後、「東京駅」と目的地を示すキーワードを音声入力する。そうすると、ナビゲーション用アプリケーションがユーザの現在地から東京駅までのナビゲーションを開始する。
なお、音声入力によりアプリケーションの起動とアプリケーションの動作を指示する場合、「ナビゲーション、東京駅」と、アプリケーションの起動を指示するキーワードと、アプリケーションの動作を指示するキーワードとを連続で入力できるようにしてもよい。
また、ユーザが使用するアプリケーションがすでに起動している場合には、アプリケーションを起動させるための音声入力は行わずに、アプリケーションに実行して欲しい動作のみを音声入力すればよい。
例えば、ラジオアプリケーションが既に起動している場合、「ＦＭ７９．５」などのラジオ局を示すキーワードを音声入力すれば、ラジオアプリケーションが「ＦＭ７９．５ＭＨｚ」にチューニングする。
また、動画共有サイト用アプリケーションが起動している場合には「ビートルズ」などの検索対象となるキーワードを音声入力すれば、動画共有サイト用アプリケーションが「ビートルズ」について検索を行い、検索結果を提示し、動画の再生を行う。
このように、本技術によれば、コンテンツ再生装置２００に対して音声入力を行うことにより端末装置１００のアプリケーションを起動、動作させることができる。例えば、例えばユーザが車両で運転中である場合、ユーザは、スマートフォンなどの端末装置１００を操作することはできない。しかし、コンテンツ再生装置２００がカーオーディオ装置である場合、本技術を用いることによって、ユーザが車両で運転中であっても、コンテンツ再生装置２００に対する音声入力により端末装置１００を操作することができる。
また、端末装置１００に送信する音声信号に対してノイズキャンセリング処理を施すことにより、車内などの騒音環境下であっても、端末装置１００の音声認識率を落とすことなく使用することが可能となる。
スマートフォンなどの端末装置を所有しているユーザにとっては、音声認識用モジュールを備える高価なオーディオ機器を購入することなく、比較的低価格なオーディオ機器で音声認識機能を利用することができる。
さらに、アプリケーションを起動させるための音声入力は行わずに、アプリケーションに実行して欲しい動作を示すキーワードのみを音声入力することにより、アプリケーションの起動とキーワードに基づく処理を行うようにしてもよい。詳しくは、キーワードが音声入力されると、そのキーワードに対応した動作を実行するのに最適なアプリケーションを端末装置が判断して、自動でアプリケーションを起動した後にキーワードに基づく動作を実行するようにする。
なお、上述のように、端末装置１００とコンテンツ再生装置２００とは、互いの有するアプリケーションについての情報を共有している。そこで、ステップＳ１０において、共有情報および選択情報に基づいて表示更新を行ったのと同様にして、端末装置１００の表示制御部１２４は、キーワードにより起動されたアプリケーションを示す情報を表示部１０６に表示するようにするとよい。さらに、コンテンツ再生装置２００の表示制御部２１８は、端末装置１００において起動したアプリケーションを表示部２１１に表示するようにするとよい。これにより、ユーザは、端末装置１００の表示部１０６を目視することにより、起動しているアプリケーションを確認することができる。
また、端末装置１００とコンテンツ再生装置２００は、互いの有するアプリケーションについての情報を共有している。したがって、端末装置１００とコンテンツ再生装置２００は互いが有するアプリケーションを把握しており、図９に示されるように、端末装置１００とコンテンツ再生装置２００の両方において互いのアプリケーションが表示される。よって、端末装置１００の入力部１０５に対する入力操作に応じて、端末装置１００からコンテンツ再生装置２００に操作情報を送信することにより、端末装置１００に対する操作でコンテンツ再生装置２００のアプリケーションを起動、動作させるようにしてもよい。また、コンテンツ再生装置２００に対して入力された音声を端末装置１００に送信し、端末装置１００のアプリケーションプロセッサ１１０が入力された音声に応じた処理を行い、コンテンツ再生装置２００に対してアプリケーションの起動、動作の指示を行うようにしてもよい。これにより、端末装置１００とコンテンツ再生装置２００とでアプリケーションの起動および動作がシームレスなものとなり、ユーザは装置のいずれかの装置であるかを意識することなくアプリケーションを使用することが可能となる。
車両の運転中は携帯電話機、スマートフォンなどの端末装置１００を操作することは法律により禁止されている。そこで、コンテンツ再生装置２００を車両におけるカーオーディオシステムとして利用し、コンテンツ再生装置２００に対する音声入力で端末装置１００のアプリケーションを起動／動作させるようにする。これにより、端末装置１００、コンテンツ再生装置２００を直接操作しなくても端末装置１００におけるアプリケーションの起動／動作が可能となる。
＜６．変形例＞
以上、本技術の一実施の形態について具体的に説明したが、本技術は、上述の実施形態に限定されるものではなく、本技術の技術的思想に基づく各種の変形が可能である。
実施の形態では第１の装置をコンテンツ再生装置２００とし、第２の装置を端末装置１００としたが、具体的な装置はそれに限られるものではない。双方向通信を行うことができる装置であればどのようなものにも適用することができる。例えば、第１の装置、第２の装置共に携帯電話機、スマートフォン、タブレット端末などの端末装置１００であってもよい。また、一方の装置がテレビジョン受像機であり、他方の装置が端末装置１００であるという組み合わせでもよい。
なお、本技術は以下のような構成も取ることができる。
（１）第１の装置と接続され、該第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において動作し、
前記第１の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得する情報取得部と、
該情報取得部により取得した前記第１のアプリケーション情報に基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成する共有情報生成部と、
前記共有情報を、前記通信部を介して第１の装置に送信する送信制御部と、
前記音声認識部から供給されたキーワードに基づいてアプリケーションを実行するアプリケーション実行部と
を備える
情報処理装置。
（２）前記アプリケーション実行部は、前記キーワードに基づいて前記アプリケーションを起動させる
前記（１）に記載の情報処理装置。
（３）前記アプリケーション実行部は、前記キーワードに基づいて前記アプリケーションを動作させる
前記（１）または（２）に記載の情報処理装置。
（４）前記第１の装置から送信された音声はノイズキャンセル処理が施されたものである
前記（１）から（３）のいずれかに記載の情報処理装置。
（５）前記第２の装置は、音声を取得するマイクロホンを備え、
前記アプリケーション実行部は、入力音声を前記マイクロホンから供給される音声から前記第１の装置から送信される音声に切り替える
前記（１）から（４）のいずれかに記載の情報処理装置。
（６）前記情報取得部はさらに、前記第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得し、
前記共有情報生成部は、前記第１のアプリケーション情報と前記第２のアプリケーション情報とに基づいて前記共有情報を生成する
前記（１）から（５）のいずれかに記載の情報処理装置。
（７）前記第２のアプリケーション情報は、前記第２の装置が有するアプリケーションの中からユーザにより選択されたアプリケーションを示す情報である
前記（１）から（６）のいずれかに記載の情報処理装置。
（８）前記共有情報に基づいて前記第２の装置が備える表示部における前記アプリケーションの表示制御を行う表示制御部をさらに備える
前記（１）から（７）のいずれかに記載の情報処理装置。
（９）前記表示制御部は、前記表示部に、前記第２の装置が有するアプリケーションの中からユーザにより選択されたアプリケーションと、前記第１の装置が有するアプリケーションとを示すアイコンが表示されるように表示制御を行う
前記（１）から（８）のいずれかに記載の情報処理装置。
（１０）第１の装置と接続され、該第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において、
前記第１の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得し、
該情報取得部により取得した前記第１のアプリケーション情報に基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成し、
前記共有情報を、前記通信部を介して第１の装置に送信し、
前記音声認識部から供給されたキーワードに基づいてアプリケーションを実行する
情報処理方法。
（１１）第１の装置と接続され、該第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において、
前記第１の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得し、
該情報取得部により取得した前記第１のアプリケーション情報に基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成し、
前記共有情報を、前記通信部を介して第１の装置に送信し、
前記音声認識部から供給されたキーワードに基づいてアプリケーションを実行する
情報処理方法をコンピュータに実行させる情報処理プログラム。
（１２）接続された他の装置から送信された音声からキーワードを抽出する音声認識部と、
前記他の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得する情報取得部と、
該情報取得部により取得した前記第１のアプリケーション情報に基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成する共有情報生成部と、
前記共有情報を、前記通信部を介して第１の装置に送信する送信制御部と、
前記音声認識部から供給されたキーワードに基づいてアプリケーションを実行するアプリケーション実行部と
を備える端末装置。
１００・・・端末装置
１０５・・・入力部
１０６・・・表示部
１０７・・・通信部
１０９・・・音声認識部
１１０・・・アプリケーションプロセッサ
１２１・・・情報取得部
１２２・・・共有情報生成部
１２３・・・送信制御部
１２４・・・表示制御部
１２５・・・アプリケーション実行部
２００・・・コンテンツ再生装置
２０９・・・入力部
２１０・・・通信部
２１１・・・表示部
２１４・・・マイクロホン
２１６・・・アプリケーションプロセッサ
２１７・・・情報取得部
２１８・・・表示制御部

Claims (9)

  1. 第１の装置と接続され、該第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において動作し、
    前記第１の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得し、さらに前記第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得する情報取得部と、
    該情報取得部により取得した前記第１のアプリケーション情報と前記第２のアプリケーション情報とに基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成する共有情報生成部と、
    前記共有情報を、前記通信部を介して第１の装置に送信する送信制御部と、
    前記音声認識部から前記キーワードが供給されると、前記アプリケーションの起動に対応した前記キーワードの場合には該キーワードに応じた前記第１の装置または前記第２の装置が有するアプリケーションを起動させ、さらに、前記アプリケーションの動作に対応した前記キーワードの場合には該キーワードに応じて前記アプリケーションを動作させるアプリケーション実行部と
    を備える
    情報処理装置。
  2. 前記第１の装置から送信された音声はノイズキャンセル処理が施されたものである
    請求項１に記載の情報処理装置。
  3. 前記第２の装置は、音声を取得するマイクロホンを備え、
    前記アプリケーション実行部は、入力音声を前記マイクロホンから供給される音声から前記第１の装置から送信される音声に切り替える
    請求項１に記載の情報処理装置。
  4. 前記第２のアプリケーション情報は、前記第２の装置が有するアプリケーションの中からユーザにより選択されたアプリケーションを示す情報である
    請求項１に記載の情報処理装置。
  5. 前記共有情報に基づいて前記第２の装置が備える表示部における前記アプリケーションの表示制御を行う表示制御部をさらに備える
    請求項１に記載の情報処理装置。
  6. 前記第２の装置が備える表示部における表示制御を行う表示制御部を備え、
    前記表示制御部は、前記表示部に、前記第２の装置が有するアプリケーションの中からユーザにより選択されたアプリケーションと、前記第１の装置が有するアプリケーションとを示すアイコンが表示されるように表示制御を行う
    請求項１に記載の情報処理装置。
  7. 第１の装置と接続され、該第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において、
    前記第１の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得し、さらに前記第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得し、
    取得した前記第１のアプリケーション情報と前記第２のアプリケーション情報とに基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成し、
    前記共有情報を、前記通信部を介して第１の装置に送信し、
    前記音声認識部から前記キーワードが供給されると、前記アプリケーションの起動に対応した前記キーワードの場合には該キーワードに応じた前記第１の装置または前記第２の装置が有するアプリケーションを起動させ、さらに、前記アプリケーションの動作に対応した前記キーワードの場合には該キーワードに応じて前記アプリケーションを動作させる情報処理方法。
  8. 第１の装置と接続され、該第１の装置から送信された音声からキーワードを抽出する音声認識部を備える第２の装置において、
    前記第１の装置が有するアプリケーションを示す第１のアプリケーション情報を前記第２の装置における通信部を介して取得し、さらに前記第２の装置が有するアプリケーションを示す第２のアプリケーション情報を取得し、
    取得した前記第１のアプリケーション情報と前記第２のアプリケーション情報とに基づいて、前記第１の装置と前記第２の装置とが共有する共有情報を生成し、
    前記共有情報を、前記通信部を介して第１の装置に送信し、
    前記音声認識部から前記キーワードが供給されると、前記アプリケーションの起動に対応した前記キーワードの場合には該キーワードに応じた前記第１の装置または前記第２の装置が有するアプリケーションを起動させ、さらに、前記アプリケーションの動作に対応した前記キーワードの場合には該キーワードに応じて前記アプリケーションを動作させる情報処理方法をコンピュータに実行させる情報処理プログラム。
  9. 接続された他の装置から送信された音声からキーワードを抽出する音声認識部と、
    前記他の装置が有するアプリケーションを示す第１のアプリケーション情報を通信部を介して取得し、さらに自身が有するアプリケーションを示す第２のアプリケーション情報を取得する情報取得部と、
    該情報取得部により取得した前記第１のアプリケーション情報と前記第２のアプリケーション情報とに基づいて、前記他の装置と自身とが共有する共有情報を生成する共有情報生成部と、
    前記共有情報を、前記通信部を介して前記他の装置に送信する送信制御部と、
    前記音声認識部から前記キーワードが供給されると、前記アプリケーションの起動に対応した前記キーワードの場合には該キーワードに応じた前記他の装置または前記自身が有するアプリケーションを起動させ、さらに、前記アプリケーションの動作に対応した前記キーワードの場合には該キーワードに応じて前記アプリケーションを動作させるアプリケーション実行部と
    を備える端末装置。
JP2012065840A 2012-03-22 2012-03-22 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置 Expired - Fee Related JP5928048B2 (ja)

Priority Applications (7)

Application Number Priority Date Filing Date Title
JP2012065840A JP5928048B2 (ja) 2012-03-22 2012-03-22 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置
PCT/JP2013/058453 WO2013141390A1 (en) 2012-03-22 2013-03-15 Information processing device, information processing method, information processing program, and terminal device
EP13714011.7A EP2828736B1 (en) 2012-03-22 2013-03-15 Information processing device, information processing method, information processing program, and terminal device
CN201380014186.XA CN104205038A (zh) 2012-03-22 2013-03-15 信息处理设备，信息处理方法，信息处理程序和终端设备
US14/379,888 US10452347B2 (en) 2012-03-22 2013-03-15 Information processing device, information processing method, and terminal device for generating information shared between the information processing device and the terminal device
US16/044,640 US11327712B2 (en) 2012-03-22 2018-07-25 Information processing device, information processing method, information processing program, and terminal device
US17/729,956 US12067332B2 (en) 2012-03-22 2022-04-26 Information processing device, information processing method, information processing program, and terminal device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2012065840A JP5928048B2 (ja) 2012-03-22 2012-03-22 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2016091236A Division JP6226020B2 (ja) 2016-04-28 2016-04-28 車載装置、情報処理方法および情報処理システム

Publications (2)

Publication Number Publication Date
JP2013198085A JP2013198085A (ja) 2013-09-30
JP5928048B2 true JP5928048B2 (ja) 2016-06-01

Family

ID=48045633

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2012065840A Expired - Fee Related JP5928048B2 (ja) 2012-03-22 2012-03-22 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置

Country Status (5)

Country Link
US (3) US10452347B2 (ja)
EP (1) EP2828736B1 (ja)
JP (1) JP5928048B2 (ja)
CN (1) CN104205038A (ja)
WO (1) WO2013141390A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11360791B2 (en) 2017-03-28 2022-06-14 Samsung Electronics Co., Ltd. Electronic device and screen control method for processing user input by using same

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5928048B2 (ja) 2012-03-22 2016-06-01 ソニー株式会社 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置
USD744531S1 (en) * 2013-02-23 2015-12-01 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
USD745043S1 (en) * 2013-02-23 2015-12-08 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
USD744532S1 (en) * 2013-02-23 2015-12-01 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
USD744530S1 (en) * 2013-02-23 2015-12-01 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
US9431008B2 (en) * 2013-05-29 2016-08-30 Nuance Communications, Inc. Multiple parallel dialogs in smart phone applications
USD746301S1 (en) * 2013-11-14 2015-12-29 Microsoft Corporation Display screen with graphical user interface
WO2015144536A1 (en) * 2014-03-27 2015-10-01 Sony Corporation Electronic device and method for identifying input commands of a user
JP2016009199A (ja) * 2014-06-20 2016-01-18 Ｎｅｃパーソナルコンピュータ株式会社 情報処理装置
JP2016024212A (ja) * 2014-07-16 2016-02-08 ソニー株式会社 情報処理装置、情報処理方法およびプログラム
KR101592755B1 (ko) * 2014-08-25 2016-02-18 현대자동차주식회사 사운드 데이터 양방향 미러링 시스템
WO2017039575A1 (en) * 2015-08-28 2017-03-09 Hewlett-Packard Development Company, L.P. Remote sensor voice recognition
JP2017091030A (ja) * 2015-11-05 2017-05-25 ヤマハ株式会社 コンテンツ再生システム
US9653075B1 (en) * 2015-11-06 2017-05-16 Google Inc. Voice commands across devices
JP6744026B2 (ja) 2016-08-04 2020-08-19 日本電気株式会社 携帯端末、管理サーバ、作業引継支援システム、作業引継支援方法、およびプログラム
JP6078685B1 (ja) * 2016-11-15 2017-02-08 京セラ株式会社 電子機器
US10553236B1 (en) * 2018-02-27 2020-02-04 Amazon Technologies, Inc. Multichannel noise cancellation using frequency domain spectrum masking
CN108600911B (zh) * 2018-03-30 2021-05-18 联想(北京)有限公司 一种输出方法及电子设备
JP7137815B2 (ja) * 2018-04-19 2022-09-15 Jcc株式会社 録画再生システム
JP2022051970A (ja) 2019-02-01 2022-04-04 ソニーグループ株式会社 情報処理装置、情報処理方法、およびプログラム
KR20210030160A (ko) * 2019-09-09 2021-03-17 삼성전자주식회사 전자 장치 및 이의 제어 방법
JP7405660B2 (ja) * 2020-03-19 2023-12-26 Ｌｉｎｅヤフー株式会社 出力装置、出力方法及び出力プログラム
CN114530148B (zh) * 2020-10-30 2025-10-24 华为终端有限公司 一种控制方法、装置及电子设备
CN112558914B (zh) * 2020-12-15 2024-06-11 汉中信邦科技有限公司 提示信息的方法、装置、电子设备和介质
CN118245150A (zh) * 2021-05-31 2024-06-25 华为技术有限公司 一种共享桌面的方法和电子设备
WO2023154080A1 (en) * 2022-02-09 2023-08-17 Google Llc Providing contextual automated assistant action suggestion(s) via a vehicle computing device
WO2025154596A1 (ja) * 2024-01-19 2025-07-24 ヤマハ発動機株式会社 ストラドルドビークルシステム、制御方法、及びアプリケーションプログラム

Family Cites Families (68)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0962630A (ja) 1995-08-22 1997-03-07 Fujitsu Ltd 汎用アプリケーションプログラム共有システム
JPH10133984A (ja) 1996-11-01 1998-05-22 Canon Inc 通信会議システム及び方法並びに端末装置
JP3846666B2 (ja) 1998-09-24 2006-11-15 富士通株式会社 共有画面制御装置
US6185535B1 (en) 1998-10-16 2001-02-06 Telefonaktiebolaget Lm Ericsson (Publ) Voice control of a user interface to service applications
JP3846161B2 (ja) * 2000-06-20 2006-11-15 セイコーエプソン株式会社 音声による情報提供システムおよびその誤動作原因報知方法
US20020097884A1 (en) * 2001-01-25 2002-07-25 Cairns Douglas A. Variable noise reduction algorithm based on vehicle conditions
JP2002229940A (ja) 2001-02-05 2002-08-16 Fuji Xerox Co Ltd 端末装置及びコンピュータプログラム
JP2002237877A (ja) 2001-02-13 2002-08-23 Matsushita Electric Ind Co Ltd ハンズフリーシステム、携帯電話およびハンズフリー装置
US7690017B2 (en) 2001-05-03 2010-03-30 Mitsubishi Digital Electronics America, Inc. Control system and user interface for network of input devices
JP2002335342A (ja) * 2001-05-07 2002-11-22 Nissan Motor Co Ltd 車両用通信装置
CN101149772B (zh) 2002-04-22 2012-11-14 微软公司 应用程序共享安全
JP4867942B2 (ja) 2002-06-21 2012-02-01 アイシン・エィ・ダブリュ株式会社 画像表示装置
US20070180384A1 (en) 2005-02-23 2007-08-02 Demetrio Aiello Method for selecting a list item and information or entertainment system, especially for motor vehicles
DE602005019151D1 (de) 2005-07-18 2010-03-18 Sony Ericsson Mobile Comm Ab Verfahren und System zur gemeinsamen Nutzung von Multimedia-Daten in mehreren Kommunikationsvorrichtungen
US20070039025A1 (en) 2005-08-09 2007-02-15 Nokia Corporation Method for application sharing
JP2007065944A (ja) * 2005-08-31 2007-03-15 Hitachi Ltd 計算機情報の表示方法およびシステム
US20070112571A1 (en) 2005-11-11 2007-05-17 Murugappan Thirugnana Speech recognition at a mobile terminal
US20070136446A1 (en) 2005-12-01 2007-06-14 Behrooz Rezvani Wireless media server system and method
JP4177873B2 (ja) 2006-03-13 2008-11-05 株式会社カシオ日立モバイルコミュニケーションズ 電子機器及びプログラム
US20080006214A1 (en) * 2006-06-22 2008-01-10 Power Robert M Commercial post larval collector habitat
US8564543B2 (en) * 2006-09-11 2013-10-22 Apple Inc. Media player with imaged based browsing
JP4952433B2 (ja) 2007-08-08 2012-06-13 ソニー株式会社 情報処理装置および方法、並びに、情報処理システム
JP4127566B2 (ja) 2007-08-10 2008-07-30 株式会社リコー 電子会議システム
CA2700122A1 (en) 2007-09-18 2009-03-26 Xm Satellite Radio, Inc. Remote vehicle infotainment apparatus and interface
JP2009146146A (ja) 2007-12-13 2009-07-02 Panasonic Corp 情報処理装置およびホームネットワークシステム
JP2009205492A (ja) 2008-02-28 2009-09-10 Hitachi Systems & Services Ltd コンピュータの遠隔操作システム
US9870130B2 (en) 2008-05-13 2018-01-16 Apple Inc. Pushing a user interface to a remote device
JP2009300537A (ja) 2008-06-10 2009-12-24 Fujitsu Ten Ltd 音声作動システム、音声作動方法および車載装置
JP2010130223A (ja) * 2008-11-26 2010-06-10 Fujitsu Ten Ltd 音声操作システムおよび音声操作方法
JP2010130552A (ja) 2008-11-28 2010-06-10 Fujitsu Ten Ltd 遠隔操作システム及び遠隔操作方法
JP5426150B2 (ja) 2008-11-28 2014-02-26 富士通テン株式会社 車載システム、車載装置及びそのコマンドの実行制御方法
JP5306851B2 (ja) * 2009-02-23 2013-10-02 富士通テン株式会社 車載装置及び通信制御方法
JP4402162B2 (ja) 2009-04-24 2010-01-20 パナソニック株式会社 携帯端末の音声認識制御方法及び無線通信システム
JP2010263401A (ja) 2009-05-07 2010-11-18 Alps Electric Co Ltd ハンズフリー通話装置、及び該装置の音声補正方法
JP5424735B2 (ja) * 2009-06-17 2014-02-26 キヤノン株式会社 通信装置及びその制御方法、プログラム
JP5572355B2 (ja) 2009-09-30 2014-08-13 富士フイルム株式会社 レンズアレイ及びレンズアレイ積層体
JP2011118822A (ja) * 2009-12-07 2011-06-16 Nec Casio Mobile Communications Ltd 電子機器、発話検出装置、音声認識操作システム、音声認識操作方法及びプログラム
JP4986248B2 (ja) * 2009-12-11 2012-07-25 沖電気工業株式会社 音源分離装置、方法及びプログラム
KR20110082881A (ko) 2010-01-12 2011-07-20 (주)아이디미디어 휴대전화 컨넥티비티 기반에 차량용 컨버전스 방법 및 그 장치
US20110214162A1 (en) * 2010-02-26 2011-09-01 Nokia Corporation Method and appartus for providing cooperative enablement of user input options
TWM389063U (en) * 2010-03-16 2010-09-21 Wonde Proud Technology Co Ltd Vehicle mobile device control system
JP2011203982A (ja) 2010-03-25 2011-10-13 Fujitsu Ten Ltd 操作システム、操作装置、及び、コマンド実行方法
JP5195810B2 (ja) 2010-04-14 2013-05-15 株式会社デンソー 車両用表示装置
US8494439B2 (en) 2010-05-04 2013-07-23 Robert Bosch Gmbh Application state and activity transfer between devices
JP5560905B2 (ja) * 2010-05-31 2014-07-30 株式会社ナカヨ通信機 遠隔制御システム、制御対象装置、操作端末、および遠隔制御方法
JP5586331B2 (ja) 2010-06-02 2014-09-10 アルパイン株式会社 コンテンツ表示装置およびコンテンツ表示方法
JP5517761B2 (ja) 2010-06-10 2014-06-11 アルパイン株式会社 電子機器および操作キーの割当方法
JP5548541B2 (ja) 2010-07-13 2014-07-16 富士通テン株式会社 情報提供システムおよび車載装置
JP5413321B2 (ja) 2010-07-20 2014-02-12 株式会社デンソー 通信システム、車載端末、および携帯端末
TW201206301A (en) * 2010-07-29 2012-02-01 Hon Hai Prec Ind Co Ltd Enclosure of an electronic device
US20120198080A1 (en) * 2010-08-04 2012-08-02 Yang Ju-Ting Method of Performing Multiple Connection and Related Communication Device
KR101417760B1 (ko) 2010-08-09 2014-07-09 에스케이플래닛 주식회사 Ｃｐｎｓ 환경에서 외부 스피커를 통한 컨텐츠 출력 시스템 및 방법
JP5071534B2 (ja) 2010-08-23 2012-11-14 株式会社デンソー 車載通信システム
WO2012046890A1 (ko) 2010-10-06 2012-04-12 엘지전자 주식회사 이동단말기, 디스플레이 장치 및 그 제어 방법
KR101741551B1 (ko) * 2010-12-20 2017-06-15 엘지전자 주식회사 이동 단말기 및 이것의 애플리케이션 제어 방법
US8996386B2 (en) * 2011-01-19 2015-03-31 Denso International America, Inc. Method and system for creating a voice recognition database for a mobile device using image processing and optical character recognition
JP5234160B2 (ja) * 2011-03-23 2013-07-10 株式会社デンソー 車両用装置および情報表示システム
JP2012208891A (ja) 2011-03-30 2012-10-25 Panasonic Corp 情報システム、車載装置およびプログラム
JP5633460B2 (ja) 2011-04-01 2014-12-03 株式会社デンソー 制御装置
JP5494573B2 (ja) 2011-06-16 2014-05-14 株式会社デンソー 表示装置、携帯通信端末および表示システム
US9159322B2 (en) * 2011-10-18 2015-10-13 GM Global Technology Operations LLC Services identification and initiation for a speech-based interface to a mobile device
JP5548668B2 (ja) * 2011-11-30 2014-07-16 株式会社ホンダアクセス 車載装置と携帯情報端末が連携するシステム
US9162574B2 (en) * 2011-12-20 2015-10-20 Cellco Partnership In-vehicle tablet
RU2607994C2 (ru) 2011-12-22 2017-01-11 Сони Корпорейшн Устройство совместного использования информации, способ совместного использования информации, программа совместного использования информации и оконечное устройство
JP5928048B2 (ja) 2012-03-22 2016-06-01 ソニー株式会社 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置
JP6074150B2 (ja) * 2012-04-06 2017-02-01 クラリオン株式会社 車載情報システム、情報端末、アプリケーション実行方法、プログラム
JP5815584B2 (ja) 2012-04-10 2015-11-17 エムエーエヌ・ディーゼル・アンド・ターボ・フィリアル・アフ・エムエーエヌ・ディーゼル・アンド・ターボ・エスイー・ティスクランド 平衡位置弁スピンドル
JP6477822B2 (ja) 2017-10-12 2019-03-06 ソニー株式会社 端末装置、端末装置の制御方法および制御プログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11360791B2 (en) 2017-03-28 2022-06-14 Samsung Electronics Co., Ltd. Electronic device and screen control method for processing user input by using same

Also Published As

Publication number Publication date
US20150082175A1 (en) 2015-03-19
US20220253278A1 (en) 2022-08-11
CN104205038A (zh) 2014-12-10
US11327712B2 (en) 2022-05-10
JP2013198085A (ja) 2013-09-30
US20190050197A1 (en) 2019-02-14
US10452347B2 (en) 2019-10-22
EP2828736B1 (en) 2017-07-12
EP2828736A1 (en) 2015-01-28
WO2013141390A1 (en) 2013-09-26
US12067332B2 (en) 2024-08-20

Similar Documents

Publication Publication Date Title
JP5928048B2 (ja) 情報処理装置、情報処理方法、情報処理プログラムおよび端末装置
JP6915722B2 (ja) 車載装置、情報処理装置、携帯端末装置、情報処理システム、車載装置の制御方法およびプログラム
JP6477822B2 (ja) 端末装置、端末装置の制御方法および制御プログラム
JP6226020B2 (ja) 車載装置、情報処理方法および情報処理システム
KR20120092315A (ko) 휴대 단말기 및 그의 무선 장치 탐색 방법
JP7243764B2 (ja) 車載装置、携帯端末装置、情報処理システム、車載装置の制御方法およびプログラム
JP6908169B2 (ja) 端末装置
JP6733751B2 (ja) 車載装置、車載装置の制御方法および制御プログラム
US9414179B2 (en) Operational control of an apparatus through a terminal device

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20150128

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20151029

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20151110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151215

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160329

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160411

R151 Written notification of patent or utility model registration

Ref document number: 5928048

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees