JPH09116648A - 携帯用通信装置 - Google Patents

Abstract

(57)【要約】 【課題】 マルチメディア対応の携帯用情報端末は、聴
覚障害者がＦＡＸ機能やパソコン通信機能を使って相手
と通信ができるが、データの送受信には音声を利用でき
ないため電話による対話のように簡易な通信ができな
い。 【解決手段】 携帯用情報端末１から入力された文字デ
ータを音声合成装置１０で音声合成し、音声変換装置１
１で音声信号に変換してモデム２を通して相手端末装置
１４に送信し、相手端末装置から受信した音声信号を音
声理解装置１２で音声認識し、文字変換装置１３で文字
信号に変換して携帯用情報端末のディスプレイ画面に文
字表示する。これにより、電話による通話に近い形で聴
覚障害者と健常者が簡易に通話できるようにする。

Description

【発明の詳細な説明】

【０００１】

【発明の属する技術分野】本発明は、マルチメディアに
対応した携帯用情報端末や携帯用電話などの携帯用通信
装置に関する。

【０００２】

【従来の技術】携帯用通信装置としては、音声データを
送受信できる携帯用電話の他に、マルチメディアに対応
した携帯用情報端末がある。

【０００３】携帯用情報端末は、図６に示す構成により
通信先の装置との間でデータ通信を可能にしている。

【０００４】同図において、携帯用情報端末１は、ＦＡ
Ｘ機能付通信モデム２により送受信信号を変復調して電
話回線３に接続する。電話回線３は、ＢチャンネルのＩ
ＳＤＮ（サービス総合ディジタル網）４を通して通信先
の電話回線５との間でデータ送受信する。電話回線５に
接続される通信先のＦＡＸ機能付通信モデム６は、電話
回線５との間で授受するデータの変復調を行う。ディジ
タル回線用の回線終端装置７は、モデム６と通信先の装
置８を接続する。装置８は、データ通信機能に応じたホ
ストコンピュータやパーソナルコンピュータ、ＦＡＸ、
携帯用情報端末などの装置である。

【０００５】このような構成において、携帯用情報端末
１は、装置８との間で以下の機能によるデータ通信を可
能にしている。

【０００６】（１）ノートテーキング…手書き文字認識
や自筆のイメージのまま処理できる簡易的なワープロ機
能。

【０００７】（２）メッセージデータ通信…外出先や出
張先で会議や商談などの報告や急な問い合わせ、連絡を
簡単に行えるＦＡＸ通信・Ｅメール通信機能。

【０００８】（３）パソコンデータのビュワー…外出先
から電子データをアクセスする場合、赤外線通信により
ワイヤレスでオフィスのパソコンとリンクさせたり、モ
デムを使って情報サービスから必要なデータをリモート
アクセスし、データを見たり貯蓄できる機能。

【０００９】

【発明が解決しようとする課題】従来の携帯用電話は、
音声のみの通信になるため、聴覚障害者がこれを利用す
ることができない。この点、携帯用情報端末は、聴覚障
害者がＦＡＸ機能やパソコン通信機能を使って相手と通
信ができる。

【００１０】しかしながら、聴覚障害者と通信を行う相
手は、データの受信には文字やイメージ（絵や図面）の
ハードコピーやソフトコピーの読取りになり、データの
送信には手書きやキーボード入力の文字やマウス等で描
画したイメージになる。

【００１１】このため、聴覚障害者との通信には、健常
者であっても直接に会話を行うことができず、間接的な
対話になってしまい、健常者同士の電話による対話のよ
うに簡易な通信ができない。

【００１２】本発明の目的は、電話による通話に近い形
で聴覚障害者と健常者が簡易に通話できる携帯用通信装
置を提供することにある。

【００１３】

【課題を解決するための手段】本発明は、通信回線との
接続を得るモデムと、文字データを画面表示及び入力で
きる文字入出力手段とを備えて相手端末装置との間で通
信を行う携帯用通信装置において、前記文字入出力手段
から文字データが入力されたときに該文字データを音声
合成し、音声信号に変換して前記モデムから前記相手端
末装置に送信する音声合成手段と、前記相手端末装置か
ら前記モデムが音声信号を受信したときに該音声信号を
音声認識し、文字信号に変換して前記文字入出力手段の
画面に文字表示する音声理解手段とを備えたことを特徴
とする。

【００１４】前記音声理解手段は、音声信号からの認識
には必要な単語を大まかに抽出し、必要な単語は標準パ
ターンとして学習保存しておく構成としたことを特徴と
する。

【００１５】

【発明の実施の形態】図１は、本発明の実施形態を示す
携帯用情報端末のシステム構成である。同図が図６と異
なる部分は、携帯用情報端末１とＦＡＸ機能付通信モデ
ム２との間に、音声合成手段となる音声合成装置１０と
音声変換装置１１と、音声理解手段となる音声理解装置
１２と文字変換装置１３とを設けたことにある。

【００１６】モデム２と相手端末装置１４との間は、従
来と同様に電話回線やＩＳＤＮなどを含む通信回線１５
によりデータ伝送がなされる。相手端末装置１４には図
６の装置８の各種装置を接続可能であるが少なくとも電
話機能を含む構成とする。

【００１７】このようなシステム構成により、聴覚障害
者が相手端末装置１４の相手と通話でのコミュニケーシ
ョンを可能にする。

【００１８】すなわち、携帯用情報端末１からの発信に
は、発信の内容（文章）を文字としてペン（ポインティ
ングデバイス）１Ａを使ってディスプレイ画面１Ｂに入
力表示させ、その内容を音声合成装置１０により音声デ
ータとして合成し、音声変換装置１１により実音声信号
に変換し、この音声信号をモデム２によって変調し、相
手端末装置１４側に音声として送信する。

【００１９】逆に、相手端末装置１４からの音声信号の
受信には、モデム２で受信・復調した音声信号の内容を
音声理解装置１２によって音声認識し、この認識データ
を文字変換装置１３によって文字に変換し、この文字を
携帯用情報端末１のディスプレイ画面１Ｂに表示させ、
この表示画面から受信内容を視認できるようにする。

【００２０】したがって、携帯用情報端末１から文字情
報を発信したときに相手端末装置１４では電話機による
通話と同等の音声として受信でき、逆に相手端末装置１
からの音声による発信が携帯用情報端末１には表示文字
として受信できる。これにより、聴覚障害者が携帯用情
報端末１を携帯し、健常者が相手端末装置１４の電話機
能を使って通話するのに、電話による通話に近い簡易な
通信ができる。

【００２１】なお、携帯用情報端末１と相手端末装置１
４との間でイメージ情報を通信するには、モデム２がＦ
ＡＸ機能付通信モデムであれば、従来と同様に、携帯用
情報端末１とモデム２の間でイメージデータを直接に授
受する機能切り替えで実現される。

【００２２】また、携帯用情報端末１は、少なくとも文
字入出力機能をもつ携帯用電話に置換して同等の機能を
得ることができる。

【００２３】図１の構成において、音声合成装置１０と
音声変換装置１１は、既存の各種音声合成装置を利用す
ることができ、例えば、図２に示す規則合成方式による
音声合成装置を利用できる。

【００２４】図２の構成は、文字系列入力の形態素列か
ら構文・意味辞書を参照した構文・意味解析を行い（Ｓ
１）、この解析結果として音素記号列と韻律記号を得、
これらに時間規則（Ｓ２）やパラメータ規則（Ｓ３）を
作用させて音素のパラメータ時系列と韻律のピッチパタ
ーンを得、ピッチパターンによる音源生成とパラメータ
時系列によるディジタルフィルタを持つ音声合成（Ｓ
４）により合成音声を得る。

【００２５】図１の音声理解装置１２と文字変換装置１
３は、例えば、図３のシステム構成で実現される。モデ
ム２からの音声信号をＡ／Ｄ変換器２１によりディジタ
ル信号に変換し、学習・パターン認識部２２により文字
コードを得、文字変換装置１３により文字データに変換
して携帯用情報端末１に画面表示する。

【００２６】学習・パターン認識部２２による音声認識
処理は、図４に示すソフトウェア処理になる。ノイズが
除去された音声信号を周波数スペクトルによって大まか
な音声分析を行い（Ｓ１１）、この分析結果から特徴パ
ラメータを抽出して時系列信号に変換する（Ｓ１２）。
そして、音声単位へのセグメンテーションを行い（Ｓ１
３）、各セグメントと音素標準パターンとの比較により
音素認識を行って音素系列を作成する（Ｓ１４）。

【００２７】この音素系列を学習機能を有して保存する
単語標準パターンと単語照合をし（Ｓ１５）、単語認識
を行う（Ｓ１６）。単語照合で標準パターンがなけれ
ば、現在の音素を単語標準パターンとして学習して、追
加保存する（Ｓ１７，Ｓ１８）。

【００２８】これら単語認識を繰り返して音素系列を単
語系列として得、これら単語を構文パターンと照合を行
い（Ｓ１９）、構文パターンとの照合で構文認識する
（Ｓ２０）。この単語構文の認識が正確であれば、単語
列の文が意味的に妥当であるか否かを調べ（Ｓ２１）、
結果が不十分ならば妥当な結果が得られるまで処理を繰
り返し、妥当な結果が得られた場合に改めて意味認識を
行い（Ｓ２２）、文字認識結果を出力する。

【００２９】以上までの音声認識処理は、音声分析でノ
イズ・音声及び必要単語を分析し、文を大まかに抽出す
る。例えば、図５に示すように、文「えーと、大月まで
案内地図一枚お願いします。」からの単語抽出は「おお
つき」と「あんない」と「ちず」及び「いちまい」の必
要単語を抽出し、その認識で単語を決定する。

【００３０】

【発明の効果】以上のとおり、本発明によれば、携帯用
通信装置には入力された文字データを音声合成し音声信
号に変換して相手端末装置に送信する音声合成手段と、
相手端末装置から受信した音声信号を音声認識し文字信
号に変換して画面に文字表示する音声理解手段とを備え
たため、電話による通話に近い形で聴覚障害者と健常者
が簡易に通話できる効果がある。

【００３１】また、音声理解手段は、音声信号からの認
識には必要な単語を大まかに抽出し、必要な単語は標準
パターンとして学習保存しておく構成としたため、処理
が簡易になり、ソフトウェア構成を容易にして携帯用電
話等に容易に搭載できる。

【図面の簡単な説明】

【図１】本発明の実施形態を示す携帯用情報端末装置の
システム構成図。

【図２】実施形態における規則合成方式による音声合成
処理。

【図３】実施形態における音声理解システムの構成図。

【図４】実施形態における音声の学習パターン認識処
理。

【図５】実施形態における単語音声認識のスペクトラム
及び抽出例。

【図６】携帯用情報端末のデータ通信システム例。

【符号の説明】 １…携帯用情報端末 ２…ＦＡＸ機能付モデム １０…音声合成装置 １１…音声変換装置 １２…音声理解装置 １３…文字変換装置 １４…相手端末装置 １５…通信回線

Claims (2)

【特許請求の範囲】
1. 【請求項１】 通信回線との接続を得るモデムと、文字
   データを画面表示及び入力できる文字入出力手段とを備
   えて相手端末装置との間で通信を行う携帯用通信装置に
   おいて、 前記文字入出力手段から文字データが入力されたときに
   該文字データを音声合成し、音声信号に変換して前記モ
   デムから前記相手端末装置に送信する音声合成手段と、 前記相手端末装置から前記モデムが音声信号を受信した
   ときに該音声信号を音声認識し、文字信号に変換して前
   記文字入出力手段の画面に文字表示する音声理解手段と
   を備えたことを特徴とする携帯用通信装置。
2. 【請求項２】 前記音声理解手段は、音声信号からの認
   識には必要な単語を大まかに抽出し、必要な単語は標準
   パターンとして学習保存しておく構成としたことを特徴
   とする請求項１記載の携帯用通信装置。