JPH01293428A - 文章作成システム - Google Patents
文章作成システムInfo
- Publication number
- JPH01293428A JPH01293428A JP63124522A JP12452288A JPH01293428A JP H01293428 A JPH01293428 A JP H01293428A JP 63124522 A JP63124522 A JP 63124522A JP 12452288 A JP12452288 A JP 12452288A JP H01293428 A JPH01293428 A JP H01293428A
- Authority
- JP
- Japan
- Prior art keywords
- recording
- recognition
- voice
- word
- recorded
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000001514 detection method Methods 0.000 claims description 15
- 238000000034 method Methods 0.000 description 55
- 238000012937 correction Methods 0.000 description 30
- 238000010586 diagram Methods 0.000 description 24
- 230000006870 function Effects 0.000 description 20
- 238000000605 extraction Methods 0.000 description 19
- 230000015572 biosynthetic process Effects 0.000 description 8
- 238000003786 synthesis reaction Methods 0.000 description 8
- 238000004458 analytical method Methods 0.000 description 6
- 238000007781 pre-processing Methods 0.000 description 6
- 240000000220 Panda oleosa Species 0.000 description 4
- 235000016496 Panda oleosa Nutrition 0.000 description 4
- 230000003321 amplification Effects 0.000 description 2
- 230000003111 delayed effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 235000014121 butter Nutrition 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 210000004243 sweat Anatomy 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
【発明の詳細な説明】
(イ) 産業上の利用分野
本発明は音声認識により文章を作成するシステムに関す
るものである。
るものである。
(ロ)従来の技術
音声をテープレフーダの如き録音再生装置に録音し、こ
れを再生して出力される再生音声を音声認識装置へ入力
することにより、音声認識を行ないこれを文章化する文
章作成システムが開発されつつある(特開昭58−15
8736号)。
れを再生して出力される再生音声を音声認識装置へ入力
することにより、音声認識を行ないこれを文章化する文
章作成システムが開発されつつある(特開昭58−15
8736号)。
従来、録音再生装置と、音声認識を組み合わせた装置で
は、録音再生装置より再生する文章と、記憶装置より読
みだしたデータを表示装置に表示する部分とは独立した
動作をしていた。つまり、R音再生装置は、認識装置に
音声を入力するためだけのものであり、表示装置は記憶
装置より読みだしたデータを表示装置に表示するだけで
あったため、録音音声を聞きながら表示画面に表示され
る文章を確認することができなかった。
は、録音再生装置より再生する文章と、記憶装置より読
みだしたデータを表示装置に表示する部分とは独立した
動作をしていた。つまり、R音再生装置は、認識装置に
音声を入力するためだけのものであり、表示装置は記憶
装置より読みだしたデータを表示装置に表示するだけで
あったため、録音音声を聞きながら表示画面に表示され
る文章を確認することができなかった。
(ハ) 発明が解決しようとする課題
本発明は上述の点を鑑みでなされたものであり、録音音
声を聞きながら認識結果の文章確認を可能とする文章作
成システムを提供するものである。
声を聞きながら認識結果の文章確認を可能とする文章作
成システムを提供するものである。
(ニ)課題を解決するための手段
本発明の文章作成ノステムは録音装置に録音された文章
より、認識単位の区切りを表わす無音区間を検出した場
合、無音区間を検出し、辷ことをしめず無音区間検出信
号をかかる無音区間に録音するとともに、音声認識した
結果を認識単位毎に区切り記号をつけて記憶装置に記憶
し、かかる無音区間検出信号と区切り記号とを使用し、
記憶装置より読み出さね表示される文章と、録音再生装
置の音声との同期を取ることにより、画面に表示されて
いる文章に追随して、録音再生装置の録音音声を再生し
ていくものである。
より、認識単位の区切りを表わす無音区間を検出した場
合、無音区間を検出し、辷ことをしめず無音区間検出信
号をかかる無音区間に録音するとともに、音声認識した
結果を認識単位毎に区切り記号をつけて記憶装置に記憶
し、かかる無音区間検出信号と区切り記号とを使用し、
記憶装置より読み出さね表示される文章と、録音再生装
置の音声との同期を取ることにより、画面に表示されて
いる文章に追随して、録音再生装置の録音音声を再生し
ていくものである。
(ホ)作用
本発明によれば、録音文章に録音されている無音区間検
出信号と、表示側に記録されている区切り記号を、同期
を取るタイミング信号とし1使用し、録音再生装置と表
示とがお互いに同期をとりながら動作するよう制御して
いるので録音部分と表示部分のずれをなくrことができ
る。
出信号と、表示側に記録されている区切り記号を、同期
を取るタイミング信号とし1使用し、録音再生装置と表
示とがお互いに同期をとりながら動作するよう制御して
いるので録音部分と表示部分のずれをなくrことができ
る。
(へ) 実施例
第1図に本発明を採用して汗声入力により文章作成する
デイクチ−ティングマシンの外観図を示し、第2130
に該マシンの機能ブロック図を示す。
デイクチ−ティングマシンの外観図を示し、第2130
に該マシンの機能ブロック図を示す。
第2図に於て、(1)は第1図の本体<100)内に回
路装備された音声認識部であり、その詳細は第3図のブ
ロック図に示す如く、入力音声信号の音圧!l1viヲ
行つ前処理ff1(11)[aS 4 図]、iJ[[
1lI(11)からの音圧!In済みの音声信号からそ
の音響特徴を示すパラメータを抽出する特徴抽出部(1
2)[第5図]、該抽出部(12)から得られる特徴パ
ラメータに基づき入力音声の単語認識を行う単語認識部
(13)[第6図コと文節認識部(H)[第7図]、及
びこれらいずれかの認識部(13)、(14)からの認
識結果に基づき認識@語文字列、或いは認識音節文字の
候補を作成する候補作成部(15)からなる。
路装備された音声認識部であり、その詳細は第3図のブ
ロック図に示す如く、入力音声信号の音圧!l1viヲ
行つ前処理ff1(11)[aS 4 図]、iJ[[
1lI(11)からの音圧!In済みの音声信号からそ
の音響特徴を示すパラメータを抽出する特徴抽出部(1
2)[第5図]、該抽出部(12)から得られる特徴パ
ラメータに基づき入力音声の単語認識を行う単語認識部
(13)[第6図コと文節認識部(H)[第7図]、及
びこれらいずれかの認識部(13)、(14)からの認
識結果に基づき認識@語文字列、或いは認識音節文字の
候補を作成する候補作成部(15)からなる。
更に第2図に於て、く2)は第1図に示す如く本体(1
00)に機械的並びに電気的に着脱可能なチープレー1
−ダ等の録音再生装置、(3)は例えば第1図図示の如
きヘッドホンタイプのマイクロホン、(4)は録音再生
装置(2)とマイクロホン(3)と音声認識部(1)と
のあいだの接続切り換えを行う入力切り換え部[第8図
]である。(6)は認識結果に基づき生成した文字列等
を表示するための表示装置、(7)は該デイクチ−ティ
ングマシンの各種制御信号を入力するためのキーボード
、(8)は該デイクチ−ティングマシンで生成された文
字列を記憶する磁気ディスク装置等の記憶装置、(9)
は該記憶装置の文字列を規則合成によりスピーカ(10
)から読み上げるための音声合成部である。
00)に機械的並びに電気的に着脱可能なチープレー1
−ダ等の録音再生装置、(3)は例えば第1図図示の如
きヘッドホンタイプのマイクロホン、(4)は録音再生
装置(2)とマイクロホン(3)と音声認識部(1)と
のあいだの接続切り換えを行う入力切り換え部[第8図
]である。(6)は認識結果に基づき生成した文字列等
を表示するための表示装置、(7)は該デイクチ−ティ
ングマシンの各種制御信号を入力するためのキーボード
、(8)は該デイクチ−ティングマシンで生成された文
字列を記憶する磁気ディスク装置等の記憶装置、(9)
は該記憶装置の文字列を規則合成によりスピーカ(10
)から読み上げるための音声合成部である。
尚、(5)はマイクロプロセッサからなる制御部であり
、上記各部の動作の制御を司っている。
、上記各部の動作の制御を司っている。
上述の構成のデイクチ−ティングマシンに依る文章作成
方法としては二通りあり、それぞれに就いて以下に詳述
する。
方法としては二通りあり、それぞれに就いて以下に詳述
する。
第一の方法は、マイク(3)より主音声を音声認識部(
1)に入力し、音声認識を行ない、入力音声を文字列に
変換し、表示装置(6)に表示し、同時に記憶装置(8
)に結果を記憶する。
1)に入力し、音声認識を行ない、入力音声を文字列に
変換し、表示装置(6)に表示し、同時に記憶装置(8
)に結果を記憶する。
第二の方法は、入力したい文章を予め録音再生装置(2
)に録音しておき、この録音再生装置1!(2)°を本
装置に接続し、録音文章を音声認識部(1)に入力する
ことによ吟、音声認識を行ない、人力音声を文字列に変
換し、表示装置(6)に表示し、同時に記憶装置(8)
に結果を記憶する。
)に録音しておき、この録音再生装置1!(2)°を本
装置に接続し、録音文章を音声認識部(1)に入力する
ことによ吟、音声認識を行ない、人力音声を文字列に変
換し、表示装置(6)に表示し、同時に記憶装置(8)
に結果を記憶する。
上述の様に、音声を入力する方法は、二通りあるのC1
入力切り換え部(4)において、入力の切り換えを行な
う6.i!た入力切り換え部(4)は、入力の切り換え
の他に、録音再生装置(2)に録音信号くイ)を録音す
るのか、マイク(3)より入力された音声を録音するの
かの切り換えも行なう。
入力切り換え部(4)において、入力の切り換えを行な
う6.i!た入力切り換え部(4)は、入力の切り換え
の他に、録音再生装置(2)に録音信号くイ)を録音す
るのか、マイク(3)より入力された音声を録音するの
かの切り換えも行なう。
以下に音声録音から文章作成までの動作を順次詳述する
。
。
(1)音声登録処理
音声認識を行なうに先たち、音声認識に必要な音声の標
準パターンを作成するため、音声登録を行なう。
準パターンを作成するため、音声登録を行なう。
まず、音節登録モードについて述べる。
ここで述べている標準パターンとは、音声認識部(1)
の文節認識部(14)でのパターンマッチィング時の基
準パターンとなるものであり、具体的には第7図の如き
文節認識部(14)の音節標準パターンメモリ(14d
)に格納される。
の文節認識部(14)でのパターンマッチィング時の基
準パターンとなるものであり、具体的には第7図の如き
文節認識部(14)の音節標準パターンメモリ(14d
)に格納される。
本デイクチ−ティングマシンに音声登録する方法は、ま
ず第7図のスイッチ(14sl)を操作しパラメータバ
ッファ(14a)と音節標準パターンメモリ(14d)
とを接続し、次に述べる三方法がある。
ず第7図のスイッチ(14sl)を操作しパラメータバ
ッファ(14a)と音節標準パターンメモリ(14d)
とを接続し、次に述べる三方法がある。
第一の方法は該マシンの本体(100)にマイク(3)
より直接登録音声を入力し、この登録音声を音声認識部
(1)で分析し、標準パターンを作成し、作成した標準
パターンを音節標準パターンメモリ(14d)および記
憶装置く8)に記憶させる方法である。
より直接登録音声を入力し、この登録音声を音声認識部
(1)で分析し、標準パターンを作成し、作成した標準
パターンを音節標準パターンメモリ(14d)および記
憶装置く8)に記憶させる方法である。
第二の方法は前もっ1登録音声を録音しておいた録音再
生装置(2)を本体(100)に接続し、この録音登録
音声を再生することにより登録音声の入力をなし、この
入力した登録音声を音声認識部(1)で分析し、標準バ
クーンを作成し、作成した標準パターンを音節標準パタ
ーンメモリ(14d)および記憶装置く8)に記憶させ
る方法である。
生装置(2)を本体(100)に接続し、この録音登録
音声を再生することにより登録音声の入力をなし、この
入力した登録音声を音声認識部(1)で分析し、標準バ
クーンを作成し、作成した標準パターンを音節標準パタ
ーンメモリ(14d)および記憶装置く8)に記憶させ
る方法である。
第三の方法は本マシンの本体(100)にマイク(3)
から直接登録音声を入力するが、このとき同時に録音再
生装置(2)を本体(100)に接続しておきこの入力
された音声を録音再生装置(2)に録音しながら、本体
(100)側ではマイク(3)からの登録音声の分析を
行ない標準パターンを作成し、作成した標準パターンを
記憶装置く8)に記憶させておく、そして、次にこのマ
イク(3)への音声入力が終了すると、これに引き続き
、録音再生装置(2)に録音された音声を再生し、この
録音された登録音声を音声認識部(1)で分析し、標準
パターンを作成し、作成した標準パターンを音節標準パ
ターンメモリ(14d)に記憶しておくと同時に、記憶
装置(8)にも上述のマイク(3)からの直接の登録音
声の音節標準パターンと共に記憶させる方法である。
から直接登録音声を入力するが、このとき同時に録音再
生装置(2)を本体(100)に接続しておきこの入力
された音声を録音再生装置(2)に録音しながら、本体
(100)側ではマイク(3)からの登録音声の分析を
行ない標準パターンを作成し、作成した標準パターンを
記憶装置く8)に記憶させておく、そして、次にこのマ
イク(3)への音声入力が終了すると、これに引き続き
、録音再生装置(2)に録音された音声を再生し、この
録音された登録音声を音声認識部(1)で分析し、標準
パターンを作成し、作成した標準パターンを音節標準パ
ターンメモリ(14d)に記憶しておくと同時に、記憶
装置(8)にも上述のマイク(3)からの直接の登録音
声の音節標準パターンと共に記憶させる方法である。
この第3の方法に於ては、録音再生装置(2)に録音し
た音声は録音再生装置(2)の周波数特性を受けている
ため、録音した音声から作成した標準パターンと、マイ
ク(3)から直接入力した音声より作成した標準パター
ンとを比べた場合、両標準パターンの間に違いが現れる
。故に録音音声を認識させるときは、録音音声より作成
した標準パターンを使用する必要があり、マイク(3)
から直接入力した音声を認識させるときは、マイク(3
)から直接入力した音声より作成した標準パターンを使
用する必要があるので、上述の頗きの方法をとることに
よって、マイク(3)から直接登録した標準パターンと
録音音声より作成した標準パターンの両パターンを一回
の音声登録操作によって作成し記憶できる。また、−度
録音再生装置(2)に登録音声を録音しておけば標準パ
ターンを作成していないデイクチ−ティングマシン上に
も登録者の発声入力を必要とせず、この録音音声を再生
入力するだけで、標準パターンが作成できる。また、録
音再生装置(2)に登録音声を録音し、きらにこの登録
音声のあとに文章を録音しておけば、後にこの録音再生
装置(2)を本体(100)に接続し、録音された音声
を再生するだけで音声登録から、文章作成まで、すべて
自動的に行なえる。
た音声は録音再生装置(2)の周波数特性を受けている
ため、録音した音声から作成した標準パターンと、マイ
ク(3)から直接入力した音声より作成した標準パター
ンとを比べた場合、両標準パターンの間に違いが現れる
。故に録音音声を認識させるときは、録音音声より作成
した標準パターンを使用する必要があり、マイク(3)
から直接入力した音声を認識させるときは、マイク(3
)から直接入力した音声より作成した標準パターンを使
用する必要があるので、上述の頗きの方法をとることに
よって、マイク(3)から直接登録した標準パターンと
録音音声より作成した標準パターンの両パターンを一回
の音声登録操作によって作成し記憶できる。また、−度
録音再生装置(2)に登録音声を録音しておけば標準パ
ターンを作成していないデイクチ−ティングマシン上に
も登録者の発声入力を必要とせず、この録音音声を再生
入力するだけで、標準パターンが作成できる。また、録
音再生装置(2)に登録音声を録音し、きらにこの登録
音声のあとに文章を録音しておけば、後にこの録音再生
装置(2)を本体(100)に接続し、録音された音声
を再生するだけで音声登録から、文章作成まで、すべて
自動的に行なえる。
尚、音声の標準パターンを作成する為の登録者の発声入
力は、本装置が一定の順序で表示装置(6)に表示する
文字を登録者が読み上げることにより行なわれる。
力は、本装置が一定の順序で表示装置(6)に表示する
文字を登録者が読み上げることにより行なわれる。
また、本マシン専用の表示機能をもつ録音再生装a<2
)を使用する場合はこの録音再生装置(2)惧独で携
帯する時でもその表示画面に表示された見出し語に対応
する音声を発声し録音再生装置(2)に録音する事で、
標準パターンの作成が可能となる。
)を使用する場合はこの録音再生装置(2)惧独で携
帯する時でもその表示画面に表示された見出し語に対応
する音声を発声し録音再生装置(2)に録音する事で、
標準パターンの作成が可能となる。
上述の如く、標準パターンを作成するだめの登録音声を
録音再生装置t(2)に録音する場合は、この録音され
た登録音声より標準パターンを作成するときにノイズな
どの影響を受は録音音声とこれに対応するべき見出し語
とがずれる可能性があり、以下、第9図に基づき、説明
のため録音再生装置としてテープレコーダを使用した場
合について述べる。第9図(a)はテープレコーダに標
準パターン作成のための登録音声を録音した状態のうち
、見出し閘「あ、〜「か、に対応した登録音声“あ”〜
“か”の間のテープの状態を表わしておリ、ここでは“
え”と“お”の間に[ノイズ]が録aされた場合を示す
、第9図(a)の様に登録音声と登録音声との間に[ノ
イズ]が録音されたテープにより音声登録を行なった場
合、1番目に録音された音が“あ”で2番目に録音され
た音が“い”という様に、ただ単にテープに録音された
音の順序により、入力された登録音声がどの音節に対応
しているのかを決定していると、[ノイズコまで登録音
声とみなして見出し語を対応させるので入力された実際
の登録音声と見出し語とがずれてしまう。
録音再生装置t(2)に録音する場合は、この録音され
た登録音声より標準パターンを作成するときにノイズな
どの影響を受は録音音声とこれに対応するべき見出し語
とがずれる可能性があり、以下、第9図に基づき、説明
のため録音再生装置としてテープレコーダを使用した場
合について述べる。第9図(a)はテープレコーダに標
準パターン作成のための登録音声を録音した状態のうち
、見出し閘「あ、〜「か、に対応した登録音声“あ”〜
“か”の間のテープの状態を表わしておリ、ここでは“
え”と“お”の間に[ノイズ]が録aされた場合を示す
、第9図(a)の様に登録音声と登録音声との間に[ノ
イズ]が録音されたテープにより音声登録を行なった場
合、1番目に録音された音が“あ”で2番目に録音され
た音が“い”という様に、ただ単にテープに録音された
音の順序により、入力された登録音声がどの音節に対応
しているのかを決定していると、[ノイズコまで登録音
声とみなして見出し語を対応させるので入力された実際
の登録音声と見出し語とがずれてしまう。
ここで、第9図(b)は[ノイズ]を音声と誤認識し、
見出し語1え」のところに[ノイズ]が入力され、見出
し語1お」のところに音節“え”が入力された図である
。
見出し語1え」のところに[ノイズ]が入力され、見出
し語1お」のところに音節“え”が入力された図である
。
この様に登録音声より標準パターンを作成するときにノ
イズなどの影響を受は録音音声と見出し語とがずれる場
合があるため、第9図(C)に示すように、登録音声の
種類を示したキャラクタ−コード音を、登録音声に対応
させて録音再生装置(2)に録音する。この方法により
、“う”と“え”の間に[ノイズコが録音されていても
、上述のように、入力された音と見出し語とのずれを防
止する。
イズなどの影響を受は録音音声と見出し語とがずれる場
合があるため、第9図(C)に示すように、登録音声の
種類を示したキャラクタ−コード音を、登録音声に対応
させて録音再生装置(2)に録音する。この方法により
、“う”と“え”の間に[ノイズコが録音されていても
、上述のように、入力された音と見出し語とのずれを防
止する。
このずれを防止する特定周波数のキャラクタ−コード音
の録音方法を、録音再生装置(2)のテープレコーダが
シングルトラックである場合と、マルチトラックである
場合とにわけて説明する。
の録音方法を、録音再生装置(2)のテープレコーダが
シングルトラックである場合と、マルチトラックである
場合とにわけて説明する。
まず第10図において、録音方式としてマルチトラック
をもつ録音再生装置を使用する場合について述べる。
をもつ録音再生装置を使用する場合について述べる。
録音方式としてマルチトラックをもつ録音再生装置を使
用する場合は同図(a)に示すように音声を録音してい
ないトラックに見出し語に対応するキャラクタ−コード
を録音する。音声認識部(1)では、このキャラクタ−
コード音より、入力される音声の見出し語を知るととも
に、音声トラックに録音された音のうち、このキャラク
タ−コード音が録音された区間t1に録音された音のう
ち、音圧しきい値以上の条件をみたtもののみを音声と
みなし、分析を行なう。
用する場合は同図(a)に示すように音声を録音してい
ないトラックに見出し語に対応するキャラクタ−コード
を録音する。音声認識部(1)では、このキャラクタ−
コード音より、入力される音声の見出し語を知るととも
に、音声トラックに録音された音のうち、このキャラク
タ−コード音が録音された区間t1に録音された音のう
ち、音圧しきい値以上の条件をみたtもののみを音声と
みなし、分析を行なう。
または、同図(b)に示すように、音声の始めと終わり
に見出し語に対応するキャラクタ−コードを録音し、音
声トラックに録音された音のうち、この音声の始めを示
すキャラクタ−コード音と、音声の終わりを示すキャラ
クタ−コード音の間の区間t2に録音された音のうち、
音圧しきい値以上の条件をみたすもののみを音声とみな
し、分析を行なう。
に見出し語に対応するキャラクタ−コードを録音し、音
声トラックに録音された音のうち、この音声の始めを示
すキャラクタ−コード音と、音声の終わりを示すキャラ
クタ−コード音の間の区間t2に録音された音のうち、
音圧しきい値以上の条件をみたすもののみを音声とみな
し、分析を行なう。
または、同図(C)に示すように、音声の始めに見出し
語に対応するキャラクタ−コードを録音する。音声トラ
ックに録音された音のうち、この音声の種類を示すキャ
ラクタ−コード音から、次の見出し語に対応するキャラ
クタ−コード音までの区間t3に録音された音のうち、
音圧しきい値以りの条件をみたすもののみを音声とみな
し、分析を行なう。
語に対応するキャラクタ−コードを録音する。音声トラ
ックに録音された音のうち、この音声の種類を示すキャ
ラクタ−コード音から、次の見出し語に対応するキャラ
クタ−コード音までの区間t3に録音された音のうち、
音圧しきい値以りの条件をみたすもののみを音声とみな
し、分析を行なう。
また第二の方法としてシングルトラックの録音再生装置
(2)の場合は、見出し語に対応するキャラクタ−コー
ドをa声の分析周波数帯域外の音で表わし、音声の録音
きれているトラックに音声と共に録音する。この場合の
キャラクタ−コード音を録音する方法は、上述のマルチ
トラックの場合と同様である。つまり、上述のtl、t
2、t3の区間に録音された音うち、上述と同様の条件
をみたすもののみを音声とみなし、分析を行なう。
(2)の場合は、見出し語に対応するキャラクタ−コー
ドをa声の分析周波数帯域外の音で表わし、音声の録音
きれているトラックに音声と共に録音する。この場合の
キャラクタ−コード音を録音する方法は、上述のマルチ
トラックの場合と同様である。つまり、上述のtl、t
2、t3の区間に録音された音うち、上述と同様の条件
をみたすもののみを音声とみなし、分析を行なう。
ただし、音声と、キャラクタ−コード音が重なっている
同E(a)に示した実施例の場合以外は、キャラクタ−
コード音に、音声の分析周波数帯域外の音を使用しなく
てもよい。
同E(a)に示した実施例の場合以外は、キャラクタ−
コード音に、音声の分析周波数帯域外の音を使用しなく
てもよい。
次ぎにアルファベット、数字およびカッコや句読点など
予め第6図の如き単簡認識部(13)の単語辞!(XS
d)にキャラクタ−登録されている単語に対応する単語
標準パターンを、同図の単語標準パターンメモリ(13
c)に登録する。
予め第6図の如き単簡認識部(13)の単語辞!(XS
d)にキャラクタ−登録されている単語に対応する単語
標準パターンを、同図の単語標準パターンメモリ(13
c)に登録する。
まず、所定の操作により、第6図のパラメータバッファ
(L3a)と単語標準パターンメモリ(L3c)とがス
イッチ(13sl)により接続され、単語登録モードに
する。
(L3a)と単語標準パターンメモリ(L3c)とがス
イッチ(13sl)により接続され、単語登録モードに
する。
つぎに、本装置本体(100)の表示装置(6)にアル
ファベット、数字およびカッコや句読点などが表示され
、操作者はこれに対北する読みを音声入力する。
ファベット、数字およびカッコや句読点などが表示され
、操作者はこれに対北する読みを音声入力する。
音声認識部く1)では、この音声を分析し、単語標準パ
ターンメモリ(13c)に単語標準バターンの登録を行
なう。
ターンメモリ(13c)に単語標準バターンの登録を行
なう。
と述までの操作により音声認識は可能となる。
しかし、自立語・付属語辞書(14a)および単語辞書
<13d)にない単語を認識させたいときは、自立語・
付i語辞書(14e)に認識させたい単語を登録するか
、用語辞書<13d)に認識させたい単語を、また単語
標準パターンメモリ(13c)に単語標準パターンを登
録する必要がある。ただし、自立語・付属語辞書(14
e)に単語を登録するか、単語辞書(13d )および
単語標準パターンメモリ(13c)に、単語および単語
標準パターンを登録するかは、使用者がその単語を文節
発声として認識きせたいか、単語発声として認識させた
いかによって決定する。
<13d)にない単語を認識させたいときは、自立語・
付i語辞書(14e)に認識させたい単語を登録するか
、用語辞書<13d)に認識させたい単語を、また単語
標準パターンメモリ(13c)に単語標準パターンを登
録する必要がある。ただし、自立語・付属語辞書(14
e)に単語を登録するか、単語辞書(13d )および
単語標準パターンメモリ(13c)に、単語および単語
標準パターンを登録するかは、使用者がその単語を文節
発声として認識きせたいか、単語発声として認識させた
いかによって決定する。
また、自立語・付属語辞書(14e)にはあるが、単語
辞書(13d)になく、それでも単語認識で認識させた
い場合、かかる単語を単語辞書(13d)および単語標
準パターンメモリ(13c)に、単語および単語標準バ
ター〉を登録する必要がある。
辞書(13d)になく、それでも単語認識で認識させた
い場合、かかる単語を単語辞書(13d)および単語標
準パターンメモリ(13c)に、単語および単語標準バ
ター〉を登録する必要がある。
以下に任意単語の登録方法について述べる。
81語の登録には、単語を自立語・付f/Ik語辞書(
14e)に文字列を登録する登録と、N語を単語標準パ
ターンメモリ(13c)に単語標準パターンを登録、お
よび単語辞書(13d)に文字列を登録する2方法があ
る。
14e)に文字列を登録する登録と、N語を単語標準パ
ターンメモリ(13c)に単語標準パターンを登録、お
よび単語辞書(13d)に文字列を登録する2方法があ
る。
単語を自立語・付属語辞書(14e)に登録する場合は
、登録したい単語を発声し本装置に入力する。
、登録したい単語を発声し本装置に入力する。
このとき本装置はこの音声を音声認識部(1)で認識し
、認識結果を表示装置!(6)に表示する。使用者はこ
の結果が正しければキーボード(7〉の所定のキーを押
し、発声音声を表示装置く6)に表示されている文字列
として自立語・付属語辞書(14@)に登録する。もし
、表示装置(6)に表示された認識結果が正しくなけれ
ば、本装置の音節修正機能により表示装[(6)に表示
された認識結果を修正するか、登録したい#L語を再発
声する。また再発声した結果が誤っているときは、再び
本装置の音節修正機能により修正する。上述の操作を表
示装置t(6)に表示される文字列が登録したい単語と
一致するまで繰り返す。
、認識結果を表示装置!(6)に表示する。使用者はこ
の結果が正しければキーボード(7〉の所定のキーを押
し、発声音声を表示装置く6)に表示されている文字列
として自立語・付属語辞書(14@)に登録する。もし
、表示装置(6)に表示された認識結果が正しくなけれ
ば、本装置の音節修正機能により表示装[(6)に表示
された認識結果を修正するか、登録したい#L語を再発
声する。また再発声した結果が誤っているときは、再び
本装置の音節修正機能により修正する。上述の操作を表
示装置t(6)に表示される文字列が登録したい単語と
一致するまで繰り返す。
単語を単語標準パターンメモリ(13c)および単語辞
書(13d)に登録する場合は、単語を自立語・付属語
辞書(L4e)に登録する場合と同様にまr表示装置(
6)に登録したい文字列を正しく表示させる。次に正し
く認識された文字列と単語標準パターンを、単語辞書(
13d)およびIt語標準パターンメモリ(13c)に
それぞれ登録する。
書(13d)に登録する場合は、単語を自立語・付属語
辞書(L4e)に登録する場合と同様にまr表示装置(
6)に登録したい文字列を正しく表示させる。次に正し
く認識された文字列と単語標準パターンを、単語辞書(
13d)およびIt語標準パターンメモリ(13c)に
それぞれ登録する。
また、自然な発声で入力された音声を認識することは、
現在の音声認識技術のレベルを考えた場合、無理がある
。現在の音声認識技術のレベルでは、連続音節発声入力
が限度であるため、以下に連続音節発声入力の一実施例
について記す。
現在の音声認識技術のレベルを考えた場合、無理がある
。現在の音声認識技術のレベルでは、連続音節発声入力
が限度であるため、以下に連続音節発声入力の一実施例
について記す。
連続音節発声入力の場合も、上記の手順と同一であるが
、連続音節発声入力の場合は、単語標準パターンも連続
音節発声のパターンとなっているため、登録したい単語
を自然発声で再発声し、単語標準パターンを自然発声よ
り作成し、単語標準パターンと文字列を単語標準パター
ンメモリ(13C)およびms辞書(13d)にそれぞ
れ登録する。
、連続音節発声入力の場合は、単語標準パターンも連続
音節発声のパターンとなっているため、登録したい単語
を自然発声で再発声し、単語標準パターンを自然発声よ
り作成し、単語標準パターンと文字列を単語標準パター
ンメモリ(13C)およびms辞書(13d)にそれぞ
れ登録する。
以上の操作により、音声認識による文章作成のために必
要なデータを登録できた事となる。
要なデータを登録できた事となる。
(i) 文章作成
以下に文章作成の実施例について述べる。
まず、認識動作を行なう場合は、単語認識部(13)の
スイッチ(13sl)は、パラメータバッファ(13g
>と単語判定部(13b)を接続する様に、文節認識部
(14)のスイッチ(14sl)は、パラメータバッフ
ァ(14a)と音節認識部<14b)を接続する様に設
定する。
スイッチ(13sl)は、パラメータバッファ(13g
>と単語判定部(13b)を接続する様に、文節認識部
(14)のスイッチ(14sl)は、パラメータバッフ
ァ(14a)と音節認識部<14b)を接続する様に設
定する。
文章作成には二方法がある。
第一の方法は本装置の本体に作成したい文章を音声によ
りマイク(3)から直接入力するオンライン認識方法で
ある。
りマイク(3)から直接入力するオンライン認識方法で
ある。
第二の方法は文章を録音しておいた録音再生装置(2)
を本装置に接続し、録音文章を再生し、認識させるオフ
ライン認識である。
を本装置に接続し、録音文章を再生し、認識させるオフ
ライン認識である。
まず、オンライン認識の実施例について述べる。
オンライン認識の場合は、本装置にマイク(3)より直
接文節単位または単語単位に発声した文章を音声人力す
るので、所定の操作により、入力切り換え部(4)でマ
イク(3)と音声認識部(1)を接続する。
接文節単位または単語単位に発声した文章を音声人力す
るので、所定の操作により、入力切り換え部(4)でマ
イク(3)と音声認識部(1)を接続する。
また、マイク(3)より入力している音声を録音再生装
置(2)に記録しておきたいときは、録音再生装!(2
)を本体に接続し、入力切り換え部(4)をマイク(3
)の出力と録音再生装置(2)の録音端子とを接続する
。
置(2)に記録しておきたいときは、録音再生装!(2
)を本体に接続し、入力切り換え部(4)をマイク(3
)の出力と録音再生装置(2)の録音端子とを接続する
。
また同時に、入力切り換え部(4)は、後述の様に無音
検出信号が特徴抽出部(12)より入力された場合、文
節、または単語区切りを示すビーブ音を録音するようI
!能する。
検出信号が特徴抽出部(12)より入力された場合、文
節、または単語区切りを示すビーブ音を録音するようI
!能する。
音声認識時は、単語認識部(13)と文節認識部(14
)が起動している。
)が起動している。
マイク(3〉より入力された音声は、前処理部(11)
で入力音声を音声分析に適した特性になるよう処理を施
され(例えば入力音声の音圧が小さい時は、増幅器によ
り音圧を増幅したりjる処理を行なう)、特徴抽出部<
12)に送られる。
で入力音声を音声分析に適した特性になるよう処理を施
され(例えば入力音声の音圧が小さい時は、増幅器によ
り音圧を増幅したりjる処理を行なう)、特徴抽出部<
12)に送られる。
特徴抽出部(12〉では、第5図に示す如く、前処理部
(11)より入力されてきた音声を分析部(12a)で
分析し特徴抽出を行ない、パラメータバッファ(12c
)に記憶する。
(11)より入力されてきた音声を分析部(12a)で
分析し特徴抽出を行ない、パラメータバッファ(12c
)に記憶する。
同時に、特徴抽出部(12)の分析単位判定部(12b
)では、分析部(12m)の分析結果より、音節または
文節単位に発声されたあとの無音区間、および文節また
は単M#A位に発声されたあとに録音されたビープ音(
詳細は後述のオフライン認識の実施例に示す、)の検出
を行なっており、無音区間を検出した場合、無音区間検
出信号(ロ)を発生する。
)では、分析部(12m)の分析結果より、音節または
文節単位に発声されたあとの無音区間、および文節また
は単M#A位に発声されたあとに録音されたビープ音(
詳細は後述のオフライン認識の実施例に示す、)の検出
を行なっており、無音区間を検出した場合、無音区間検
出信号(ロ)を発生する。
かかる無音区間検出信号(ロ)を受は取ったパラメータ
バッファ(12c)は、記憶している特徴パラメータを
単語認識部(13)と文節認識部(14)に送り、記憶
内容を消去する。
バッファ(12c)は、記憶している特徴パラメータを
単語認識部(13)と文節認識部(14)に送り、記憶
内容を消去する。
屯語認識部(13)に入力された特徴パラメータは、第
6図に示されたパラメータパップy(13a)に記憶さ
れる。単語判定部(13b)では、パラメータバッファ
(13a)に記憶された特徴パラメータとII標準パタ
ーンメモリ(13c)とを比較し、パラメータバッファ
(13a)に記憶された特徴パラメータと、尤度の大き
い単語標準パターンをもつ単語を、単語辞書(13d)
より複数語選び、選ばれた単語の文字列とその尤度値を
候補作成部(15)に送る。
6図に示されたパラメータパップy(13a)に記憶さ
れる。単語判定部(13b)では、パラメータバッファ
(13a)に記憶された特徴パラメータとII標準パタ
ーンメモリ(13c)とを比較し、パラメータバッファ
(13a)に記憶された特徴パラメータと、尤度の大き
い単語標準パターンをもつ単語を、単語辞書(13d)
より複数語選び、選ばれた単語の文字列とその尤度値を
候補作成部(15)に送る。
一方、文節認識部(14)に入力された特徴パラメータ
は、パラメータバッファ(14a)に記憶される。音節
認識部(14b)では、パラメータバッファ(14a)
に記憶された特徴パラメータと音節標準パターンメモリ
(14d)とを比較し、パラメータバッファ<14a)
に記憶された特徴パラメータを音節列に変換し、かかる
音節列を文節判定部(14c)へ送る0文節判定部<1
4c)では入力された音節列と自立語・付属語辞書(1
4e)に登録されている単語を比較し、自立語と付属語
を組み合わせて尤度の大さい文節を複数組作成し、作成
した文節の文字列とその尤度値を候補作成部(15)に
送る。
は、パラメータバッファ(14a)に記憶される。音節
認識部(14b)では、パラメータバッファ(14a)
に記憶された特徴パラメータと音節標準パターンメモリ
(14d)とを比較し、パラメータバッファ<14a)
に記憶された特徴パラメータを音節列に変換し、かかる
音節列を文節判定部(14c)へ送る0文節判定部<1
4c)では入力された音節列と自立語・付属語辞書(1
4e)に登録されている単語を比較し、自立語と付属語
を組み合わせて尤度の大さい文節を複数組作成し、作成
した文節の文字列とその尤度値を候補作成部(15)に
送る。
候補作成部(15)は入力された文字列から尤度の大さ
いものを複数個選び、尤度値と単語認識部(13)から
送られてきたデータか文節認識部(14)から送られて
きたデータかを示すコードを付加し記憶する。同時に、
尤度の最も大きいものの文字列を、表示装置に表示させ
る信号を制御部(5)に送る。制御部(5)は、この信
号を受は尤度の最も大きいものの文字列の後に区切り記
号マーク「7」をつけ、例えば第14図(a)の入力文
章に対して第14図(C)に示すような形式で表示装置
に表示きせる。同時に候補作成部(15)は制御部(5
)に、候補作成部(15)に記憶された内容を記憶装置
(8)に記憶させる信号を送る。制御部(5)はこの信
号を受、け、候補作成部(15)に記憶された文字列の
後に区切り記号を表わすコードを付加した形で記憶装置
(8)に記憶きせる。この外部記憶装置に記憶された文
字列は、ワープロの一次原稿とする。一般的にはフロッ
ピーディスクを用いるが、このとき記憶装置(8)のフ
ァイルのフォーマットはワーブlJのファイルフォーマ
ットに合わせておく必要がある。
いものを複数個選び、尤度値と単語認識部(13)から
送られてきたデータか文節認識部(14)から送られて
きたデータかを示すコードを付加し記憶する。同時に、
尤度の最も大きいものの文字列を、表示装置に表示させ
る信号を制御部(5)に送る。制御部(5)は、この信
号を受は尤度の最も大きいものの文字列の後に区切り記
号マーク「7」をつけ、例えば第14図(a)の入力文
章に対して第14図(C)に示すような形式で表示装置
に表示きせる。同時に候補作成部(15)は制御部(5
)に、候補作成部(15)に記憶された内容を記憶装置
(8)に記憶させる信号を送る。制御部(5)はこの信
号を受、け、候補作成部(15)に記憶された文字列の
後に区切り記号を表わすコードを付加した形で記憶装置
(8)に記憶きせる。この外部記憶装置に記憶された文
字列は、ワープロの一次原稿とする。一般的にはフロッ
ピーディスクを用いるが、このとき記憶装置(8)のフ
ァイルのフォーマットはワーブlJのファイルフォーマ
ットに合わせておく必要がある。
また、この無音区間検出信号をうけとった第8図に示す
入力切り換え部(4)の信号発生部(42)は、文章の
文節または単語の区切りを表わすビーブ音を発生し、か
かるビーブ音をスイッチ(41)に入力する。スイッチ
(41)は、マイク(3)から入力される音声と、信号
発生部〈42)より入力されるビーブ音を、録音再生装
置(2)に録音するよう、回路を接続し、録音再生装置
(2)に録音されている文章の文節または単語の区切り
と見なされた無音区間にビーブ音を録音する。
入力切り換え部(4)の信号発生部(42)は、文章の
文節または単語の区切りを表わすビーブ音を発生し、か
かるビーブ音をスイッチ(41)に入力する。スイッチ
(41)は、マイク(3)から入力される音声と、信号
発生部〈42)より入力されるビーブ音を、録音再生装
置(2)に録音するよう、回路を接続し、録音再生装置
(2)に録音されている文章の文節または単語の区切り
と見なされた無音区間にビーブ音を録音する。
次ぎに、オフライン認識の実施例について述べる。
オフライン認識の場合は、本装置に録音再生装置(2)
の録音音声を再生入力することにより文章作成を行なう
ものであるため、まず録音再生装置く2〉に文章を録音
する。
の録音音声を再生入力することにより文章作成を行なう
ものであるため、まず録音再生装置く2〉に文章を録音
する。
また、録音再生袋!(2)より音声入力を行なうため、
入力切り換え部〈4)により、録音再生装置(2)と音
声認識部(1)を接続する。
入力切り換え部〈4)により、録音再生装置(2)と音
声認識部(1)を接続する。
文章録音時は、文節単位または単語単位に発声し、文節
および単語間に無音区間を作る。また、第1図に示す如
き本装置専用の録音再生装置!(2)を使用する場合は
、文節および単語の区切りを明確にするため、区切りを
示すビーブ音を、録音再生装置(2)または本デイクチ
−ティングマシン本体に設定されている区切りキー(7
1)を押し録音する。
および単語間に無音区間を作る。また、第1図に示す如
き本装置専用の録音再生装置!(2)を使用する場合は
、文節および単語の区切りを明確にするため、区切りを
示すビーブ音を、録音再生装置(2)または本デイクチ
−ティングマシン本体に設定されている区切りキー(7
1)を押し録音する。
また、単語登録をした単語は、単語単位に発声をおこな
うが、録音再生装置(2)がキャラクタ−音発生機能を
持ち、かつ入力したい単語に相当するキャラクタ−をも
っていれば、音声の替わりにそのキャラクタ−音を録音
してもよい。
うが、録音再生装置(2)がキャラクタ−音発生機能を
持ち、かつ入力したい単語に相当するキャラクタ−をも
っていれば、音声の替わりにそのキャラクタ−音を録音
してもよい。
また、文章単位の頭だしゃ文章と文章の間に録音された
ノイズを音声と誤り認識してしまうことを避けるために
文章の始まりと終わりを示す信号を音声と共に録音して
おく。
ノイズを音声と誤り認識してしまうことを避けるために
文章の始まりと終わりを示す信号を音声と共に録音して
おく。
ただし、この信号の録音方法は、録音再生装置(2)が
マルチトラック方式か否かにより音声登録のところで述
べたように変わる。第11図は、マルチトラック方式お
よび、第12図はシングルトラック方式の図である。第
11図(a>、第12図(a)は、DTMF信号等の音
が、録音されている区間を音声領域として、検出する方
法である。
マルチトラック方式か否かにより音声登録のところで述
べたように変わる。第11図は、マルチトラック方式お
よび、第12図はシングルトラック方式の図である。第
11図(a>、第12図(a)は、DTMF信号等の音
が、録音されている区間を音声領域として、検出する方
法である。
第11図(b)、第12図(b)は、DTMF信号等の
音を、文章の始まる前に録音し、文章が終了したときに
、再度録音し、かかる両信号に挾まれた区間を音声領域
として、検出する方法である。
音を、文章の始まる前に録音し、文章が終了したときに
、再度録音し、かかる両信号に挾まれた区間を音声領域
として、検出する方法である。
また、第12図のシングルトラック方式の場合は、音声
区間とDTMF信号等の音が、重なることを考え、音声
帯域外のDTMF信号等を用いる。
区間とDTMF信号等の音が、重なることを考え、音声
帯域外のDTMF信号等を用いる。
また文章を認識するときは、信号の録音されている前後
t4およびt5の区間をサンプリングし、音声か否かを
判定するため必ずしも文章の始まりと信号の始まり、お
よび文章の終わりと信号の終わりが一致している必要は
ない、このため、文章を発声するタイミングとキーを押
すタイミングが少々ずれても認識可能である。
t4およびt5の区間をサンプリングし、音声か否かを
判定するため必ずしも文章の始まりと信号の始まり、お
よび文章の終わりと信号の終わりが一致している必要は
ない、このため、文章を発声するタイミングとキーを押
すタイミングが少々ずれても認識可能である。
次に、録音再生装置(2)を本装置の本体と接続し録音
音声を再生し認識処理を行なうが、この録音音声を認識
させる前に認識速度のモードを、録音音声の再生速度を
速くして、認識時間短縮を行なう早聞き認識のモードか
、通常の再生速度で認識させるモードか、時間的に余裕
があり、高認識率を必要とするときは、二度再生認識モ
ードのいずれかのモードに設定しておく。
音声を再生し認識処理を行なうが、この録音音声を認識
させる前に認識速度のモードを、録音音声の再生速度を
速くして、認識時間短縮を行なう早聞き認識のモードか
、通常の再生速度で認識させるモードか、時間的に余裕
があり、高認識率を必要とするときは、二度再生認識モ
ードのいずれかのモードに設定しておく。
まず早聞き認識モードの実施例を記す。
!?!、聞き認識モードでは、録音音声の再生速度を速
くしているため、入力音声の特性が、通常の再生速度で
再生された登録音声より作成した、標準パターンとは特
性が違っており、単に再生速度を速くした音声を入力し
ても、正確に音声認識を行なえない。
くしているため、入力音声の特性が、通常の再生速度で
再生された登録音声より作成した、標準パターンとは特
性が違っており、単に再生速度を速くした音声を入力し
ても、正確に音声認識を行なえない。
そこで、再生速度を速くした音声を正確に認識するため
、サンプリング周波数を変更する。以下に、かかる方法
の、実施例を記す。
、サンプリング周波数を変更する。以下に、かかる方法
の、実施例を記す。
第5図の特徴抽出部(12)のサンプリング周波数制御
部(12d)は、特徴抽出部(12)の入力音声のサン
プリング周波数を音声の標準パターンを作成したときの
サンプリング間波数のく再生速度/録音速度)倍に設定
し、音声をサンプリングし分析する。特徴抽出部(12
)以降の処理はオンライン認識時の実施例と同様、ただ
し、録音再生装置(2)の録音文章に、文節および単語
の区切りを明確にするための区切りを示すビーブ音を録
音済みの文章を入力し、特徴抽出部(12)がかかるビ
ーブ音を検出したとき、特徴抽出部(12)は無音区間
検出信号(ロ)の代わりに、ビーブ音検出信号(口l)
を発生する。受信信号が、無音区間検出信号(ロ)でな
く、ビーブ音検出信号(口つの場合、入力切り換え部(
4)の信号発生部(42)は、文章の文節または単語の
区切りを表わすビーブ音の発生は行なわない。
部(12d)は、特徴抽出部(12)の入力音声のサン
プリング周波数を音声の標準パターンを作成したときの
サンプリング間波数のく再生速度/録音速度)倍に設定
し、音声をサンプリングし分析する。特徴抽出部(12
)以降の処理はオンライン認識時の実施例と同様、ただ
し、録音再生装置(2)の録音文章に、文節および単語
の区切りを明確にするための区切りを示すビーブ音を録
音済みの文章を入力し、特徴抽出部(12)がかかるビ
ーブ音を検出したとき、特徴抽出部(12)は無音区間
検出信号(ロ)の代わりに、ビーブ音検出信号(口l)
を発生する。受信信号が、無音区間検出信号(ロ)でな
く、ビーブ音検出信号(口つの場合、入力切り換え部(
4)の信号発生部(42)は、文章の文節または単語の
区切りを表わすビーブ音の発生は行なわない。
また、音声認識部(1)が、単語を示すキャラクタ−音
を認識した場合は、かかるキャラクタ−音に対応した単
語を認識結果として出力する。
を認識した場合は、かかるキャラクタ−音に対応した単
語を認識結果として出力する。
次に二度再生認識モードの実施例を記す。
本モードは、まr録音音声を再生し本装置に入力する。
このとき音声認識部(1)の前処理部(11)で録音音
声の音圧変動を全て読みとり、このデータを第4図に示
す背圧変動メモリ(Llb)に記憶する0次ぎに、再び
録音音声を再生し本装置に入力する。このとき前処理部
(11)では、音圧変動メモリ(llb)に記憶された
データを使用し、特徴抽出部(12)への入力音圧を第
18図に示す如く、音声認識に最も適したレベルにあわ
せるよう、AGC回路(LLa)の増幅率を調整する。
声の音圧変動を全て読みとり、このデータを第4図に示
す背圧変動メモリ(Llb)に記憶する0次ぎに、再び
録音音声を再生し本装置に入力する。このとき前処理部
(11)では、音圧変動メモリ(llb)に記憶された
データを使用し、特徴抽出部(12)への入力音圧を第
18図に示す如く、音声認識に最も適したレベルにあわ
せるよう、AGC回路(LLa)の増幅率を調整する。
即ち、利得Gを固定利得Aに制御電圧V。(可変調整さ
れる)を乗じたものとする。
れる)を乗じたものとする。
また、二度再生認識モードの別の実施例として、多数回
再生認識モードも考えられる。これは、録音文章を多数
回再生入力し、入力のつど、音声認識部(1)における
認識方法を変更することによって認識された結果を比較
し、最も確からしさの尤度の大きいものを、選択する方
法である。
再生認識モードも考えられる。これは、録音文章を多数
回再生入力し、入力のつど、音声認識部(1)における
認識方法を変更することによって認識された結果を比較
し、最も確からしさの尤度の大きいものを、選択する方
法である。
また、録音再生装置く2)に登録用音声を録音しておら
ず、かつ録音再生装置(2)によっては再生速度を速く
した場合の周波数特性と通常の再生速度の場なの周波数
特性が違うものを使用するとき、または音声の標準パタ
ーン作成に使用した録音再生装置<2>と違う周波数特
性をもつ録音再生装置(2)に録音した文章を認識させ
るとき、または音声の標準パターン作成に使用した録音
再生装置(2)と規格上は同じ周波数特性を有するが使
用部品等の誤差の影響をうけ実際の周波数特性が音声の
標準パターン作成に使用した録音再生装置(2)と違っ
ている録音再生装置(2)に録音した文章を認識させる
ときは、以下に述べる周波数特性の影響を補正する機能
を使用する。
ず、かつ録音再生装置(2)によっては再生速度を速く
した場合の周波数特性と通常の再生速度の場なの周波数
特性が違うものを使用するとき、または音声の標準パタ
ーン作成に使用した録音再生装置<2>と違う周波数特
性をもつ録音再生装置(2)に録音した文章を認識させ
るとき、または音声の標準パターン作成に使用した録音
再生装置(2)と規格上は同じ周波数特性を有するが使
用部品等の誤差の影響をうけ実際の周波数特性が音声の
標準パターン作成に使用した録音再生装置(2)と違っ
ている録音再生装置(2)に録音した文章を認識させる
ときは、以下に述べる周波数特性の影響を補正する機能
を使用する。
まず、録音再生袋fi(2)の周波数特性を測定する場
合の基準となる基準正弦波信号を基準信号発生部(42
)で発生させ、録音再生袋e(2)に録音する。しかる
後に録音されたかかる基準正弦波信号を本装置に再生入
力する。入力された基準正弦波信号を音声認識部(1)
は分析し、録音された基準正弦波信号と、基準信号発生
部(42)で発生させた基準正弦波信号との周波数特性
の差を求め、録音された基準正弦波信号と、基準信号発
生部(42)で発生きせた基準正弦波信号との周波数特
性の差を小さくするように、補正をかける。補正をかけ
る手段は、音声認識部(1)の特徴抽出部(12)の特
徴抽出方法により、多数考えられる1例えば第13図に
示したように、直列接続されたバンドパスフィルタ(B
PF)と増巾器(AMP)との並列接続体からなるアナ
ログフィルターバンク方式とするものであれば、増幅器
(A M P )の増幅率を調整することにより、基準
信号発生部(42)で発生させた基準正弦波信号との周
波数特性の差を小さくするようにフィルタからの出力を
調整する。また、特徴抽出部(12)の特徴抽出方法と
して、ディジタルフィルターをもちいていれば、ディジ
タルフィルターの特性を決めているパラメータを変更す
ればよい、その他、音声認識部(1)の特徴抽出部(1
2)の特徴抽出方法に対応して、あらゆる方法が考えら
れる。
合の基準となる基準正弦波信号を基準信号発生部(42
)で発生させ、録音再生袋e(2)に録音する。しかる
後に録音されたかかる基準正弦波信号を本装置に再生入
力する。入力された基準正弦波信号を音声認識部(1)
は分析し、録音された基準正弦波信号と、基準信号発生
部(42)で発生させた基準正弦波信号との周波数特性
の差を求め、録音された基準正弦波信号と、基準信号発
生部(42)で発生きせた基準正弦波信号との周波数特
性の差を小さくするように、補正をかける。補正をかけ
る手段は、音声認識部(1)の特徴抽出部(12)の特
徴抽出方法により、多数考えられる1例えば第13図に
示したように、直列接続されたバンドパスフィルタ(B
PF)と増巾器(AMP)との並列接続体からなるアナ
ログフィルターバンク方式とするものであれば、増幅器
(A M P )の増幅率を調整することにより、基準
信号発生部(42)で発生させた基準正弦波信号との周
波数特性の差を小さくするようにフィルタからの出力を
調整する。また、特徴抽出部(12)の特徴抽出方法と
して、ディジタルフィルターをもちいていれば、ディジ
タルフィルターの特性を決めているパラメータを変更す
ればよい、その他、音声認識部(1)の特徴抽出部(1
2)の特徴抽出方法に対応して、あらゆる方法が考えら
れる。
前記までの操作により、音声入力した文章ほかな列に変
換された事となる。このかな列変換された文章が入力し
ん文章と違っている場合の修正方法を第14図を使用し
それぞれの誤りかたに場合分けして以下に述べる。以下
の手順により修正を行なう。
換された事となる。このかな列変換された文章が入力し
ん文章と違っている場合の修正方法を第14図を使用し
それぞれの誤りかたに場合分けして以下に述べる。以下
の手順により修正を行なう。
第14図(a)は入力文章、同図(b)は入力音声、同
図(c)は認識結果、同図(d)〜(h)は修正過程、
同図(1)は修正結果を表わしている。
図(c)は認識結果、同図(d)〜(h)は修正過程、
同図(1)は修正結果を表わしている。
まず、単語として発声したものが文節として誤認識され
た場合の修正法について述べる。同図(C)に示したよ
うに単語“C”として発声したものが、文節“し−”と
して認識された場合、先ずカーソル<X)を誤った単語
の部分へ移動する[同図(d)i]、 次ぎに単語次
候補キー(72)を押し単語の次候補を表示させる[同
図(d)iコ、 この結果が正しければ次の修正部分
へ進む、もしこの結果が誤っていれば、再び単語次候補
キー(72)を押しは語の次候補を表示きせる。この操
作を正解が表示きれるまで繰り返す。
た場合の修正法について述べる。同図(C)に示したよ
うに単語“C”として発声したものが、文節“し−”と
して認識された場合、先ずカーソル<X)を誤った単語
の部分へ移動する[同図(d)i]、 次ぎに単語次
候補キー(72)を押し単語の次候補を表示させる[同
図(d)iコ、 この結果が正しければ次の修正部分
へ進む、もしこの結果が誤っていれば、再び単語次候補
キー(72)を押しは語の次候補を表示きせる。この操
作を正解が表示きれるまで繰り返す。
次ぎに、文節として発声したものが単語として誤認識さ
れた場合の修正法について述べる0文節“い”として発
声したものが、単語“E″として認識された場合、先ず
カーソル(X)を誤った文節の部分へ移動する0次ぎに
文節次候補キー(73)を押し文節の次候補を表示させ
る。この結果が正しければ次の修正部分へ進む。
れた場合の修正法について述べる0文節“い”として発
声したものが、単語“E″として認識された場合、先ず
カーソル(X)を誤った文節の部分へ移動する0次ぎに
文節次候補キー(73)を押し文節の次候補を表示させ
る。この結果が正しければ次の修正部分へ進む。
もしこの結果が誤っていれば、文節次候補キー(73)
を押し文節の次候補を表示させる。この操作を正解が表
示されるまで繰り返す。
を押し文節の次候補を表示させる。この操作を正解が表
示されるまで繰り返す。
単語前候補キー(74)を押すことにより単語、文節前
候補キー(75)を押すことにより文節、それぞれの一
つ前の候補を表示させることも出来る。
候補キー(75)を押すことにより文節、それぞれの一
つ前の候補を表示させることも出来る。
上述の2通りの修正法で正解が得られないときは音節単
位の修正や、単語または文節または音節を再発声入力す
る。
位の修正や、単語または文節または音節を再発声入力す
る。
また、再発声入力時に再び、文節を単語認識したり、単
語を文節認識したりすることを避けるため、候補作成部
(15)を、単語認識部(13)より送られてきた認識
結果のみを認識結果としてみなし、文節認識部(14)
より送られてきた¥I!識結果は、無視するよう外部よ
り制御できる。
語を文節認識したりすることを避けるため、候補作成部
(15)を、単語認識部(13)より送られてきた認識
結果のみを認識結果としてみなし、文節認識部(14)
より送られてきた¥I!識結果は、無視するよう外部よ
り制御できる。
また、候補作成部(15)を、文節認識部(14)より
送られてきた認識結果のみを認識結果としてみなし、単
語認識部(13)より送られてきた認識結果は、無視す
るよう外部より制御できる。
送られてきた認識結果のみを認識結果としてみなし、単
語認識部(13)より送られてきた認識結果は、無視す
るよう外部より制御できる。
ト述の次候補キーとは、以下に述べる機能を有するキー
の事であり、第15図を使用し説明する。
の事であり、第15図を使用し説明する。
本装置の音声認識部(1)では、単語認識と文節認識が
並走しており、単語および文節の再認識結果を求めてい
ることは先に述べたが、この再認識結果より、文節認識
処理の結果を尤度の大きいものから順番に認識結果を表
示装置(6)に表示させるためのキーが文節次候補キー
(73)であり、単語認識処理の結果を尤度の大きいも
のから順番に認識結果を表示装置に表示させるためのキ
ーが単語次候補キー(72)であり、現在表示装置に表
示されている認識結果より、一つ尤度の大きい認識結果
を表示装置(6)に表示するキーが、単語前候補キーお
よび文節前候補キーである。
並走しており、単語および文節の再認識結果を求めてい
ることは先に述べたが、この再認識結果より、文節認識
処理の結果を尤度の大きいものから順番に認識結果を表
示装置(6)に表示させるためのキーが文節次候補キー
(73)であり、単語認識処理の結果を尤度の大きいも
のから順番に認識結果を表示装置に表示させるためのキ
ーが単語次候補キー(72)であり、現在表示装置に表
示されている認識結果より、一つ尤度の大きい認識結果
を表示装置(6)に表示するキーが、単語前候補キーお
よび文節前候補キーである。
第15図は候補作成部(15)の候補バッファ(15a
)である、この図は、−位の認識結果が、「たんご、で
あり、これは単語認識部〈13)から送られてきた認識
結果であることを(電属)で表わしている。同様に三位
の認識結果が、′たんごを」であり、これは文節認識部
(14)から送られてきた認識結果であることを(文節
)で表わし、三位の認識結果が、「たんごに」であり、
これは文節認識部(14)から送られてきた認識結果で
あることを(文節)で表わし、四位の認識結果が、「た
んこう。
)である、この図は、−位の認識結果が、「たんご、で
あり、これは単語認識部〈13)から送られてきた認識
結果であることを(電属)で表わしている。同様に三位
の認識結果が、′たんごを」であり、これは文節認識部
(14)から送られてきた認識結果であることを(文節
)で表わし、三位の認識結果が、「たんごに」であり、
これは文節認識部(14)から送られてきた認識結果で
あることを(文節)で表わし、四位の認識結果が、「た
んこう。
であり、これは単語認識部(13)から送られてきた認
識結果であることを(単語)で表わしている。
識結果であることを(単語)で表わしている。
いま、表示装置(6)には、rたんご、が表示され℃い
るとする。かかる状態で文節次候補キー(73)を押す
と表示装置(6)にはまたんごを」が表示される。また
、単語次候補キー(72)を押すと表示装rlt(6)
には「たんこう、が表示される。
るとする。かかる状態で文節次候補キー(73)を押す
と表示装置(6)にはまたんごを」が表示される。また
、単語次候補キー(72)を押すと表示装rlt(6)
には「たんこう、が表示される。
また、表示装!(6)には、「たんこう」が表示されて
いる場合に、単語前候補キー(74)を押すと表示装置
1(6)には「たんご」が表示され、文節前候補キー(
73)を押すと表示装置(6)にはまたんごに、が表示
される。
いる場合に、単語前候補キー(74)を押すと表示装置
1(6)には「たんご」が表示され、文節前候補キー(
73)を押すと表示装置(6)にはまたんごに、が表示
される。
次ぎに一文節全体の一括修正方法について述べる。
第14図(e)の例は単語rT」をr A 、と誤認識
した例である。先ずカーソルを修正したい単語へ移動す
る[同図(e)il− 次に単語次候補キー(72)を押し単語の次候補を表示
させる[同図(e )i ]。この結果が正しければ次
の修正部分へ進む、もしこの結果が誤っていれば、@語
法候補キー(72)を押し単語の次候補を表示させる。
した例である。先ずカーソルを修正したい単語へ移動す
る[同図(e)il− 次に単語次候補キー(72)を押し単語の次候補を表示
させる[同図(e )i ]。この結果が正しければ次
の修正部分へ進む、もしこの結果が誤っていれば、@語
法候補キー(72)を押し単語の次候補を表示させる。
この操作を正解が表示されるまで繰り返す。正解が表示
され無ければ、再発声を行ない、再入力をおこなう、前
単語候補キー(74)を押すことにより一つ前に表示し
た単語の候補を表示させることも出来る。
され無ければ、再発声を行ない、再入力をおこなう、前
単語候補キー(74)を押すことにより一つ前に表示し
た単語の候補を表示させることも出来る。
次ぎに一単語全体の一括修正方法について述べる。
第14図(f’)の例は文節「がめんの、を「がいねん
のコと誤認識した例である。先ずカーソルを修正したい
文節へ移動する[同図(f)il。
のコと誤認識した例である。先ずカーソルを修正したい
文節へ移動する[同図(f)il。
次ぎに文節次候補キー(73)を押し文節の次候補を表
示させる[同図(f’)il、この結果が正しければ次
の修正部分へ進む、もしこの結果が誤っていれば、文節
次候補キー(73)を押し文節の次候補を表示させる。
示させる[同図(f’)il、この結果が正しければ次
の修正部分へ進む、もしこの結果が誤っていれば、文節
次候補キー(73)を押し文節の次候補を表示させる。
この操作を正解が表示されるまで繰り返す、正解が表示
され無ければ、再発声を行ない、再入力をおこなう、前
文節候補キー(75)を押すことにより一つ前に表示し
た文節の候補を表示させることも出来る゛。
され無ければ、再発声を行ない、再入力をおこなう、前
文節候補キー(75)を押すことにより一つ前に表示し
た文節の候補を表示させることも出来る゛。
次ぎに音節単位の修正方法について述べる。
第14図(h)の例は文節「おんせいで、を「おんけい
で、と誤認識した例である。この例は音節「け、をrせ
、に修正する場合であるが、先ずカーソル(X)を修正
したい音節「け」へ移動し[同図(h)il、音節次候
補キー(76)を押す、音節次候補キー(76)を押す
ことにより修正したい部分の音節と最も距離が近いa節
が表示される[同図(h)iL正解が表示きれれば、次
の修正部分へ移動する。もしこの結果が誤っていれば、
再度音節次候補キーを押し音節の次候補を表示させる。
で、と誤認識した例である。この例は音節「け、をrせ
、に修正する場合であるが、先ずカーソル(X)を修正
したい音節「け」へ移動し[同図(h)il、音節次候
補キー(76)を押す、音節次候補キー(76)を押す
ことにより修正したい部分の音節と最も距離が近いa節
が表示される[同図(h)iL正解が表示きれれば、次
の修正部分へ移動する。もしこの結果が誤っていれば、
再度音節次候補キーを押し音節の次候補を表示させる。
この操作を正解が表示されるまで繰り返す、正解が表示
され無ければ、再発声により再入力を行なう。再入力の
結果が間違っている時は上記の手順により再び修正する
。この操作を正解が表示されるまで繰り返す。
され無ければ、再発声により再入力を行なう。再入力の
結果が間違っている時は上記の手順により再び修正する
。この操作を正解が表示されるまで繰り返す。
また前音節候補キー(77)を押すことにより音節の一
つ前の候補を表示させることも出来る。
つ前の候補を表示させることも出来る。
音節を削除したい時は、カーソルを修正したい音節へ移
動し削除キー(78)を押し削除する。
動し削除キー(78)を押し削除する。
音節を挿入したい時は、カーソルを修正したい音節へ移
動し挿入キー(79)を押し挿入する。
動し挿入キー(79)を押し挿入する。
次に第16図を使用し、数音節修正法について記す。
この例は、同図(a)の入力文章“かいじよう”を同図
(b )’″かんじよう」と誤認識した例である。この
場合、まずカーソル(X)を修正したい音節にもってい
き〔同図(C)]、“かい”と再再発大入する。かかる
再発声入力音声は音声認識部(1)で認識され、認識結
果は表示装置(6)に表示される。認識結果が正しけれ
ば、次の修正部へすすむ。もし、同図(d)に示すよう
に、「かい」を1かえJと誤認識した場合、単語の場合
は、単語次候補キー(72)を押す0文節の場合は、文
節次候補キー(73)を押す、第16図は単語の場合の
例であるので、以下単語の修正方法について記す、同図
(d)の状態で、単語次候補キー(72)を押した場合
、まず、制御部(5)は、単語辞書(13d)より、修
正前の同図(b)の認識結果1がんじょう、と再発声後
の同図(d)の認識結果1かえじょう、とを比較し、同
一部分「じよう」をみつける0次に、制御部(5)は、
単語辞書(13d)より、かかる同一部分「じよう」を
もつ単語を選ぶ、同図(f’)は単語辞!!(13d)
の記憶内容を示しており、同図(g)は記憶内容より選
んだ1じょう」をもつ単語を示している0次に制御部(
5)は、同図(g)に記した単語と、再発声後の認識結
果1かえじよう、との、尤度を計算し、最も尤度値の大
きい単語を表示する[同図(e)]。
(b )’″かんじよう」と誤認識した例である。この
場合、まずカーソル(X)を修正したい音節にもってい
き〔同図(C)]、“かい”と再再発大入する。かかる
再発声入力音声は音声認識部(1)で認識され、認識結
果は表示装置(6)に表示される。認識結果が正しけれ
ば、次の修正部へすすむ。もし、同図(d)に示すよう
に、「かい」を1かえJと誤認識した場合、単語の場合
は、単語次候補キー(72)を押す0文節の場合は、文
節次候補キー(73)を押す、第16図は単語の場合の
例であるので、以下単語の修正方法について記す、同図
(d)の状態で、単語次候補キー(72)を押した場合
、まず、制御部(5)は、単語辞書(13d)より、修
正前の同図(b)の認識結果1がんじょう、と再発声後
の同図(d)の認識結果1かえじょう、とを比較し、同
一部分「じよう」をみつける0次に、制御部(5)は、
単語辞書(13d)より、かかる同一部分「じよう」を
もつ単語を選ぶ、同図(f’)は単語辞!!(13d)
の記憶内容を示しており、同図(g)は記憶内容より選
んだ1じょう」をもつ単語を示している0次に制御部(
5)は、同図(g)に記した単語と、再発声後の認識結
果1かえじよう、との、尤度を計算し、最も尤度値の大
きい単語を表示する[同図(e)]。
次に文節または単語の認識境界誤りを修正する場合につ
いて述べる。
いて述べる。
第14図(g)の例は文節1ぶんしようを、を1ん」と
1し」の間にCvl印で示す無音区間があると誤認識し
、単語「ぶん」と文節rしようを。
1し」の間にCvl印で示す無音区間があると誤認識し
、単語「ぶん」と文節rしようを。
といつように二つに分けて誤認識した例である。
この場合認識境界誤りを修正しなければならないが、認
識境界区切り記号を削除したい場合は、削除したい認識
境界区切り記号にカーソル(X)を8勤し[同図(g)
il、削除キー(78〉を押す[同図(g)il、認識
境界区切り記号を挿入したい場合は挿入したい位置にあ
る音節にカーソル(X)を移動し挿入キー(79)を押
す。
識境界区切り記号を削除したい場合は、削除したい認識
境界区切り記号にカーソル(X)を8勤し[同図(g)
il、削除キー(78〉を押す[同図(g)il、認識
境界区切り記号を挿入したい場合は挿入したい位置にあ
る音節にカーソル(X)を移動し挿入キー(79)を押
す。
ただし、後に述べるように録音再生装置く2)の区切り
ビーブ音と、記憶装置(8)に記憶された認識結果に付
加された区切り記号は、録音再生装置(2〉と記憶装!
<8 >の同期をとるための目印となるので、対応はと
っておかなければならない、ゆえに、この時記憶装置(
8)に区切り記号が挿入削除されたことを記憶装置(8
)に記憶しておく。
ビーブ音と、記憶装置(8)に記憶された認識結果に付
加された区切り記号は、録音再生装置(2〉と記憶装!
<8 >の同期をとるための目印となるので、対応はと
っておかなければならない、ゆえに、この時記憶装置(
8)に区切り記号が挿入削除されたことを記憶装置(8
)に記憶しておく。
例えば、第14図(g)1に示した文章が、第14図(
g )iに示すように、記憶装置(8)に記憶されてい
るものとする。(g)iの文章を、(g)iに示すよう
に修正した場合、記憶装置く8)に記憶きれていた区切
り記号「7」は、記号1マ」に改められる。記号「マ」
は、区切り記号17」が削除されたことを示す記号であ
り、認識単位を示す記号には用いられず、録音再生装置
t(2)等との制御のみに用いられる記号である。
g )iに示すように、記憶装置(8)に記憶されてい
るものとする。(g)iの文章を、(g)iに示すよう
に修正した場合、記憶装置く8)に記憶きれていた区切
り記号「7」は、記号1マ」に改められる。記号「マ」
は、区切り記号17」が削除されたことを示す記号であ
り、認識単位を示す記号には用いられず、録音再生装置
t(2)等との制御のみに用いられる記号である。
このような構成にすれば、区切り記号「マ、を削除した
後も、録音再生装置(2)に録音されたビープ音と、記
憶装置1(8>に記憶された記号1マ」「マ、を用いる
ことにより、同期をとりながら両装置を制御できる。
後も、録音再生装置(2)に録音されたビープ音と、記
憶装置1(8>に記憶された記号1マ」「マ、を用いる
ことにより、同期をとりながら両装置を制御できる。
以上は、区切り記号1マ」を削除した場合の例であるが
、挿入された場合も同様の考え方ができる。つまり、制
御信号としては用いられず、区切りのみを表わす特定の
記号を、区切り記号17゜の替わりに挿入すればよい。
、挿入された場合も同様の考え方ができる。つまり、制
御信号としては用いられず、区切りのみを表わす特定の
記号を、区切り記号17゜の替わりに挿入すればよい。
以上の修正手順により、第14図(1)に示すように、
文章を修正する。
文章を修正する。
認識境界誤り修正を行なった後認識境界誤り修正を行な
った認識単位について、修正手順に従って修正を加える
。再発声による修正の場合、標準バクーンを登録した人
なら誰の音声でも認識できるので文章の録音者でなくと
も修正操作を行なえる。
った認識単位について、修正手順に従って修正を加える
。再発声による修正の場合、標準バクーンを登録した人
なら誰の音声でも認識できるので文章の録音者でなくと
も修正操作を行なえる。
以上、かな列文章の修正方法を述べたが、修正を補助す
る機能として以下に述べる機能を有する。
る機能として以下に述べる機能を有する。
表示装置(6)に表示された文字列上のカーソル移動と
表示画面のスクロール機能により、記憶装置1<8 >
より順次記憶文章を表示画面上に表示できるが、この時
画面上に表示されている部分に対応する音声が録音再生
装置く2)から再生される。
表示画面のスクロール機能により、記憶装置1<8 >
より順次記憶文章を表示画面上に表示できるが、この時
画面上に表示されている部分に対応する音声が録音再生
装置く2)から再生される。
また、上述のJa能とは逆の機能も有し、録音再生装置
(2)から再生されている部分に対応した文字列が表示
装置1!(6)に表示される。
(2)から再生されている部分に対応した文字列が表示
装置1!(6)に表示される。
また、上述のどちらの方法の場合も録音文章に録音され
ている区切り記号前と、表示側に記録されている区切り
記号を、同期を取るタイミング信号として使用し、録音
再生装置(2)の再生と表示とがお互いに同期をとりな
がら動作するよう制御している。また、キーボード(7
)、または録音再生装置(2)より再生を止める信号が
入力されたとき、再生を止めるとともに、表示のスクロ
ールまたはカーソルの移動を止める。
ている区切り記号前と、表示側に記録されている区切り
記号を、同期を取るタイミング信号として使用し、録音
再生装置(2)の再生と表示とがお互いに同期をとりな
がら動作するよう制御している。また、キーボード(7
)、または録音再生装置(2)より再生を止める信号が
入力されたとき、再生を止めるとともに、表示のスクロ
ールまたはカーソルの移動を止める。
以北の録音再生装置(2)の再生と表示との同期機能に
より、再生音を聞きながら文字列の確認を行なうことが
でき、修正個所の発見を容易にする。
より、再生音を聞きながら文字列の確認を行なうことが
でき、修正個所の発見を容易にする。
ここで述べている同期のとり方として、再生されている
部分に対応する記憶装置(8)の文字列を表示装置く6
〉に表示する方法と、再生されている部分に対応する部
分より区切り記号−つ遅れた部分のかな列を表示装!(
6)に表示する方法とがある。
部分に対応する記憶装置(8)の文字列を表示装置く6
〉に表示する方法と、再生されている部分に対応する部
分より区切り記号−つ遅れた部分のかな列を表示装!(
6)に表示する方法とがある。
この場合、修正のため表示を停止したときには既に録音
音声の修正部分は再生きれているため再度修正部分を再
生するためには、再生された文章より修正したい部分の
頭だしを行なう必要がある。そこで、この方法を採用す
る場合は、表示を停止したとき、自動的に録音再生装置
(2)を一つ前の区切り記号までバックトラックする機
能をもたせる。
音声の修正部分は再生きれているため再度修正部分を再
生するためには、再生された文章より修正したい部分の
頭だしを行なう必要がある。そこで、この方法を採用す
る場合は、表示を停止したとき、自動的に録音再生装置
(2)を一つ前の区切り記号までバックトラックする機
能をもたせる。
また、録音再生装置(2)に、テープレコーダを使用し
た場合、再生部分をモータの回転により制御することと
、テープのたるみなどにより、修正部分に対応した部分
の頭出しが正確に行なえない場合がある。
た場合、再生部分をモータの回転により制御することと
、テープのたるみなどにより、修正部分に対応した部分
の頭出しが正確に行なえない場合がある。
このような場合は、入力されて(る音声を、−定時間長
だけPCMQ音やADPCMI音で記憶しておき、入力
された音声を聞き返したい場合は、PCM録音やADP
CM録音音声を聞き返す機能を付加する。
だけPCMQ音やADPCMI音で記憶しておき、入力
された音声を聞き返したい場合は、PCM録音やADP
CM録音音声を聞き返す機能を付加する。
第17図は上記の、機能の一実施例であり、PCM録音
のデータを記憶しておくPCMデータメモリの図である
0図中の数字01〜05はアドレスを示している。入力
音声は、第14図に記した“わたしわ1てん1し−Iあ
−る1て−1かめんの1ふんしようを1てん1おんせい
でIしゆうせいした1まる”という、文章である。
のデータを記憶しておくPCMデータメモリの図である
0図中の数字01〜05はアドレスを示している。入力
音声は、第14図に記した“わたしわ1てん1し−Iあ
−る1て−1かめんの1ふんしようを1てん1おんせい
でIしゆうせいした1まる”という、文章である。
上記の、音声が入力されたとき、PCMデータメモリC
DM)には、01番地に最初の無音区間までの音声“わ
たしわ”が記憶される。02番地に2番目の無音区間ま
での音声“てん”が記憶される。05番地に5番目の無
音区間までの音声“て−”が記憶される。このとき、P
CMアドレスポインタ(AP)は、PCMデータメモリ
に記憶されているデータのうち、1番先に記憶されたデ
ータのアドレスを記憶しておく6本例では、01が記憶
きれる。
DM)には、01番地に最初の無音区間までの音声“わ
たしわ”が記憶される。02番地に2番目の無音区間ま
での音声“てん”が記憶される。05番地に5番目の無
音区間までの音声“て−”が記憶される。このとき、P
CMアドレスポインタ(AP)は、PCMデータメモリ
に記憶されているデータのうち、1番先に記憶されたデ
ータのアドレスを記憶しておく6本例では、01が記憶
きれる。
この段階でPCMデータメモリは一杯になる。
次に、音声が入力されたときは、PCMデータメモリ(
DM)に記憶されているデータのうち、1番先に記憶さ
れたデータのアドレスに、入力された音声を記憶する0
本例では“わたしわ”が記憶されていたアドレス01に
1かめんの”を記憶する。このとき、PCMアドレスポ
インタ(AP)は、PCMデータメモリ<DM>に記憶
されているデータのうち、1番先に記憶されたデータの
アドレスを記憶しておく0本例では、02が記憶される
。
DM)に記憶されているデータのうち、1番先に記憶さ
れたデータのアドレスに、入力された音声を記憶する0
本例では“わたしわ”が記憶されていたアドレス01に
1かめんの”を記憶する。このとき、PCMアドレスポ
インタ(AP)は、PCMデータメモリ<DM>に記憶
されているデータのうち、1番先に記憶されたデータの
アドレスを記憶しておく0本例では、02が記憶される
。
この状態で、PCMデータメモリ(DM)の内容を再生
する場合、PCMアドレスポインタ(AP)の指してい
る、アドレスから、再生する0本例では、02,03,
04,05,01の順番に再生していく。
する場合、PCMアドレスポインタ(AP)の指してい
る、アドレスから、再生する0本例では、02,03,
04,05,01の順番に再生していく。
かかる方法により、何度でも、正確に素早く、音声を聞
き返すことが可能となる。
き返すことが可能となる。
また、画面上の認識単位の区切り記号上へカーソル(X
)を移動し録音音声の頭出しキー(70)を押すことに
より、カーソルが示している認識単位に対応した録音再
生装置(2)側の区切り記号背部分を録音文章より捜し
出し、これに続く文章を再生する機能を右横−る。以下
に、かかる1a爺の実施例を示す。
)を移動し録音音声の頭出しキー(70)を押すことに
より、カーソルが示している認識単位に対応した録音再
生装置(2)側の区切り記号背部分を録音文章より捜し
出し、これに続く文章を再生する機能を右横−る。以下
に、かかる1a爺の実施例を示す。
認識した文章の確認のため、認識結果を記憶装置(8)
より読み出し、表示装r!t、(6)に冒頭より表示さ
せる。この時、第19図、制御部く5)の区切り記号カ
ウンター(5a)は、記憶装置1(8)より読み出され
た区切り記号の数を計数していく、読み出した認識結果
が誤っている場合は、誤っている部分にカーソルをあて
、頭出しキーを押す、制御部(5)は、録音再生装置(
2)に録音されている文章を、早送り再生モードで再生
させる。特徴抽出部(12)のビープ音カウンター(1
2e)は、録音再生装ff(2)より入力される文章中
の区切りをしめすビーブ音を計数する。
より読み出し、表示装r!t、(6)に冒頭より表示さ
せる。この時、第19図、制御部く5)の区切り記号カ
ウンター(5a)は、記憶装置1(8)より読み出され
た区切り記号の数を計数していく、読み出した認識結果
が誤っている場合は、誤っている部分にカーソルをあて
、頭出しキーを押す、制御部(5)は、録音再生装置(
2)に録音されている文章を、早送り再生モードで再生
させる。特徴抽出部(12)のビープ音カウンター(1
2e)は、録音再生装ff(2)より入力される文章中
の区切りをしめすビーブ音を計数する。
比較回路(5b)は、ビープ音カウンター(12e)(
7)値が、先に述べた区切り記号カウンター(5a)の
値より、1つ小さくなったとき、信号(ハ)を録音再生
装置(2)に送り、再生を止める。
7)値が、先に述べた区切り記号カウンター(5a)の
値より、1つ小さくなったとき、信号(ハ)を録音再生
装置(2)に送り、再生を止める。
また、認識結果、および修正を終了した文章の確認のた
めには、記憶装置(8)の記憶データを表示装[(6)
に文字列で表示させ、表示画面上に表示された文字列を
目で追い、読まなければならないため、非常に目が疲れ
る。
めには、記憶装置(8)の記憶データを表示装[(6)
に文字列で表示させ、表示画面上に表示された文字列を
目で追い、読まなければならないため、非常に目が疲れ
る。
かかる点に鑑み、本装置は認識結果を記憶させた記憶装
置(8)上の文字列を、音声合成機能により読み上げる
機能をもたせることにより、¥!、識結果、および修正
を終了した文章の確認を音声合成音を聞くことにより行
なえるようにできる。
置(8)上の文字列を、音声合成機能により読み上げる
機能をもたせることにより、¥!、識結果、および修正
を終了した文章の確認を音声合成音を聞くことにより行
なえるようにできる。
この場合も音声合成部く9)と記憶装置(8)と録音再
生装置(2)と表示装置t(6)との同期を取るタイミ
ング信号として、区切り記号を使用する。
生装置(2)と表示装置t(6)との同期を取るタイミ
ング信号として、区切り記号を使用する。
つまり、音声合成部(9)が記憶装置(8)より読み上
げている部分に相当する文字列が表示装置(6)に表示
され、同時に録音再生装置(2)より録音部分を頭出し
している。この方法により、音声合成Jの読み合わせ機
能により誤りを発見し修正のために音声合成の読み合わ
仕機能を停止させたとき、表示装置(6)の表示も録音
再生装置t(2)の録音部分も誤り部分を示しでおり、
即座に修正を行なうことができる。
げている部分に相当する文字列が表示装置(6)に表示
され、同時に録音再生装置(2)より録音部分を頭出し
している。この方法により、音声合成Jの読み合わせ機
能により誤りを発見し修正のために音声合成の読み合わ
仕機能を停止させたとき、表示装置(6)の表示も録音
再生装置t(2)の録音部分も誤り部分を示しでおり、
即座に修正を行なうことができる。
ここで述べている同期のとり方として、音声合成機能に
より読み上げられている部分に対応する記憶装置のかな
列を表示袋!(6)に表示すると同時に、録音再生装置
(2)に録音されている文章より該当するa節部分を再
生する方法と、音声合成機能により読み上げられている
部分に対応する部分より、区切り記号−つ遅れた録音再
生装置(2)に録音されている文章部分再生する方法と
がある。後者の場合、修正のため音声合成を停止したと
き、録音再生装置(2)は修正したい部分より手mlで
停止しているため、この状態で再生すれば直ぐに修正部
分の音声を再生できる。前者の場合は修正のため音声合
成を停としたときには既に録音音声の修正部分は再生さ
れているため再度修正部分を再生するためにはバックト
ラックする必要がある。そこで、前者の方法を採用する
場合は表示を停止したとき、自動的に録音再生装置(2
)が一つ前の区切り記号までバックトラックする機能を
もたせるのが好ましい。
より読み上げられている部分に対応する記憶装置のかな
列を表示袋!(6)に表示すると同時に、録音再生装置
(2)に録音されている文章より該当するa節部分を再
生する方法と、音声合成機能により読み上げられている
部分に対応する部分より、区切り記号−つ遅れた録音再
生装置(2)に録音されている文章部分再生する方法と
がある。後者の場合、修正のため音声合成を停止したと
き、録音再生装置(2)は修正したい部分より手mlで
停止しているため、この状態で再生すれば直ぐに修正部
分の音声を再生できる。前者の場合は修正のため音声合
成を停としたときには既に録音音声の修正部分は再生さ
れているため再度修正部分を再生するためにはバックト
ラックする必要がある。そこで、前者の方法を採用する
場合は表示を停止したとき、自動的に録音再生装置(2
)が一つ前の区切り記号までバックトラックする機能を
もたせるのが好ましい。
以上、認識結果を記憶装置1t(8)に記憶してお〈実
施例を記してきたが、別の実施例として、録音再生装置
(2)に認識結束を記憶きせる構成としてもよい。
施例を記してきたが、別の実施例として、録音再生装置
(2)に認識結束を記憶きせる構成としてもよい。
このように、記憶装置(8)に記憶された、認識結果を
、原文の録音された録音再生装置(2)に記録すれば、
原文と認識結果が、同一記録媒体に記録できるため、原
文と認識結果の管理が容易になる。
、原文の録音された録音再生装置(2)に記録すれば、
原文と認識結果が、同一記録媒体に記録できるため、原
文と認識結果の管理が容易になる。
また、録音文章を、再生入力しながら、認識した結果を
録音再生袋e(2)に録音していくことにより、外部記
憶装置が不要となる。
録音再生袋e(2)に録音していくことにより、外部記
憶装置が不要となる。
いす゛れの場合も、マルチトラック方式の録音再生装置
f(2)を用いることにより、録音音声を再生しながら
、音声の録音きれていないトラックに認識結果を記憶さ
せることができる。
f(2)を用いることにより、録音音声を再生しながら
、音声の録音きれていないトラックに認識結果を記憶さ
せることができる。
(ト)発明の効果
本発明の文章作成システムによれば、録音文章に録音さ
れている無音区間検出信号と、記憶装置に記録されてい
る区切り記号を、同期を取るタイミング信号として使用
し、録音再生装置の再生と表示とをお亙いに同期をとり
ながら動作させるため、画面上に表示されている部分に
対応する録音音声を、録音再生装置からずれなく再生す
ることができ、音声を聞きながら画面に表示される文章
を確認できる。
れている無音区間検出信号と、記憶装置に記録されてい
る区切り記号を、同期を取るタイミング信号として使用
し、録音再生装置の再生と表示とをお亙いに同期をとり
ながら動作させるため、画面上に表示されている部分に
対応する録音音声を、録音再生装置からずれなく再生す
ることができ、音声を聞きながら画面に表示される文章
を確認できる。
第1図は本発明の音声認識システムを採用したデイクチ
−ティングマシンの外観図、第2図はデイクチ−ティン
グマシンの構成図、第3図は音声認a部(1)の構成図
、第4図は前処理部(11)の構成図、第5図は特徴抽
出部(12)の構成図、第6図は単語認識部(13)の
構成図、第7図は文m認識部(14)の構成図、第8図
は入力切り換え部(4)の構成図、第9図は見出し語と
0!音方式とキルラフター音の関係図、第10図はキャ
ラクタ−音の録音方法と音声区間の関係図、第11図は
録音再生装置がマルチトラック方式の場合の録音方法を
示す図、第12図は録音再生装置がシングルトラック方
式の場合の録音方法を示す図、第13図は周波数補正回
路例を示す図、第14図は誤認識時の修正図、第15図
は候補作成部(15)内の候補バッファ(15a)を示
す閣、第16図は誤認識時の数音節修正例を示す図、@
17図はP、CM録音方法説明図、第18図はAGC動
作の説明図、第19図は、区切り記号のカウンターの説
明図である。 (1)・・・音声認識部、(2)・・・録音再生装置、
(3)・・・マイク、く6)・・・表示装置、(7)・
・・キーボード、(8)・・・記憶装置、(11)・・
・前処理部、(12)・・・特徴抽山部、(13)・・
・単語認識部、(14)・・・文節認識部、(lla)
・・・可変利得増巾器、(llb)・・・音圧変動メモ
リ。
−ティングマシンの外観図、第2図はデイクチ−ティン
グマシンの構成図、第3図は音声認a部(1)の構成図
、第4図は前処理部(11)の構成図、第5図は特徴抽
出部(12)の構成図、第6図は単語認識部(13)の
構成図、第7図は文m認識部(14)の構成図、第8図
は入力切り換え部(4)の構成図、第9図は見出し語と
0!音方式とキルラフター音の関係図、第10図はキャ
ラクタ−音の録音方法と音声区間の関係図、第11図は
録音再生装置がマルチトラック方式の場合の録音方法を
示す図、第12図は録音再生装置がシングルトラック方
式の場合の録音方法を示す図、第13図は周波数補正回
路例を示す図、第14図は誤認識時の修正図、第15図
は候補作成部(15)内の候補バッファ(15a)を示
す閣、第16図は誤認識時の数音節修正例を示す図、@
17図はP、CM録音方法説明図、第18図はAGC動
作の説明図、第19図は、区切り記号のカウンターの説
明図である。 (1)・・・音声認識部、(2)・・・録音再生装置、
(3)・・・マイク、く6)・・・表示装置、(7)・
・・キーボード、(8)・・・記憶装置、(11)・・
・前処理部、(12)・・・特徴抽山部、(13)・・
・単語認識部、(14)・・・文節認識部、(lla)
・・・可変利得増巾器、(llb)・・・音圧変動メモ
リ。
Claims (1)
- (1)録音再生装置に録音した無音区間を認識単位の区
切りとすることにより録音再生装置より再生された入力
音声を文節、音節、単語単位毎に認識する音声認識機能
を有し、無音区間を検出した場合、無音区間を検出した
ことをしめす無音区間検出信号を該録音再生装置の無音
区間に録音するとともに、音声認識した結果を認識単位
毎に区切り記号をつけて記憶装置に記憶する機能を有す
る音声認識装置において、無音区間検出信号と区切り記
号により、記憶装置より読み出され、表示装置に表示さ
れる文章と、録音再生装置の音声との同期を取ることを
特徴とする文章作成システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP63124522A JPH01293428A (ja) | 1988-05-20 | 1988-05-20 | 文章作成システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP63124522A JPH01293428A (ja) | 1988-05-20 | 1988-05-20 | 文章作成システム |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH01293428A true JPH01293428A (ja) | 1989-11-27 |
Family
ID=14887569
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP63124522A Pending JPH01293428A (ja) | 1988-05-20 | 1988-05-20 | 文章作成システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JPH01293428A (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005301953A (ja) * | 2004-04-12 | 2005-10-27 | Kenichi Asano | 聞き手の側のペースで音声とそれに対応する文章を関連させる方法 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS54136134A (en) * | 1978-04-13 | 1979-10-23 | Toshiba Corp | Aural typewriter |
| JPS58217044A (ja) * | 1982-06-11 | 1983-12-16 | Toshiba Corp | 文書編集装置 |
| JPS5962949A (ja) * | 1982-09-30 | 1984-04-10 | Sharp Corp | 音声入力式日本語文書処理装置 |
| JPS59127148A (ja) * | 1982-12-29 | 1984-07-21 | Fujitsu Ltd | 文章読上げ装置 |
-
1988
- 1988-05-20 JP JP63124522A patent/JPH01293428A/ja active Pending
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS54136134A (en) * | 1978-04-13 | 1979-10-23 | Toshiba Corp | Aural typewriter |
| JPS58217044A (ja) * | 1982-06-11 | 1983-12-16 | Toshiba Corp | 文書編集装置 |
| JPS5962949A (ja) * | 1982-09-30 | 1984-04-10 | Sharp Corp | 音声入力式日本語文書処理装置 |
| JPS59127148A (ja) * | 1982-12-29 | 1984-07-21 | Fujitsu Ltd | 文章読上げ装置 |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2005301953A (ja) * | 2004-04-12 | 2005-10-27 | Kenichi Asano | 聞き手の側のペースで音声とそれに対応する文章を関連させる方法 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3263392B2 (ja) | テキスト処理装置 | |
| US7143033B2 (en) | Automatic multi-language phonetic transcribing system | |
| JP5313466B2 (ja) | 音声の再生に同期して音声の内容を表示させる技術 | |
| US6735565B2 (en) | Select a recognition error by comparing the phonetic | |
| KR950015131A (ko) | 정보 액세스 시스템 및 기록 매체 | |
| WO2007055233A1 (ja) | 音声テキスト化システム、音声テキスト化方法および音声テキスト化用プログラム | |
| WO2003102920A1 (en) | A method for locating an audio segment within an audio file | |
| JP2686085B2 (ja) | 音声認識システム | |
| JP2008032825A (ja) | 発言者表示システム、発言者表示方法および発言者表示プログラム | |
| JPH01293428A (ja) | 文章作成システム | |
| JP2000206987A (ja) | 音声認識装置 | |
| JP2547611B2 (ja) | 文章作成システム | |
| JP2547612B2 (ja) | 文章作成システム | |
| JP2609874B2 (ja) | 音声認識システム | |
| JP2647872B2 (ja) | 文章作成システム | |
| JP2647873B2 (ja) | 文章作成システム | |
| JPS63316900A (ja) | 音声認識システム | |
| JPS63316899A (ja) | 音声認識システム | |
| JPH01106096A (ja) | 音声認識システム | |
| JPH01161296A (ja) | 音声認識システム | |
| JP2777366B2 (ja) | 音声認識システム | |
| JPH0554960B2 (ja) | ||
| JPH01106095A (ja) | 音声認識システム | |
| JPH01106100A (ja) | 音声認識システム | |
| JPS63317874A (ja) | デイクテ−テイングマシン |