JPH0720889A - 不特定話者の音声認識装置および方法 - Google Patents

不特定話者の音声認識装置および方法

Info

Publication number
JPH0720889A
JPH0720889A JP5183561A JP18356193A JPH0720889A JP H0720889 A JPH0720889 A JP H0720889A JP 5183561 A JP5183561 A JP 5183561A JP 18356193 A JP18356193 A JP 18356193A JP H0720889 A JPH0720889 A JP H0720889A
Authority
JP
Japan
Prior art keywords
word
pattern
partial feature
extracted
standard pattern
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP5183561A
Other languages
English (en)
Inventor
Atou Go
亜棟 呉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Omron Corp
Original Assignee
Omron Corp
Omron Tateisi Electronics Co
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Omron Corp, Omron Tateisi Electronics Co filed Critical Omron Corp
Priority to JP5183561A priority Critical patent/JPH0720889A/ja
Publication of JPH0720889A publication Critical patent/JPH0720889A/ja
Pending legal-status Critical Current

Links

Abstract

(57)【要約】 【目的】 識別精度の高い不特定話者の音声認識を行
う。 【構成】 単語nをI人の話者がそれぞれJ回発声した
単語音声WnをLn個のフレームに分割してそのフレー
ム毎に部分特徴パターンが特徴パターン抽出部11により
抽出される。抽出された部分特徴パターンを各単語のフ
レーム毎に振り分け、振り分けられた部分特徴パターン
についてM個のクラスタに分類するとともにその部分特
徴パターンが当該クラスタに属する度合いが算出され
る。クラスタを類似するもの同志を統合して類似クラス
タが作成され、その類似クラスタに属する部分特徴パタ
ーンと、その部分特徴パターンが類似クラスタに属する
度合いとに基づいて単語nの標準パターンを標準パター
ン作成部12により作成され、標準パターン辞書13に登録
される。不特定話者が発声した単語音声Wxについて同
様に部分特徴パターンを抽出し、標準パターン辞書13に
登録された標準パターンを参照して識別が行われる。

Description

【発明の詳細な説明】
【0001】
【技術分野】この発明は、不特定話者の単語音声を認識
する不特定話者の単語音声認識装置および方法に関す
る。
【0002】
【従来技術とその問題点】不特定話者の音声認識の手法
の一つにマルチテンプレート(標準パターン)によるも
のがある。この場合、標準パターンを作成するには、ク
ラスタリングの手法が用いられるのが一般的である。し
かしながら、従来の手法では、通常のクラスタリング手
法(ハード・クラスタリング)が用いられているので、
以下のような問題点がある。
【0003】その一は、通常のクラスタリングを行った
場合には、あるクラスタ(グループ)に属している単語
音声の特徴パターンが、そのクラスタにどの程度の重要
性で存在しているのかが評価できないので、標準パター
ンはそのクラスタ内の特徴パターンの単純平均用いてし
か作成できない。したがって、このような標準パターン
は、そのクラスタ内の劣化特徴パターンの影響を除去す
ることができない(クラスタ内の変動を吸収できな
い)。
【0004】その二は、通常のクラスタリング手法は、
単語毎の単語音声の特徴パターンに対して行われるが、
単語毎の単語音声の特徴パターンでは、その特徴パター
ンに含まれる要素の数が多いので、そのまま通常のクラ
スタリングを行うと、各要素間の相互作用で特徴パター
ンの分類要因が消滅することになり、特徴パターンをう
まく分類できない場合が多い。
【0005】
【発明の開示】この発明は、識別精度の高い不特定話者
の音声認識装置および方法を提供することを目的として
いる。
【0006】この発明による不特定話者の音声認識装置
は、複数の単語について複数人の話者によってそれぞれ
複数回数発声されたそれぞれの単語音声を所定数のフレ
ームに分割し、分割されたそれぞれのフレームから部分
特徴パターンを抽出し、抽出された部分特徴パターンを
上記単語音声毎にまとめて単語音声の特徴パターンを作
成する特徴パターン抽出手段、上記特徴パターン抽出手
段により抽出された部分特徴パターンを所定数のクラス
タに分類するとともに上記部分特徴パターンが当該クラ
スタに属する度合いを算出し、上記クラスタを類似する
もの同志を統合することにより類似クラスタを生成し、
生成された類似クラスタに含まれる部分特徴パターンと
上記部分特徴パターンが当該類似クラスタに属する度合
いとに基づいて上記単語の標準パターンを上記類似クラ
スタ毎に作成する標準パターン作成手段、上記標準パタ
ーン作成手段により作成された標準パターンを登録する
標準パターン辞書、および不特定話者が発声した単語音
声を上記所定数のフレームに分割し、分割されたそれぞ
れのフレームから部分特徴パターンを抽出し、抽出され
たすべての部分特徴パターンの集合と上記標準パターン
辞書に登録された標準パターンとの類似度を上記複数の
単語のすべてについて算出し、算出された上記類似度が
最大となる単語を上記不特定話者が発声した単語と識別
する単語認識手段を備えている。
【0007】この発明による不特定話者の音声認識方法
は、複数の単語について複数人の話者によってそれぞれ
複数回数発声されたそれぞれの単語音声を所定数のフレ
ームに分割し、分割されたそれぞれのフレームから部分
特徴パターンを抽出し、抽出された部分特徴パターンを
上記単語音声毎にまとめて単語音声の特徴パターンを作
成し、抽出された部分特徴パターンを所定数のクラスタ
に分類するとともに上記部分特徴パターンが当該クラス
タに属する度合いを算出し、上記クラスタを類似するも
の同志を統合することにより類似クラスタを生成し、生
成された類似クラスタに含まれる部分特徴パターンと上
記部分特徴パターンが当該類似クラスタに属する度合い
とに基づいて上記単語の標準パターンを上記類似クラス
タ毎に作成し、作成された標準パターンを標準パターン
辞書に登録し、不特定話者が発声した単語音声を上記所
定数のフレームに分割し、分割されたそれぞれのフレー
ムから部分特徴パターンを抽出し、抽出されたすべての
部分特徴パターンの集合と上記標準パターン辞書に登録
された標準パターンとの類似度を上記複数の単語のすべ
てについて算出し、算出された上記類似度が最大となる
単語を上記不特定話者が発声した単語と識別するもので
ある。
【0008】この発明によると、複数の単語を複数人の
話者がそれぞれ複数回数発声した単語音声が所定数のフ
レームに分割され、分割されたフレームから部分特徴パ
ターンが抽出される。抽出された部分特徴パターンが単
語音声毎にまとめてられて特徴パターンが作成される。
抽出された部分特徴パターンをフレーム毎に振分られて
所定数のクラスタに分類されるともにその部分特徴パタ
ーンが当該クラスタに属する度合いが算出される。これ
らのクラスタが類似するもの同志が統合されて類似クラ
スタが作成される。作成された類似クラスタに属する部
分特徴パターンと、その部分特徴パターンが当該類似ク
ラスタに属する度合いとに基づいて単語の標準パターン
が類似クラスタ毎に作成され、標準パターン辞書に登録
される。その後不特定話者が発声した単語音声を所定数
のフレームに分割し、分割されたそれぞれのフレームか
ら部分特徴パターンが抽出される。抽出された部分特徴
パターンと標準パターン辞書に登録された標準パターン
との類似度が単語のすべてについて算出される。算出さ
れた類似度が最大となる単語を不特定話者が発声した単
語と識別される。
【0009】したがって、クラスタに分類されるとき、
特徴パターン毎ではなく所定数のフレームに分割された
部分特徴パターン毎に行われるので、単語音声の分類要
因を消滅させることなく分類作業が効率的に行える。ま
た、類似クラスタに分類された部分特徴パターンとその
類似クラスタに属する度合いとによって標準パターンが
作成されるので、類似クラスタに属する部分特徴パター
ン中でその類似クラスタに属する度合いが小さい部分特
徴パターンの影響を低減するという効果が得られる。こ
れによって、識別精度高い音声認識を行うことができ
る。
【0010】
【実施例の説明】図1は、不特定話者の音声認識装置の
全体的構成を示す機能ブロック図である。
【0011】この不特定話者の音声認識装置は、その全
てをハードウェア・アーキテクチャにより実現できる
し、プログラムされたコンピュータ・システムにより実
現することもできる。また、不特定話者の音声認識装置
の一部をハードウェアにより、他の一部をソフトウェア
により実現することもできる。
【0012】詳細については後述するが、この不特定話
者の音声認識装置は、N個の単語n(n=1〜N)のそ
れぞれについて、単語nをI人の話者がそれぞれJ回ず
つ発声することによって得られる単語音声Wn(=Wn,
i,j (i=1〜I,j=1〜J))に基づいて単語nの
標準パターンRn,m (m=1〜M)をあらかじめ作成す
る。Mは、クラスタリング処理によって得られるクラス
タの総数である。したがって、一つの単語について標準
パターンはM個得られる。その後、不特定話者が発声し
た単語音声Wxを、あらかじめ作成した標準パターンR
n,m (n=1〜N,m=1〜M)に基づいて認識するも
のである。
【0013】特徴パターン抽出部11は、話者が発声した
単語音声に基づいて特徴パターンFn,i,j を抽出するも
のである。特徴パターンFn,i,j の抽出は次のようにし
て行われる。
【0014】図2に、単語nについて第i番の話者の第
j回目の発声における単語音声Wn,i,j を表す信号S
(t) の一例が示されている。
【0015】同一の単語を一人の話者が発声した場合ま
たは同一の単語を同一の話者がJ回発声した場合、それ
ぞれの発声で単語音声の長さが異なる。したがって、各
発声における単語音声Wn,i,j が一定時間間隔Tnに正
規化される。
【0016】時間間隔Tnに正規化された単語音声Wn,
i,j は、時間間隔(Tn/Ln)で区切られ、Ln個の
フレームに分割される。Lnはフレームの個数を表す。
Ln個に分割されたフレームのそれぞれについて音響分
析が行われ、各フレームから部分特徴パターンfn,i,j
(r)が抽出される。ここで、rはフレームの番号である
(r=1〜Ln)。音響分析には、フーリエ変換、バン
ド・パス・フィルタ等の周波数分析を用いることができ
る。音響分析にフーリエ変換を用いた場合に、第i番の
話者が第j回に発声した単語音声Wn,i,j の第rフレー
ムをフーリエ変換したパワー・スペクトルの一例が図3
に示されている。
【0017】フーリエ変換して得られたパワー・スペク
トルにおいてパワーが極大を示す周波数を、周波数が低
い順にfn,i,j(r,1),fn,i,j(r,2),…,fn,i,j(r,K)
とする。したがって、単語nについて第i番の話者が発
声した第j回の単語音声Wn,i,j の第rフレームの部分
特徴パターンfn,i,j(r)は、次式で表される(ベクトル
表現)。
【0018】
【数1】
【0019】このようにして、単語nについて第i番の
話者が第j回に発声した単語音声Wn,i,j の各フレーム
が音響分析されて、部分特徴パターンfn,i,j(r)(r=
1〜Ln)が抽出される。したがって、単語nについて
第i番の話者が発声した第j回の単語音声Wn,i,j の特
徴パターンFn,i,j は、次式で表される。
【0020】
【数2】
【0021】以上のようにして、単語音声Wn,i,j から
特徴パターンFn,i,j が抽出される。同様にして全ての
単語音声(nとiとjのすべての組み合わせ)について
特徴パターンの抽出が行われる。抽出された特徴パター
ンは、特徴パターン抽出部11から標準パターン作成部12
に与えられる。
【0022】標準パターン作成部12は、特徴パターン抽
出部11から与えられる特徴パターンに基づいて標準パタ
ーンを作成するものである。単語nの標準パターンRn,
m (m=1〜M)の作成は次のようにして行われる。
【0023】特徴パターン抽出部11から与えられた、単
語nについてI人の話者がそれぞれJ回発声した単語音
声Wnの特徴パターンFn,i,j (i=1〜I,j=1〜
J)から、単語nについてI人の話者がそれぞれJ回発
声した単語音声Wnの特徴パターン・セットFnが作成
される。特徴パターン・セットFnは、次式で表され
る。
【0024】
【数3】
【0025】単語nについての単語音声Wnの特徴パタ
ーン・セットFnが、単語音声Wnのフレーム毎に部分
化され、部分特徴パターン・セットPn(r)(r=1〜L
n)が作成される。したがって、単語nについての単語
音声Wnの第rフレームの部分特徴パターン・セットP
n(r)は、次式で表される。
【0026】
【数4】
【0027】単語音声Wnのフレーム毎に部分化された
部分特徴パターン・セットPn(r)に含まれるfn,i,j(r)
(i=1〜I,j=1〜J)について、部分特徴パター
ン・セット毎にクラスタリング処理が行われる。クラス
タリング処理にはたとえば、Fuzzy c-means 法、Fuzzy
k-means 法等のファジィ・クラスタリング手法が用いら
れる。
【0028】たとえば、クラスタリング処理にFuzzy c-
means 法を用いた場合、部分特徴パターン・セットに含
まれる部分特徴パターンfn,i,j(r)(i=1〜I,j=
1〜J)がM個のクラスタCn,r,m (m=1〜M)に分
類されるとともに各部分特徴パターンfn,i,j(r)が分類
された各クラスタCn,r,m に属する度合いgn,r,m(i,j)
が算出される。gn,r,m(i,j)は、0〜1の値である。
【0029】M個のクラスタに分類された部分特徴パタ
ーンは、クラスタCn,r,m (r=1〜L)のすべてにつ
いて統合され、類似クラスタ ̄Cn,m (m=1〜M)
(一般に、 ̄CはCにオーバ・バーが付されるが、この
明細書中においては上記のように表す)が生成される。
各クラスタにおける類似クラスタの生成(統合処理)
は、次式を用いて行われる。
【0030】
【数5】
【0031】統合された一つの類似クラスタ ̄Cn,m に
属するすべての特徴パターンFn,i,j の加重平均パター
ン、すなわち標準パターンRn,m を動的計画法(DP)
によって求める。標準パターンRn,m は、次式で算出さ
れる。
【0032】
【数6】 ここで、nFn,i,jはFn,i,j をDPにより正規化された
ものであり、gn,i はFn,i,j がその類似クラスタ ̄C
n,m に属する度合いである。
【0033】式(6)を用いてm=1〜Mについて標準
パターンRn,m (m=1〜M)が算出される。
【0034】以上のようにして、単語nについて特徴パ
ターンFn,i,j (i=1〜I,j=1〜J)から標準パ
ターンRn,m (m=1〜M)が作成される。
【0035】作成された単語nの標準パターンRn,m
(m=1〜M)は、標準パターン辞書13に格納される。
【0036】同様に全ての単語n(n=1〜N)につい
て標準パターンRn,m (m=1〜M)が作成され、標準
パターン辞書13に格納される。
【0037】以下、不特定話者の単語認識について説明
する。
【0038】不特定話者が発声した単語音声Wxの部分
特徴パターンX(r) が、特徴パターン抽出部11により単
語音声Wnと同様の方法により得られ、さらにこれに基
づいて特徴パターンXが抽出される。すなわち、不特定
話者が発声した単語音声Wxの部分特徴パターンX(r)
は、
【数7】 で表される。単語音声Wxの特徴パターンXは、
【数8】 で表される。
【0039】不特定話者が発声した単語音声Wxの特徴
パターンXは、特徴パターン抽出部11から単語認識部14
に与えられる。
【0040】単語音声認識部14は、不特定話者が発声し
た単語音声を認識するものである。単語音声Wxの単語
認識は、次のようにして行われる。
【0041】不特定話者が発声した単語音声Wxの特徴
パターンXと、単語n(n=1〜N)の標準パターンR
n,m (m=1〜M)との類似度μn,m (X,Rn,m )
(n=1〜N,m=1〜M)が算出される。類似度μn,
m (X,Rn,m )は、次式で算出される。
【0042】
【数9】 ここで、D(X,Rn,m )は、特徴パターンXと標準パ
ターンRn,m との距離である。
【0043】特徴パターンXと標準パターンRn,m との
類似度μn,m (X,Rn,m )が算出されると、その中で
類似度が最大になるxを、
【数10】 を用いて求める。このxが、不特定話者が発声した単語
となる。
【0044】以上のようにして、不特定話者が発声した
単語音声Wxの単語認識が行われる。
【0045】単語認識部14において認識された単語xが
出力部15に与えられ、その単語xが出力部15から単語認
識結果として出力される。
【図面の簡単な説明】
【図1】不特定話者の音声認識装置の全体的構成を示す
機能ブロック図である。
【図2】単語nについて第i番の話者の第j回目の発声
における単語音声Wn,i,j を表す信号の一例を示す。
【図3】第i番の話者が第j回に発声した単語音声Wn
の第rフレームをフーリエ変換したパワー・スペクトル
の一例を示す。
【符号の説明】
11 特徴パターン抽出部 12 標準パターン作成部 13 標準パターン辞書 14 単語認識部 15 出力部

Claims (2)

    【特許請求の範囲】
  1. 【請求項1】 複数の単語について複数人の話者によっ
    てそれぞれ複数回数発声されたそれぞれの単語音声を所
    定数のフレームに分割し、分割されたそれぞれのフレー
    ムから部分特徴パターンを抽出し、抽出された部分特徴
    パターンを上記単語音声毎にまとめて単語音声の特徴パ
    ターンを作成する特徴パターン抽出手段、 上記特徴パターン抽出手段により抽出された部分特徴パ
    ターンを所定数のクラスタに分類するとともに上記部分
    特徴パターンが当該クラスタに属する度合いを算出し、
    上記クラスタを類似するもの同志を統合することにより
    類似クラスタを生成し、生成された類似クラスタに含ま
    れる部分特徴パターンと上記部分特徴パターンが当該類
    似クラスタに属する度合いとに基づいて上記単語の標準
    パターンを上記類似クラスタ毎に作成する標準パターン
    作成手段、 上記標準パターン作成手段により作成された標準パター
    ンを登録する標準パターン辞書、および不特定話者が発
    声した単語音声を上記所定数のフレームに分割し、分割
    されたそれぞれのフレームから部分特徴パターンを抽出
    し、抽出されたすべての部分特徴パターンの集合と上記
    標準パターン辞書に登録された標準パターンとの類似度
    を上記複数の単語のすべてについて算出し、算出された
    上記類似度が最大となる単語を上記不特定話者が発声し
    た単語と識別する単語認識手段、 を備えた不特定話者の音声認識装置。
  2. 【請求項2】 複数の単語について複数人の話者によっ
    てそれぞれ複数回数発声されたそれぞれの単語音声を所
    定数のフレームに分割し、分割されたそれぞれのフレー
    ムから部分特徴パターンを抽出し、抽出された部分特徴
    パターンを上記単語音声毎にまとめて単語音声の特徴パ
    ターンを作成し、 抽出された部分特徴パターンを所定数のクラスタに分類
    するとともに上記部分特徴パターンが当該クラスタに属
    する度合いを算出し、上記クラスタを類似するもの同志
    を統合することにより類似クラスタを生成し、生成され
    た類似クラスタに含まれる部分特徴パターンと上記部分
    特徴パターンが当該類似クラスタに属する度合いとに基
    づいて上記単語の標準パターンを上記類似クラスタ毎に
    作成し、 作成された標準パターンを標準パターン辞書に登録し、 不特定話者が発声した単語音声を上記所定数のフレーム
    に分割し、分割されたそれぞれのフレームから部分特徴
    パターンを抽出し、抽出されたすべての部分特徴パター
    ンの集合と上記標準パターン辞書に登録された標準パタ
    ーンとの類似度を上記複数の単語のすべてについて算出
    し、算出された上記類似度が最大となる単語を上記不特
    定話者が発声した単語と識別する、 不特定話者の音声認識方法。
JP5183561A 1993-06-30 1993-06-30 不特定話者の音声認識装置および方法 Pending JPH0720889A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP5183561A JPH0720889A (ja) 1993-06-30 1993-06-30 不特定話者の音声認識装置および方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP5183561A JPH0720889A (ja) 1993-06-30 1993-06-30 不特定話者の音声認識装置および方法

Publications (1)

Publication Number Publication Date
JPH0720889A true JPH0720889A (ja) 1995-01-24

Family

ID=16137963

Family Applications (1)

Application Number Title Priority Date Filing Date
JP5183561A Pending JPH0720889A (ja) 1993-06-30 1993-06-30 不特定話者の音声認識装置および方法

Country Status (1)

Country Link
JP (1) JPH0720889A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100435440B1 (ko) * 2002-03-18 2004-06-10 정희석 화자간 변별력 향상을 위한 가변 길이 코드북 생성 장치및 그 방법, 그를 이용한 코드북 조합 방식의 화자 인식장치 및 그 방법
US8423354B2 (en) 2008-05-09 2013-04-16 Fujitsu Limited Speech recognition dictionary creating support device, computer readable medium storing processing program, and processing method
US8918318B2 (en) 2007-01-16 2014-12-23 Nec Corporation Extended recognition dictionary learning device and speech recognition system

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100435440B1 (ko) * 2002-03-18 2004-06-10 정희석 화자간 변별력 향상을 위한 가변 길이 코드북 생성 장치및 그 방법, 그를 이용한 코드북 조합 방식의 화자 인식장치 및 그 방법
US8918318B2 (en) 2007-01-16 2014-12-23 Nec Corporation Extended recognition dictionary learning device and speech recognition system
US8423354B2 (en) 2008-05-09 2013-04-16 Fujitsu Limited Speech recognition dictionary creating support device, computer readable medium storing processing program, and processing method

Similar Documents

Publication Publication Date Title
JPH0792673B2 (ja) 認識用辞書学習方法
JP6908045B2 (ja) 音声処理装置、音声処理方法、およびプログラム
Linh et al. MFCC-DTW algorithm for speech recognition in an intelligent wheelchair
JPWO2020049687A1 (ja) 音声処理装置、音声処理方法、およびプログラム
Jeyalakshmi et al. HMM and K-NN based automatic musical instrument recognition
Kamble et al. Emotion recognition for instantaneous Marathi spoken words
JP5083951B2 (ja) 音声処理装置およびプログラム
Clemins et al. Application of speech recognition to African elephant (Loxodonta Africana) vocalizations
JP2011081324A (ja) ピッチ・クラスター・マップを用いた音声認識方法
JPH0720889A (ja) 不特定話者の音声認識装置および方法
Tzudir et al. Tonal feature based dialect discrimination in two dialects in Ao
CN109887495B (zh) 声音处理装置、声音处理方法及记录介质
Krishna et al. Emotion recognition using dynamic time warping technique for isolated words
JP2020086430A (ja) 話者識別装置、話者識別方法、及び、プログラム
US7454337B1 (en) Method of modeling single data class from multi-class data
JPH0766734A (ja) 音声コーディング装置および方法
JPH04324499A (ja) 音声認識装置
Narendra et al. Classification of Pitch Disguise Level with Artificial Neural Networks
CN119851694B (zh) 一种音素的筛选方法、装置、电子设备及可读存储介质
Patro et al. Statistical feature evaluation for classification of stressed speech
Sharma et al. Eminent method of voice identification by applying pitch, intensity and pulse
Higgins et al. A multi-spectral data-fusion approach to speaker recognition
Besbes et al. Wavelet packet energy and entropy features for classification of stressed speech
Adetoyi Text Independent Speaker Identification System for Access Control
JP2658426B2 (ja) 音声認識方法