JPH09152884A - 音声合成装置 - Google Patents

音声合成装置

Info

Publication number
JPH09152884A
JPH09152884A JP7312222A JP31222295A JPH09152884A JP H09152884 A JPH09152884 A JP H09152884A JP 7312222 A JP7312222 A JP 7312222A JP 31222295 A JP31222295 A JP 31222295A JP H09152884 A JPH09152884 A JP H09152884A
Authority
JP
Japan
Prior art keywords
voice
speech
user
information
intonation
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP7312222A
Other languages
English (en)
Inventor
Hiroyuki Fujimoto
博之 藤本
Kazuya Sako
和也 佐古
Shoji Fujimoto
昇治 藤本
Ikue Takahashi
育恵 高橋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Denso Ten Ltd
Original Assignee
Denso Ten Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Denso Ten Ltd filed Critical Denso Ten Ltd
Priority to JP7312222A priority Critical patent/JPH09152884A/ja
Publication of JPH09152884A publication Critical patent/JPH09152884A/ja
Pending legal-status Critical Current

Links

Abstract

(57)【要約】 【課題】 ユーザの音声パターンを学習し自然な音声合
成を可能にする。 【解決手段】 文字、記号列を音声に合成する音声合成
装置に、音声情報に対して前記文字、記号列で応答する
システム1と、音声情報を認識する音声認識部7と、音
声を合成するための特徴パラメータを有し、前記音声情
報を学習して前記特徴パラメータの更新を行う特徴パラ
メータ格納部3、4とが設けられる。

Description

【発明の詳細な説明】
【0001】
【発明の属する技術分野】本発明は、文字や音声記号な
どの離散的記号で表現された系列を、連続音声に変換す
る規則音声合成装置に関し、特にユーザの音声パターン
を学習し自然な音声合成を可能にする音声合成装置に関
する。
【0002】
【従来の技術】図7は従来の音声合成装置の一例を示す
図である。なお、全図を通じて同一の構成要素には同一
の参照番号又は記号を付して示す。本図に示すように、
音声合成装置は、車両に搭載され道路を案内するナビゲ
ーション部1からの文字、記号列の情報を音声に合成す
る音声合成部2と、音声の音素を音声合成部2に与える
ために記憶するためROM(Read Only Memory)からなる
音素辞書部3と、音声のイントネーション、アクセント
等を音声合成部2に与えるために記憶するためROMか
らなる韻律ルール部4と、音声合成部2で合成された音
声を出力するスピーカ5とを具備する。音素辞書部3及
び韻律ルール部4は特徴パラメータを格納する特徴パラ
メータ格納部を構成する。
【0003】ここに、音素辞書部3には、母音と子音等
の音素が記憶される。図8は、韻律ルール部4に記憶さ
れるイントネーション、アクセントを示す図である。本
図に示すように、韻律ルール部4には、時間と共にピッ
チ周波数が減少するイントネーション、ピッチ周波数の
時間変化が台形をなすアクセントが記憶されている。
【0004】韻律ルール部4には、イントネーション、
アクセントが数種設けられており、ユーザの好みに応じ
て1つを選択可能にしてある。
【0005】
【発明が解決しようとする課題】しかしながら、上記音
声合成装置では、ユーザの好みに応じたイントネーショ
ン、アクセントを選択することが可能であるが、選択の
範囲が限定されているので、ユーザにとって選択の自由
度が小さく、必ずしも十分にイントネーション、アクセ
ントがユーザの好みに適合していないとの問題がある。
また、音素も一方的に与えられるため、ユーザの好みに
適合していないという問題がある。
【0006】したがって、本発明は、上記問題点に鑑
み、ユーザの好みに応じてイントネーション、アクセン
ト、音素を与えることができる音声合成装置を提供する
ことを目的とする。
【0007】
【課題を解決するための手段】本発明は、前記問題点を
解決するために、次の構成を有する音声合成装置を提供
する。すなわち、文字、記号列を音声に合成する音声合
成装置に、音声情報に対して前記文字、記号列で応答す
るシステムと、前記音声情報を認識する音声認識部と、
前記音声を合成するための特徴パラメータを有し、前記
音声情報を学習して前記特徴パラメータの更新を行う特
徴パラメータ格納部とが設けられる。この装置により、
ユーザの発声パターンを学習して、ユーザの好みに応じ
た特徴パラメータを選択することが可能となり、自然な
音声合成を可能にする。
【0008】前記特徴パラメータ格納部部では、前記音
声情報から抽出されたイントネーション及びアクセント
の韻律情報を更新する。この手段により、ユーザ発声の
韻律情報を学習して、ユーザの言語環境に応じた韻律を
持つ合成音を生成可能とする。前記特徴パラメータ格納
部に抽出されたイントネーションとアクセントを別々に
合成に使用する。この手段により、上記と同様に、ユー
ザ発声の韻律情報を学習して、ユーザの言語環境に応じ
た韻律を持つ合成音を生成可能とする。
【0009】具体的には、前記音声情報の周波数分析を
行いピッチ周波数の時間変化を基に更新すべきイントネ
ーション、アクセントの韻律が更新される。前記特徴パ
ラメータ格納部では、音素辞書のデータを前記音声情報
から抽出された音素に更新する。この手段により、ユー
ザ発声音声を登録可能とすることにより、ユーザ自身の
音声で合成が可能となり、ユーザの言語環境に応じた韻
律を持つ合成音を生成可能とする。
【0010】
【発明の実施の形態】以下本発明の実施の形態について
図面を参照して説明する。図1は本発明に係る音声合成
装置を示す図である。図7の構成に対して、音声合成装
置には、マイクロフォン8と、マイクロフォン6に接続
されナビゲーション1に音声認識結果を出力する音声認
識部7と、マイクロフォン6に接続され複数のバンドパ
スフィルタ群からなりピーチ周波数の分析を行うフィル
タバンク8とが追加して設けられる。さらに、音声認識
部7からの音声情報を学習して合成すべき音声の特徴パ
ラメータの更新を行うため、特徴パラメータ格納部の音
素辞書部3には、マイクロフォン6からユーザが発生す
る音素を記憶するためのRAM(Random Access Memory)
として、音素辞書更新部3Aを有し、また、その韻律ル
ール部4には、フィルタバンクを経由して、マイクロフ
ォン6からユーザが発生する音声のイントネーション、
アクセントを記憶するためのRAMとして韻律ルール更
新部4Aが設けられる。
【0011】マイクロフォン6に「近くのガソリンスタ
ンドを探して欲しい」とユーザが発声すると、音声認識
装置7では、この音声を認識して、ナビゲーション1
に、ガソリンスタンドの検索を指令する。ナビゲーショ
ン1からは、検索の結果、「100m先に○○のガソリ
ンスタンドがあります」との記号列を音声合成部2で合
成し、スピーカ5より出力される。
【0012】なお、ナビゲーション1は一例であり、音
声認識部7からの音声情報に対して前記文字、記号列で
応答するものならば他のシステムであってもよい。図2
は図1のフィルタバンク8で分析されるピッチ周期1/
fを示す図である。本図に示すようにフィルタバンク8
では、音声認識装置へのユーザの発声を用い、ピッチ周
波数の時間変化を測定し、イントネーション、アクセン
トを求めて、音素辞書更新部3Aに格納される。また、
この結果はユーザの発声速度(モーラ数/秒)、声の高
さとしても、使用される。
【0013】韻律ルール更新部4Aには、ユーザにより
数十種類の音素の発声を特別にして貰い、その結果が格
納される。このようにして、音声認識装置を利用して、
一律的な音声合成に代わり、ユーザの発声のイントネー
ション、アクセントで合成されるので、ユーザの言語環
境に応じた韻律を持つ合成音を生成することが可能にな
る。さらに、ユーザ発声音素を登録することにより、ユ
ーザ自身の発声で合成が可能となる。
【0014】図3は本発明の音声合成装置の一連の基本
動作を示す第1のフローチャートである。ステップS1
において、音声認識部7への音声入力が行われる。ステ
ップS2において、パラメータ更新の終了を判断する。
パラメータ更新、選択はユーザが判断する。このパラメ
ータには、複数のイントネーション、アクセント、発声
速度、声の高さ等がある。
【0015】ステップS3において、入力音声の特徴パ
ラメータを抽出する。ステップS4において、合成音の
特徴パラメータの更新を行い、終了したステップS2の
戻る。ステップS5において、音声認識処理を行う。ス
テップS6において、ナビゲーション処理を行う。
【0016】ステップS7において、更新されたパラメ
ータを用いて、ナビゲーションの指令について、音声合
成の処理を行う。したがって、本発明によれば、音声認
識を行うめに発声された音声を、音声認識部7に入力す
ると共に、この音声の特徴パラメータの解析を行い、こ
のとき、パラメータ更新を行うモードになっていれば、
音声の特徴パラメータの更新を行い、ユーザの特徴パラ
メータを用いた音声合成が行われる。すなわち、ユーザ
の発声パターンを学習して、より自然な音声合成を可能
にする。
【0017】図4は図3の変形例を示す第2のフローチ
ャートである。ステップS1、2、5、6、7は同じで
ある。ステップS8において、入力音声の韻律情報を抽
出する。ステップS9において、イントネーション・ル
ールの更新を行う。ステップS10において、アクセン
ト・ルールの更新を行う。
【0018】したがって、本発明によれば、音声認識を
行うために発声された音声を、音声認識部7に入力する
と共に、この音声の韻律情報の抽出を行う。このとき、
パラメータ更新を行うモードになっていれば、音声のイ
ントネーション・ルール及びアクセント・ルール等の韻
律ルール部4の更新を行い、更新したパラメータで音声
合成を行う。すなわち、ユーザ発声の韻律情報を学習し
て、ユーザの言語環境に応じた韻律を持つ音声合成音を
生成可能とする。
【0019】図5は図4の変形例を示す第3のフローチ
ャートである。ステップS1、2、5、6、7、8は同
じである。ステップS11において、イントネーション
更新あるか否かの判断を行う。この判断が「YES」な
らステップS12に進み、「NO」ならステップS13
に進む。
【0020】ステップS12において、イントネーショ
ン・ルールの更新を行う。ステップS13において、ア
クセント更新あるか否かの判断を行う。この判断が「Y
ES」ならステップS14に進み、「NO」ならステッ
プS2に戻る。ステップS14において、アクセント・
ルール等の韻律ルール部4の更新を行ってステップS2
に戻る。
【0021】したがって、本発明によれば、音声認識を
行うために発声された音声を、音声認識部7に入力する
と共に、この音声の韻律情報の抽出を行う。このとき、
イントネーション、アクセントが各々更新モードになっ
ていれば、それぞれイントネーション・ルール、アクセ
ント・ルール等の韻律ルール部4の更新を行い、更新し
たパラメータで音声合成を行う。すなわち、ユーザ発声
の韻律情報を学習して、ユーザの言語環境に応じた韻律
を持つ音声合成音を生成可能とする。
【0022】図6は音素データの更新を示す第4のフロ
ーチャートである。ステップS1、5、6、7、は同じ
である。ステップS15において、音素登録の終了を判
断する。この判断が「YES」ならステップS5に進
み、「NO」ならステップS16に進む。ステップS1
6において、ユーザの音素の登録を行ってステップS1
5に戻る。
【0023】したがって、本発明によれば、音声認識を
行うために発声された音声を、音声認識部7に入力する
と共に、ユーザ音声の登録モードになっていれば、音素
辞書3の更新を行い、ユーザの音声で合成を行う。すな
わち、ユーザ発声音声を登録可能とすることにより、ユ
ーザ自身の音声で合成することが可能になる。
【図面の簡単な説明】
【図1】本発明に係る音声合成装置を示す図である。
【図2】図1のフィルタバンク8で分析されるピッチ周
期1/fを示す図である。
【図3】本発明の音声合成装置の一連の基本動作を示す
第1のフローチャートである。
【図4】図3の変形例を示す第2のフローチャートであ
る。
【図5】図4の変形例を示す第3のフローチャートであ
る。
【図6】音素データの更新を示す第4のフローチャート
である。
【図7】従来の音声合成装置の一例を示す図である。
【図8】韻律ルール部4に記憶されるイントネーショ
ン、アクセントを示す図である。
【符号の説明】
1…ナビゲーション 2…音声合成部 3…音素辞書部 3A…音素辞書更新部 4…韻律ルール部 4A…韻律ルール更新部 5…スピーカ 6…マイクロホン 7…音声認識部 8…フィルタバンク
───────────────────────────────────────────────────── フロントページの続き (72)発明者 高橋 育恵 兵庫県神戸市兵庫区御所通1丁目2番28号 富士通テン株式会社内

Claims (5)

    【特許請求の範囲】
  1. 【請求項1】 文字、記号列を音声に合成する音声合成
    装置において、 音声情報に対して前記文字、記号列で応答するシステム
    と、 前記音声情報を認識する音声認識部と、 前記音声を合成するための特徴パラメータを有し、前記
    音声情報を学習して前記特徴パラメータの更新を行う特
    徴パラメータ格納部とを備えることを特徴とする音声合
    成装置。
  2. 【請求項2】 前記特徴パラメータ格納部では、前記音
    声情報から抽出されたイントネーション及びアクセント
    の韻律情報を更新することを特徴とする、請求項1に記
    載の音声合成装置。
  3. 【請求項3】 前記特徴パラメータ格納部に抽出された
    イントネーションとアクセントを別々に合成に使用する
    ことを特徴とする、請求項2に記載の音声合成装置。
  4. 【請求項4】 前記音声情報の周波数分析を行いピッチ
    周波数の時間変化を基に更新すべきイントネーション及
    びアクセントの韻律が更新されることを特徴とする、請
    求項2に記載の音声合成装置。
  5. 【請求項5】 前記特徴パラメータ格納部では、前記音
    声情報から抽出された音素データを更新することを特徴
    とする、請求項1に記載の音声合成装置。
JP7312222A 1995-11-30 1995-11-30 音声合成装置 Pending JPH09152884A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP7312222A JPH09152884A (ja) 1995-11-30 1995-11-30 音声合成装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP7312222A JPH09152884A (ja) 1995-11-30 1995-11-30 音声合成装置

Publications (1)

Publication Number Publication Date
JPH09152884A true JPH09152884A (ja) 1997-06-10

Family

ID=18026661

Family Applications (1)

Application Number Title Priority Date Filing Date
JP7312222A Pending JPH09152884A (ja) 1995-11-30 1995-11-30 音声合成装置

Country Status (1)

Country Link
JP (1) JPH09152884A (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002031810A1 (fr) * 2000-10-11 2002-04-18 Sony Corporation Appareil de commande de robot
KR20030034739A (ko) * 2001-10-26 2003-05-09 삼성전자주식회사 음성단위모델데이터의 갱신방법 및 그 장치
JP2006517037A (ja) * 2003-01-24 2006-07-13 ボイス シグナル テクノロジーズ インコーポレイテッド 韻律的模擬語合成方法および装置
JP2015200860A (ja) * 2014-04-01 2015-11-12 ソフトバンク株式会社 辞書データベース管理装置、apiサーバ、辞書データベース管理方法、及び辞書データベース管理プログラム
CN112530404A (zh) * 2020-11-30 2021-03-19 深圳市优必选科技股份有限公司 一种语音合成方法、语音合成装置及智能设备
US11138963B2 (en) 2018-12-27 2021-10-05 Samsung Electronics Co., Ltd. Method and apparatus with text-to-speech conversion
JP2022510752A (ja) * 2018-10-25 2022-01-28 フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニー Arにおける自然言語翻訳

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2002031810A1 (fr) * 2000-10-11 2002-04-18 Sony Corporation Appareil de commande de robot
US7203642B2 (en) 2000-10-11 2007-04-10 Sony Corporation Robot control apparatus and method with echo back prosody
KR100814569B1 (ko) * 2000-10-11 2008-03-17 소니 가부시끼 가이샤 로봇 제어 장치
KR20030034739A (ko) * 2001-10-26 2003-05-09 삼성전자주식회사 음성단위모델데이터의 갱신방법 및 그 장치
JP2006517037A (ja) * 2003-01-24 2006-07-13 ボイス シグナル テクノロジーズ インコーポレイテッド 韻律的模擬語合成方法および装置
JP2015200860A (ja) * 2014-04-01 2015-11-12 ソフトバンク株式会社 辞書データベース管理装置、apiサーバ、辞書データベース管理方法、及び辞書データベース管理プログラム
JP2022510752A (ja) * 2018-10-25 2022-01-28 フェイスブック・テクノロジーズ・リミテッド・ライアビリティ・カンパニー Arにおける自然言語翻訳
US11138963B2 (en) 2018-12-27 2021-10-05 Samsung Electronics Co., Ltd. Method and apparatus with text-to-speech conversion
CN112530404A (zh) * 2020-11-30 2021-03-19 深圳市优必选科技股份有限公司 一种语音合成方法、语音合成装置及智能设备

Similar Documents

Publication Publication Date Title
JP4302788B2 (ja) 音声合成用の基本周波数テンプレートを収容する韻律データベース
US5170432A (en) Method of speaker adaptive speech recognition
US7155390B2 (en) Speech information processing method and apparatus and storage medium using a segment pitch pattern model
US11763797B2 (en) Text-to-speech (TTS) processing
Huang et al. Whistler: A trainable text-to-speech system
US6233553B1 (en) Method and system for automatically determining phonetic transcriptions associated with spelled words
Kawai et al. XIMERA: A new TTS from ATR based on corpus-based technologies
JP3587048B2 (ja) 韻律制御方法及び音声合成装置
US20160104477A1 (en) Method for the interpretation of automatic speech recognition
JPH0887296A (ja) 音声合成装置
Stöber et al. Speech synthesis using multilevel selection and concatenation of units from large speech corpora
Rashad et al. An overview of text-to-speech synthesis techniques
JP4704254B2 (ja) 読み修正装置
Hoffmann et al. Evaluation of a multilingual TTS system with respect to the prosodic quality
JPH0887297A (ja) 音声合成システム
KR100259777B1 (ko) 텍스트/음성변환기에서의최적합성단위열선정방법
JP3437064B2 (ja) 音声合成装置
Ipsic et al. Croatian HMM-based speech synthesis
KR100759172B1 (ko) 음성 합성 장치, 음성 합성 방법, 및 음성 합성 프로그램을기억한 기억 매체
Janyoi et al. F0 modeling for isarn speech synthesis using deep neural networks and syllable-level feature representation.
JP4751230B2 (ja) 韻律素片辞書作成方法、並びに音声合成装置及びプログラム
Narupiyakul et al. A stochastic knowledge-based Thai text-to-speech system
Suh et al. Toshiba English text-to-speech synthesizer (TESS)
JP2862306B2 (ja) 音声認識装置
IMRAN ADMAS UNIVERSITY SCHOOL OF POST GRADUATE STUDIES DEPARTMENT OF COMPUTER SCIENCE

Legal Events

Date Code Title Description
A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20020618