JPH0484269A - 対話形翻訳システム - Google Patents

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は自動翻訳システムに関するものであり、特に、
電話などを介して異なる言語で対話を行う場合に実時間
でそれぞれの言語間の言語を翻訳する対話形翻訳システ
ムに関する。

〔従来の技術〕

言語翻訳システムの１例として、を話を介して対話を行
うような場合に一方の話者の言語から他方の言語、たと
えば１日本語から英語に実時間で翻訳を行う電話自動翻
訳システムが研究されている（たとえば、搏松明、「自
動翻訳電話の研究動向」、電子情報通信学会誌、（１９
８８，８）。

Ｖｏｌ、７１．Ｎｏ、８，８０３〜８０５ページ）。

〔発明が解決しようとする課題］ このような自動翻訳電話システムはまだ研究段階にあり
、実用化に向けて文書翻訳処理とは異なる種々の問題に
遭遇している。そのような問題としては大語案連続音声
の認識、不特定話者音声の認識などの音声認識の困難さ
、対話における文脈共通の知識に依存する言葉の省略９
代名詞の多様さなどの扱いの難しさなどがある。

上述した問題が充分解決されて実用に供する自動翻訳電
話システムが完成するにはまだ相当の時間がかかるもの
と予想される。

そこで本発明はかかる問題の完全な解決を待たないでも
実用に供する自動翻訳電話システムなどの対話形式の翻
訳システムの実用化を図ることを目的とする。

また、上記研究段階の自動翻訳電話システムは文章とし
て成立する言語を翻訳するものであり。

話者の言葉の強弱、ためらい、積極性、笑いなど雰囲気
が伝達できず、生きた翻訳対話ができないという問題が
ある。

そこで９本発明は対話における臨場感をも提供可能な翻
訳システムを提供することをも目的とする。

〔課題を解決するための手段〕

上記問題を解決し、そして、上記目的を達成するため５
本発明の対話形翻訳システムは一方の言葉を他方の言葉
に翻訳するとともに、この翻訳と実時間で一方の話者の
原音を相手に伝達する。

すなわち１本発明の対話形翻訳システムは、第１図にブ
ロック図を示すように、原音発生部１からの言語を入力
して他の言語に翻訳する自動翻訳手段２と、原音発生部
１からの原音を記憶して前記自動翻訳手段２の翻訳出力
に対応じて記憶した原音を出力する原音記憶処理手段３
を自動翻訳手段２と並列に設け、自動翻訳手段２からの
翻訳出力と原音記憶処理手段３からの原音出力とを音合
成手段４で合成して聴音部５に出力するように構成され
ている。

ここで、「原音」とは１話者が発した全ての音をいい、
「言語」とは「原音」のうち翻訳の対象になる言葉をい
う。したがって、「原音」は言語のほか、たとえば、笑
いなど翻訳の対象にならないものをも含む。

好適には、原音記憶処理手段３は自動翻訳手段２と協働
し自動翻訳手段２の翻訳単位、たとえば文章単位に応じ
て記憶した原音を出力する。

〔作用〕

自動翻訳手段２は、たとえば、上述した論文に示される
ように、原音発生部１から出力されるある言語から他の
言語、たとえば１日本語から英語に翻訳する。この自動
翻訳手段２の翻訳対象は言語である。したがって３話者
の笑いなどの対話状況を表す原音は翻訳されない。また
９文章であっても翻訳上の制約で翻訳出来ない言語もあ
る。−方、原音記憶処理手段３は話者の笑いなどを含む
全ての原音を記憶して、自動翻訳手段２の翻訳出力と同
期した実時間で出力する。自動翻訳手段２の翻訳出力と
原音記憶処理手段３に記憶した原音とは音合成手段４で
合成され聴音部５に出力される。

自動翻訳手段２の翻訳出力に原音が付加される結果、臨
場感にあふれた有効な対話が可能になる。また、自動翻
訳手段２で翻訳されない言語が聴音部５に伝達されるか
ら自動翻訳手段２の翻訳が不完全であったり適切でない
ことがあっても、あるいは翻訳されない言語があっても
聴音部５において補うことができる。あるいは利用者に
よっては原音を主にして翻訳を参考程度にするという利
用形態をとることもできる。

原音記憶処理手段３からの原音出力は、好適には、自動
翻訳手段２の翻訳単位、たとえば２文章単位に応じて行
う。

〔実施例〕

第２図に本発明の対話形翻訳システムの１実施例として
、電話を介して異なる言語で対話を行う場合に用いられ
る翻訳システムの構成を示す。

この対話形翻訳システムは双方向対話を行う電話システ
ムに適用したものであり、一方の話者が利用する電話機
の送受話器１ａと他方の話者が利用する電話機の送受話
器５ａが交換機６２通信網８および交換機７を介して接
続されている。送受話器１ａは送話器１１と受話器１２
を有し、同様に、送受話器５ａは送話器５１と受話器５
２を有する。これらの送受話器１ａおよび送受話器５ａ
の送話器１１．送話器５１が第１図に示した原音発生部
１．受話器１２および受話器５２が第１図に示した聴音
部５に相当する。

本実施例では、送受話器１ａの話者が日本語を話し、送
受話器５ａの話者が英語を話す例について述べる。した
がって、交換機６と受話器１２との間には送話器５１か
ら発っせられた英語を日本語に翻訳する英語・日本語自
動翻訳装置２２．交換機７と受話器５２の間には送話器
１１から発っせられた日本語を英語に翻訳する日本語・
英語自動翻訳装置２１が設けられている。日本語・英語
自動翻訳装置２１と並列に送話器１１からの原音（日本
語）を記録する原音記憶処理装置３１が設けられ、この
原音記憶処理装置３１の出力と自動翻訳装置２１の翻訳
出力を合成して受話器５２に出力する音合成装置４１が
設けられている。また同様に、自動翻訳袋ｗ２２と並列
に送話器５１からの原音（英語）を記録する原音記憶処
理装置３２が設けられ、さらにこの原音記憶処理装置３
２の出力と自動翻訳袋Ｗ２２の翻訳出力を合成して受話
器１２に出力する音合成装Ｗ４２が設けられている。

日本語・英語自動翻訳装置２１．原音（日本語）記憶処
理装置３１および音合成装置４１と、英語・日本語自動
翻訳装置２２．原音（英語）記憶処理装置３２および音
合成装置４２とは原語（言語）処理が逆処理であること
を除いてその動作原理は同じであるから、以下１日本語
から英語に翻訳する自動翻訳装置２１．原音蓄積処理装
置３１および音合成装置４１についてのみ述べる。

第３図に原音記憶処理装置３１のブロック構成を示す。

原音記憶処理装置３１は原音データ入力部３１ａ、原音
データ記憶部３１ｂおよび原音データ出力部３１ｃから
なる。原音データ入力部３１ａは、交換機７を介して入
力される日本語を音データとして原音データ記憶部３１
ｂに記憶できる信号形態に信号変換回路、たとえば、Ｃ
０ＤＥＣを用いて所定の信号形態に変換する。原音デー
タ記憶部３１ｂはこのように変換された原音データを記
録する。また原音データ出力部３１ｃは信号変換回路、
たとえば、Ｃ０ＤＥＣを用いて、原音データ記憶部３１
ｂに記録された原音データを音合成装置４１で自動翻訳
装置２１からの翻訳言語と合成可能な信号形態で出力す
る。

本実施例では原音記憶処理装置３１の日本語データの記
録および出力を自動翻訳装置２１の翻訳単位に同期して
分割して行なわせる。この実施例では自動翻訳装置２１
は文章単位で翻訳を行う。

まず、第４図を参照して自動翻訳装置２１の翻訳動作に
ついて述べる。

自動翻訳装置２１は日本語の文章単位３１〜Ｓ゛４（第
４図（ａ））ごとに翻訳処理を行う。自動翻訳装置２１
がこれらの単位文章３１〜Ｓ４を翻訳するのに第４図（
ｂ）に示す翻訳時間ｔ１〜Ｌ４だけかかる。そして、翻
訳された翻訳文章ＴＲ１〜ＴＲ４が第４図（ｃ）に示す
ように順次自動翻訳装置２１から出力される。原音デー
タ入力部３１ａおよび原音データ出力部３１ｃは上記自
動翻訳装置２１の翻訳動作に同期して処理を行ない、第
４図（ｄ）に示すタイミングで記憶した原語データを出
力する。

原音データ入力部３１ａおよび原音データ出力部３１Ｃ
の動作をそれぞれ第５図および第６図を参照して述べる
。第５図は原音データ入力部３１ａの動作フローチャー
ト、第６図は原音データ出力部３１ｃの動作フローチャ
ートを示す。

まず２第５図を参照して原音データ入力部３１ａの原語
（日本語）入力について述べる。

スー・・プＳｌｌ 原音データ入力部３１ａは自動翻訳装置２１が日本語の
文章Ｓ１の先頭を検出した信号を割り込み信号として自
動翻訳装置２１から入力すると。

文章単位の原音入力処理に入る。

スー　プ３１２〜Ｓ１４ 原音データ入力部３１ａは文章の先頭検出に同期して、
たとえば９日本語原音を入力し信号変換回路、たとえば
、Ｃ０ＤＥＣを介して記憶可能な音データに変換しく５
１２）、原音データ記憶部３１ｂに記憶する（Ｓ１３）
。この原音データの入力・記憶処理を原音が再現可能な
一定のサンプリング周期で行う。

これらの入力・記憶処理は自動翻訳装置２１が文章の終
わりを検出するまで反復される。

、入テ」じ６ｊ１」ユ 原音データ入力部３１ａは自動翻訳装置２１が文章の終
わりを検出した信号を割り込み信号として入力して文章
の終わりを検出すると、記憶した原音データの長さ、原
音データの記憶番号などのパラメータをレジスタなどに
記憶して原音データの入力処理を終了する。

自動翻訳装置２１は日本語文章Ｓ１を英語に翻訳処理を
行い、翻訳時間Ｌｌ後翻訳を終了すると、原音データ出
力部３１ｃに割り込みをかけると同時に英語の翻訳文章
ＴＲＩを出力する。

スー・プ３２１　　６−’ 原音データ出力部３１ｃはこの割り込みによって起動さ
れる。

スー・・プＳ２２〜Ｓ２４ 原音データ出力部３１ｃは、上記原音データ入力部３１
ａが記憶したパラメータに基づいて、翻訳文章に対応す
る記憶している原音を音合成装置４１に出力する（Ｓ２
２）。この記憶原音の出力は原音データ入力部３１ａが
記憶したパラメータに従って、翻訳文章に対応する記憶
文章を捜し出し、そして、記憶容量の範囲（Ｓ２３）、
または、自動翻訳装置２１が次の翻訳文章を出力する直
前まで行う（Ｓ　２４　）。特に９自動翻訳装置２Ｉが
次の翻訳文章を出力する直前まで行うのは、原音データ
記憶部３１ｂに記憶されている原音の長さが翻訳文章よ
りも長いとき可能な時間範囲で記憶した原音を出力する
ためである。ただし１次の翻訳文が出力されるときには
前の原音の出力を打ち切る。

このステップＳ２４における判断を自動翻訳袋！２１が
次の文章の先頭を検出した場合などに変更することもで
きる。

この記憶原音出力の間、原音データ人力部３１ａは、上
記した手順で、原音データ出力部３１ｃとは独立に次の
文章の原音データの記憶を行う。

以上の動作処理が対話に応じて継続される。これにより
、第４図に示すように、翻訳文章ＴＲＩ〜ＴＲ４とこれ
に対応する記憶された原音５ｏｌＳＯ４が順次文章ごと
同時間で出力され、音合成装置４１が合成されて受話器
５２を介して他方の英語を話す話者に伝達される。

原音は記憶のために信号変換されるだ１１であり、基本
的に送話器１１からの音が受話器５２に伝達される。こ
れにより、英語を話す話者は日本語から翻訳された英語
を開くとよもに送話器１１から日本語の原音を聞くこと
ができ、送話器１１における話者の話しぶり、音の強弱
、感情などを知ることができる。

また、翻訳文が不適切１間違っているような場合でも、
受話器５２における話者がある程度日本語の知識を持っ
ている場合、送話器１１からの日本語を聞いて正確な意
味を理解することができ。

自動翻訳装置２１が必ずしも正確な翻訳能力を持たない
状況でも対話形翻訳が可能となる。

場合によっては、対話としては原音を中心にして翻訳文
を参考程度にする利用形態をとることもできる。

このような利用形態に則して、翻訳文を強く出力させる
。あるいは記憶原音を強く出力させるなどの出力レベル
の選択を音合成装置４１において行うことができる。

以上の実施例においては、翻訳可能な文章を基準として
原音を記憶し出力する場合について述べたが、原音デー
タ入力部３１ａは送話器１１からノ音のレベルを検出し
、その音レベルが所定のレベルを越えている場合原音デ
ータ記憶部３１ｂに記憶し、その記憶開始から所定時間
経過後、たとえば、３秒経過後も自動翻訳装置２１から
文章先頭検出割り込みが入力されない場合、原音データ
出力部３１ｃを起動して、自動翻訳装置２１では翻訳文
章として扱わないような原音、たとえば。

笑い声、感嘆表現、短すぎて文章として扱わないような
ものをそのまま出力させる。これにより。

−層臨場惑が向上する。

第７図に第３図の原音記憶処理装置３１のより具体的な
構成を示す。第７図に示した原音記憶処理装置３１はマ
イクロコンピュータを用いて構成した場合を例示してお
り、ＣＰＵ３１０．第５図および第６図を参照して述べ
た処理プログラムを記憶しているＲＯＭ３１４．データ
の−時記憶用ＲＡＭ３１５．原音データ記憶用ＲＡＭ３
１６第２図の交換機７を介して原音を入力する通信モジ
ュール３１３．この通信モジュール３１３からの原音を
ＲＡＭ３１６に記憶可能な信号に変換する。Ｃ０ＤＥＣ
などの信号変換器３１２．ＲＡＭ３１６に記憶した原音
データを第３図の音合成装置４１に出力するだめのＣ０
ＤＥＣなどの信号逆変換器３１７１通信モ通信モジュー
ルからなる。

第２図の自動翻訳袋Ｗ２２．原音記憶処理装置３２およ
び音合成装置４２も上述したものと同様である。

本発明の実施に際しては上述したものの他種々の変形形
態をとることができる。たとえば、上述した例において
は、翻訳文の出力タイミングを基準として原音を出力す
る場合について述べたが。

自動翻訳装置２１．２２の翻訳能力がまだ充分でないよ
うな場合、あるいは相互に語学力があって翻訳文を参考
程度に活用したい場合には、原音の出力を基準としてそ
の出力タイミングに合わせて翻訳文を出力するようにし
てもよい。さらに上記実施例においては１文章単位で翻
訳文、原音を出力する場合について述べたが、これに限
定されることなく、言語体系などに基づいて適宜、たと
えば、所定の時間単位ごと、あるいはフレーズ単位、あ
るいはこれらの組合せごと行うことができる〔発明の効
果〕 以上に述べたように１本発明によれば、翻訳文に原音を
そのまま合成して相手話者に伝達することにより、対話
のレー場惑を伴った対話形翻訳システムを実現すること
ができる。

また本発明によれば９文書翻訳などより困難さが伴う自
動翻訳装置の翻訳精度が充分でなかったり、翻訳可能な
範囲、レベルに限度がある場合でも、原音を翻訳文と一
緒に相手話者に伝えることによって、相手話者が翻訳文
の不備を補う機会を提供できる。

【図面の簡単な説明】

第１図は本発明の対話形翻訳システムのブロンク図。 第２図は本発明の１実施例として電話システムに適用し
た対話形翻訳システムの構成図。 第３図は第２図における原音記憶処理装置の構成図 第４図は第２図の対話形翻訳システムの動作タイミング
図。 第５図および第６図は第３図の原音記憶処理装置の動作
フローチャート。 第７図は第３図の原音記憶処理装置の詳細な構成図であ
る。 （符号の説明） １・・・原音発生部。 １ａ・・・送受話器。 ２・・・自動翻訳手段。 ３・・・原音記憶処理手段。 ４・・・音合成手段。 ５・・・聴音部。 ５ａ・・・送受話器。 ６．７・・・交換機。 ８・・・交換網。 １１．５１ １２．５２ ２１．２２ ３１．３２ ４１．４２ １ａ ３１ｂ　　・　・ ３１ｃ　　・　・ ・・・送話器。 ・・・受話器。 ・・・自動翻訳装置。 ・・・原音記憶処理装置。 ・・・音合成装置。 原音データ入力部。 原音データ記憶部 原音データ出力部。

Claims (1)

1. 【特許請求の範囲】 １、原音発生部からの言語を入力して他の言語に翻訳す
   る自動翻訳手段と、 前記原音発生部からの原音を記憶し前記自動翻訳手段の
   翻訳出力に対応して前記記憶した原音を出力する原音記
   憶処理手段と、 前記自動翻訳手段からの翻訳出力と前記原音記憶処理手
   段からの原音出力を合成して聴音部に出力する音合成手
   段と を具備する対話形翻訳システム。 ２、前記原音記憶処理手段は前記自動翻訳手段と協働し
   前記自動翻訳手段の翻訳単位に応じて前記記憶原音を出
   力する請求項１記載の対話形翻訳システム。