JPH04112364A - 辞書引き方式 - Google Patents

辞書引き方式

Info

Publication number
JPH04112364A
JPH04112364A JP2233643A JP23364390A JPH04112364A JP H04112364 A JPH04112364 A JP H04112364A JP 2233643 A JP2233643 A JP 2233643A JP 23364390 A JP23364390 A JP 23364390A JP H04112364 A JPH04112364 A JP H04112364A
Authority
JP
Japan
Prior art keywords
speech
dictionary
words
translation
dictionary lookup
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2233643A
Other languages
English (en)
Inventor
Norikazu Ito
則和 伊藤
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Ricoh Co Ltd
Original Assignee
Ricoh Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Ricoh Co Ltd filed Critical Ricoh Co Ltd
Priority to JP2233643A priority Critical patent/JPH04112364A/ja
Publication of JPH04112364A publication Critical patent/JPH04112364A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Machine Translation (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 技監分更 本発明は、辞書引き方式に関する。例えば、自然言語処
理技術や機械翻訳システムに適用されるものである。
k米技拵 従来の機械翻訳装置においては、翻訳結果を得るまでは
、辞書に妥当な訳語が登録されているかどうかがよくわ
からない場合があった。また、妥当な訳語が辞書に登録
されている場合でも、文中の用法として正確に把握され
るとは限らないものであった。すなわち、多義、多品詞
、多訳語のときは、別の用法、訳語が優先されてしまう
おそれが生じていた。
上記欠点を解消するために、特開昭63−228374
号公報においては、翻訳対象文書の単語の頻度とその単
語の辞書情報から、ある一定の頻度以上の多品詞あるい
は多義の単語について、辞書の情報を表示し、必要な情
報を選択して翻訳するようにしているが、多品詞・多義
性のある言葉は、特に構文上の位置によって多品詞・多
義となっており、情報を限定することが゛困難なことが
少なくなかった。また、文書中の語の重要度と、多義性
は必ずしも一致するものではなく、翻訳用の辞書におい
ては、単一の語義(訳語)しかないような語が、分野に
よってはまったく違う訳語(専門用語等)を必要として
いるにもかかわらず、望ましい訳語が出ないために誤解
を生じるといった、辞書中の語義の不足に対応できない
等の欠点があった。
特に、上記特開昭63−228374号公報においては
、多義の語でその文書中の頻度が高い語について、あら
かじめ抽出し、その抽出された結果をユーザーに提示し
て、修正することによって翻訳の精度を高めるようにし
ているが、■抽出する多義・多品詞であることを基準と
しているので、その抽出する語が文書中で誤解されては
いけないような重要語であるとは限らない。例えば、訳
語は数少ないが1間違えるとまったくの誤解を呼ぶよう
な語には対応できない。また、翻訳しようとする分野に
とっては特有の諸費で、一般の場合とまったく異なる用
法がある場合(かつ一般の語としての用法が少ない場合
)には対応できないという欠点がある。言いかえれば、
システムが多義と認識していない語でも、システムの辞
書の訳語では非常にまずい場合が存在しえることになる
。■抽出する語を頻度のみに頼っているので、この場合
は頻度は非常に重要な尺度であるが、頻度ばかりではな
く、文書中の位置等、文書中の語貧の重要度を計る基準
は他にも存在する、等の欠点があった。
このように、自然言語間の機械翻訳において用語の訳出
は難しい問題である。英語と日本語間を例にとってみて
も、一つの英語の言葉はいろいろな意味を持つことが少
なくなく、適切な日本語に訳出しなければならない。実
際はなかなかうまく訳し分けられないものである。翻訳
対象文書が専門的になればなるほど訳語の適切さが求め
られる。
そして不適切な訳語を与えると全くわかりにくい訳文に
なることがしばしばある。
ある3謳のテキストを辞書引きするときに多品詞語の正
しい訳語を見付けることは意外と厄介である。辞書中の
どの品詞がその場合に当てはまるのかがわかりにくいこ
とがある。テキスト辞書引きシステムでは、普通代表的
な品詞とその訳語を表示するものである。これまでに、
辞書引きツールで事前に品詞を推定するものは提案され
ていないが、連接確率を用いた多品側解消法を用いた構
文解析についてはすでに提案されている。
■−−カ 本発明は、上述のごとき実情に鑑みてなされたもので、
そのテキストの文脈で求められている品詞の訳語を辞書
引きするために、連接確率表を利用したものと、構文解
析結果を利用することにより多品詞の解消を行った辞書
引き方式を提供することを目的としてなされたものであ
る。
盈−一双 本発明は、上記目的を達成するために、(1)機械翻訳
等の自然言語解析システムにおいて、形態素解析部での
解析対象テキストの辞書引きの後に、各々の語が持つ品
詞を、該品詞の間の連接確率の積を計算することにより
、最も連接確率の高くなる組み合わせを満たすものに限
定し5複数の品詞を持つ語が解析されるときの多品詞語
の多義性を解消してから該品詞の訳語だけを表示するこ
と、更には、(2)多品詞が解消された語の訳語だけを
表示すること、或いは、(3)機械翻訳等の自然言語解
析システムにおいて、構文解析部における解析処理を行
った後に、解析結果の品詞の訳語だけを表示すること、
(4)前記(3)において、多品詞が解消された語の訳
語だけを表示することを特徴としたものである。以下、
本発明の実施例に基づいて説明する。
第1図は、本発明による辞書引き方式を備えた翻訳装置
の一実施例を説明するための構成図で、図中、1は陰極
線管(CRT) 、2はキーボード、3は光学文字読取
装置(OCR)、4は六方文書、5はスペルチェック部
、6は前編集部、7は翻訳本体部、8は後編集部、9は
辞書、1oは文法規則、11は出力文書、12はプリン
タである。
ファイル人力、キーボード入力、OCR入力のいずれか
によって得た入力文は入力文書4として保管され1次に
スペルチェック部5は、辞書9を参照してスペルチェッ
クし、前編集部6を用いて前処理を行える。翻訳本体部
7は、辞書9と文法規則10を用いて翻訳し、その結果
得られた出力文は、後編集部8によって翻訳情報を利用
して編集できる。編集後の出力文は出力文書11に記憶
される。入力文と出力文はプリンタ12を用いて印刷で
きる。
第2図は、第1図における翻訳本体部の4つの処理を示
す図で、図中、13は辞書、14は入力部、15は形態
素解析部、16は構文解析部、17は変換部、18は生
成部、19は出力部、20は文法規則である。この翻訳
本体部の4つの大きな処理とは■形態素解析部15では
、入力テキストの辞書引きを行なうこと、■構文解析部
16では、個々の語の情報を得て文法規則20に従って
パージングを行い、解析結果から木構造を作成すること
、■変換部17では入力言語の木構造から出力言語の本
構造に変形すること、tl+l酸生成8では得られた本
構造をノードごとに訳出すること、である。
本発明は翻訳本体部の辞書を利用した辞書引き方式であ
る。ここでは入力テキストは英文とする。
入力されたテキストを対象として、形態素解析部で辞書
引きを行う。辞書引きした結果を得て、まず多品詞解消
処理を行う。ここでの多品詞解消方式は以下の文献にて
紹介されているものを利用する。
Computational Linguistics
、 Vol、14.No、1.winter 198g
p31−39  “Grammatical Cate
gory Disambiguation bySta
tstical Optimization”  S、
J、Derose (Brown Univ、)前記文
献の筆者(Derose)の提案するVOLSUNGA
と呼ぶ多品詞解消方式を利用して解析部導入処理とする
。VOLSUNGAは以下の特徴を持つ。
■完全な数学的アルゴリズムに基づき、臨時的な付加部
分を最小限に押さえている。
■最適な品詞列の定義は、品詞列を構成する品詞連接確
率および相対品詞確率の積が最大のものである。
■効率的な最適品詞列探索法(動的プログラミング法)
により、指数関数的な計算を克服した。
ここでいう品詞は細かい品詞分類を指し、全部で100
種類ぐらいある。
必要なデータとしては、品詞分類と相対品詞確率と熟語
優先情報を持つ辞書と品詞連接確率表がある。
最適な品詞の組み合わせを動的プログラミング方法によ
り求める。以下の第1表は最適品詞組合せを示す表であ
る。
第1表 もし、To、1からTr++jまでの最適品詞組合せが
、Tn−1,iを通るとすると、Tn−1、iまでの部
分はTO,1からTn−1,iまでの最適品詞組合せで
ある。なぜならば、 Tn−1,iまでのが最適でなけ
れば、 Tn−1,iまでの部分に最適品詞組合せを選
ぶと、その方が最適となる。したがって、TO91から
TnvJまでの最適品詞組合せは、各1(=1.・・、
io)についてのio、tからTn−1,iまでの最適
品詞組合せと、Tn−1,iからTn、jへの組合せの
組合せ通の最適なものである。
例) The man 5till 5ati her
、という文についての最適品詞組合せを計算する。ここ
ではそれぞれの語が以下の品詞を持つとする。また説明
を簡単にするためそれぞれの品詞が持つ品詞確率は省略
する。実際には連接確率に加えて品詞相対確率も係数と
なる。
The man 5till saw herAN  
NN  NN   NN  PP0VB  VB   
VBD PPS B なお、 ATは冠詞、NNは名詞、ppoは代名詞目的
格、PPSは所有代名詞、RBは副詞、VBは動詞、V
BDは動詞過去である。
先頭のTheから末尾のherまでの品詞組合せは1*
2*3本2木2=24計24通りある。第2表の連接確
率を用いて最適組合せを計算する。
第2表連接確率の例 VB  O(I AT−VB) NN  ○(186*40 AT−NN−NN) X 
(1*22 AT−■−NN)NN →ATVB  ○(186* 9 AT−NN−VB)
 x (1* 9 AT−VT3−VB)■ 冊 ○(186*40 AT−NN−RB) x (1
*98 AT−■−RB)階 RB   ○(186*40*152 AT−11JI
II−RB−VBD)なお、相対確率はRB>NNであ
る。
陥 186 * 40本152本584  >  186本
41152木143したがッテ、こうしテAT NN 
RB VBD PPOの品詞列が得られる。
次に相対品詞確率による補正の例を示す。
so : QL(限定側、932)、C5(従属接続詞
、479)、UH(間投詞、1)数字は品詞相対確率 so thatの並びを連接確率のみと相対品詞確率併
用で品詞推定する。
連接確率のみによる方法 P (UH−C5) > P (C5−C5)連接確率
と相対品詞確率 P(UH−C5) * P(so、−U)l) * P
(that−C5) <P(C5−C3) * P(s
o−C5) * P(that−C5)P()は確率を
示す。P (UH−C5)はUH−C5の連接確率を示
す。P(so C3)はsoのC8の品詞相対確率を示
す。連接確率と相対品詞確率を併用したときに正解cs
−csが得られる。
次に、熟語があるときの処理例を示す。
The mean cawre in order t
o win、は以下の品詞を持つとする。
The mean cawIe in order t
o win。
RB <−To−> PPN (人称代名詞主格) 先頭のIから末尾のwinまでの品詞組合せは1*2本
1本2本2本3本2:48 1本2本1  *  1  *  2=  4計48通
りある。本来、熟語はその構成単語ごとに扱わずにひと
かたまりで1つの言葉を成すと考えるべきであるが、こ
こでは便宜上その構成単語ごとに仮の単語として組み合
わせの可能性を残しておく、このとき、もちろんこの部
分は他の単語との組み合わせは許さない。その熟語を構
成する最後の単語において連接確率及び品詞相対確率を
計算する。この方法では熟語が長ければ長いほど係数の
数が少なくなるので、それに応じてあらたに係数を乗じ
ておく必要もある。
この例では、in order toが熟語である。こ
の部分は11 in II  110rderI+  
11 to”の組み合わせは2本2*3で12通りある
が、”in order to”は1通りである。下記
では*−*−Toと表わしている。
II −−IIの部分が組み合わせが固定であることを
示している。
The man came in order to 
win。
また、熟語には辞書で優先情報を与えることができる。
今までは熟語が優先情報を持たない場合を説明している
。優先情報を持っときは熟語以外の可能性を廃棄する。
すなわち”in order to”が優先情報を持つ
ときはLtinIT  t(orde%T  tLto
IIは辞書引きされない。例文は以下の品詞しか持たな
くなる。なおこの優先情報は熟語により付与するものも
あるし付与しないものもある。
VB               VB第3図は1本
発明による辞書引き方式である連接確率表を用いた多義
解消法による辞書の流れを示す図である。なお、図中で
の熟語とは優先情報を持たないものを示し、優先情報を
持つものは単語と同じ扱いとなる。以下、各ステップに
従って順に説明する。
銭肝土;前述した動的プログラミング方法において、n
=o ; h=Tn ; 1=Tn+1とする。
扛吐I; (T n 、 h )の中に熟語の始まり(
Tn、x)があるかどうか判断する。
1す■】−; (T n 、 x )があると、該(T
n、x)と−緒に熟語を構成する(Tn、x)の次の語
を(Tn+1.x)とする。
s□; (Tn、x)、(Tn+l、x)を除<(Tn
、h)の各要素から(Tn+I、i)の各要素までの最
適の組合せと(Tn、x)−(Tn+1.x)をとる。
廷吐旦; n=−n+1 ; h=:Tn ; i =
Tn+1とする。
杜旺旦; (T n 、 x )は熟語の最後かどうか
判断する。
最後でなければ5tep 4に戻る。
旦弘I;前記5tep 2において、(Tn、h)の中
に熟語の始まり(Tn、x)がなければ、(Tn、h)
の各要素から(Tn+1.i)の各要素までの最適の組
合せをとる。
払肛旦; n=n+1 ; h=Tn ; 1=Tn+
1とする。
麩肛旦; 5tep 6において(Tn、x)が熟語の
最後であれば、また5tep 8を介して、Tnは文末
かどうかを判断する。文末でなければ5tep 2に戻
る。
u圧よ立;文末であれば、最適の組合せを満たす品詞列
をとる。
ゴ」■ユ」工;辞書引きを行う。
第4図は、第3図における5tepHの辞書引き部分を
説明するためのフローチャートで、図中、21は辞書、
22は連接確率表である。以下、各ステップに従って順
に説明する。
シリ狸」1;多義解消去の選択を行う。
ste上」ユ;辞書21と連接確率表22を用いて連接
確率による品詞多義解消を行う。第6図に辞書の例を示
す。
Σリヱ3;5tep2と同様に辞書21と連接確率表2
2を用いて、構文解析による品詞多義解消を行う。
扛旺土;辞書引き対象の選択を行う。
銭肛立;辞書21を用いてすべての語の訳語を表示する
% ; 5tep 5と同様に、辞書21を用いて多品
詞語の訳語を表示する。
こうして多品側の解消をしてからその品詞の訳語を表示
する。こうすればユーザの必要とする品詞の訳語を得る
ことができ、非常に効率のよい辞書引き結果を得ること
ができる。さらに、このとき、すべての語の訳語を表示
するのではなく、多品側が解消された語の訳語だけを表
示することもできる。また、このような基準でなくとも
任意の基準を設けて訳語を表示する語を制限することは
いくらでも可能である。
また、本発明の他の実施例としては構文解析による品詞
多義解消法である。ここでは入力テキストは英文とする
。入力されたテキストを対象として、形態素解析部で辞
書引きを行う、辞書引きした結果を得て、構文解析を行
う、構文解析の方法は何でもよく、CFG (文脈自由
文法)を用いたボトムアップパーサ等、既存の技術で実
現可能である。この結果得られた品詞の訳語を表示する
さらに、このとき、すべての語の訳語を表示するのでは
なく、多品側が解消された語の訳語だけを表示すること
もできる。
第5図(a)〜(d)は、編集画面を示す図で、図(a
)は原文人力時1図(b)は辞書引きメニュー、図(C
)は辞書引き結果、図(d)は辞書引き結果(多品詞語
のみ)を各々示す図である。
例えば、第5図(a)の原文六方時に”The man
5till 5ati her、”の英文が画面表示さ
れている。
第5図(c)の辞書引き結果として “The man 5till saw her。
男 まだ 見た彼女 が表示され、第5図(d)の辞書引き結果(多品詞語の
み)として ”The man 5till 5aty her。
男 まだ 見た が表示されることになる。
このようにして、多品詞語の多義性を解消してから該品
詞の訳語だけを表示することができる。
免−一来 以上の説明から明らかなように、本発明によると、以下
のような効果がある。
(1)請求項1,2に対応する効果;連接確率表を用い
た導入することで、多品詞の解消を行った辞書引きがで
きて効率が向上する。
(2)請求項3,4に対応する効果;構文解析の結果を
利用することで、多品詞の解消を行った辞書引きができ
て効率が向上する。
【図面の簡単な説明】
第1図は、本発明による辞書引き方式を備えた翻訳装置
の一実施例を説明するための構成図、第2図は、第1図
における翻訳本体部の処理を示す図、第3図は、連接確
率表を用いた品詞の多義解消法を用いた辞書引き方式の
フローチャート、第4図は、第3図における辞書引き部
分を説明するための図、第5図は、編集画面を示す図、
第6図は、辞書の例を示す図である。 1・・陰極線管(CRT)、2・・・キーボード、3・
光学文字読取装置(OCR) 、4・・・入力文書、5
・・・スペルチェック部、6・・・前編集部、7・・・
翻訳本体部、8・・・後編集部、9・・・辞書、10・
・文法規則、11・・・出力文書、12・・・プリンタ
。 特許出頴大  株式会社 リ コ 第2図 第 図 第 図 (a)[文人力時 (b) 辞書引きメニュー 第 図 第 図 (e) 辞書引き結果

Claims (1)

  1. 【特許請求の範囲】 1、機械翻訳等の自然言語解析システムにおいて、形態
    素解析部での解析対象テキストの辞書引きの後に、各々
    の語が持つ品詞を、該品詞の間の連接確率の積を計算す
    ることにより、最も連接確率の高くなる組み合わせを満
    たすものに限定し、複数の品詞を持つ語が解析されると
    きの多品詞語の多義性を解消してから該品詞の訳語だけ
    を表示することを特徴とする辞書引き方式。 2、多品詞が解消された語の訳語だけを表示することを
    特徴とする請求項1記載の辞書引き方式。 3、機械翻訳等の自然言語解析システムにおいて、構文
    解析部における解析処理を行った後に、解析結果の品詞
    の訳語だけを表示することを特徴とする辞書引き方式。 4、多品詞が解消された語の訳語だけを表示することを
    特徴とする請求項3記載の辞書引き方式。
JP2233643A 1990-09-03 1990-09-03 辞書引き方式 Pending JPH04112364A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2233643A JPH04112364A (ja) 1990-09-03 1990-09-03 辞書引き方式

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2233643A JPH04112364A (ja) 1990-09-03 1990-09-03 辞書引き方式

Publications (1)

Publication Number Publication Date
JPH04112364A true JPH04112364A (ja) 1992-04-14

Family

ID=16958258

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2233643A Pending JPH04112364A (ja) 1990-09-03 1990-09-03 辞書引き方式

Country Status (1)

Country Link
JP (1) JPH04112364A (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0756924A (ja) * 1993-06-30 1995-03-03 Ricoh Co Ltd 対訳装置
JPH07334526A (ja) * 1994-06-14 1995-12-22 Nec Corp 辞書検索表示装置

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0756924A (ja) * 1993-06-30 1995-03-03 Ricoh Co Ltd 対訳装置
JPH07334526A (ja) * 1994-06-14 1995-12-22 Nec Corp 辞書検索表示装置

Similar Documents

Publication Publication Date Title
US8386234B2 (en) Method for generating a text sentence in a target language and text sentence generating apparatus
WO2010046782A2 (en) Hybrid machine translation
WO2003056450A1 (en) Syntax analysis method and apparatus
Keersmaekers Creating a richly annotated corpus of papyrological Greek: The possibilities of natural language processing approaches to a highly inflected historical language
EP1208457A1 (en) Semantic processor and method with knowledge analysis of and extraction from natural language documents
Lingam et al. Rule-based machine translation from English to Telugu with emphasis on prepositions
Khemakhem et al. Integrating morpho-syntactic features in English-Arabic statistical machine translation
JP4033011B2 (ja) 自然言語処理システム及び自然言語処理方法、並びにコンピュータ・プログラム
Khandale et al. Rule-based design for anaphora resolution of marathi sentence
JPH04112364A (ja) 辞書引き方式
Maulidia et al. AN ANALYSIS OF ENGLISH COMPOUND WORDS IN AN ARTTICLE OF LIFE AND STYLE COLUMN
Ablimit et al. Partly supervised Uyghur morpheme segmentation
Jun et al. Paraphrasing Chinese Idioms: Paraphrase Acquisition, Rewording and Scoring
JPH02254565A (ja) 構文解析方式
Khemakhem et al. The MIRACL Arabic-English statistical machine translation system for IWSLT 2010
Khandale et al. Anaphora resolution: A complete view with case study
Arkhangelskiy Corpus of usage examples: What is it good for?
Pettersson et al. Automatic verb extraction from historical Swedish texts
Mostafavi Kashani Automatic transliteration from Arabic to English and its impact on machine translation
Tanev et al. LINGUA: a robust architecture for text processing and anaphora resolution in Bulgarian
Maurya et al. Gender and number identification for Gujarati word: rule-based approach
Abodina et al. Arabic to malay medical dialogue translation system based on the grammatical rules
Amouee et al. Dependency Parsing in Persian: A Rule-based Hybrid Model
JP4023384B2 (ja) 自然言語翻訳方法及び装置及び自然言語翻訳プログラム
Ptaszynski et al. NLP for Endangered Languages: Morphology Analysis, Translation Support and Shallow Parsing of Ainu Language