JPH0535717A - 語切り表示装置 - Google Patents

語切り表示装置

Info

Publication number
JPH0535717A
JPH0535717A JP3187945A JP18794591A JPH0535717A JP H0535717 A JPH0535717 A JP H0535717A JP 3187945 A JP3187945 A JP 3187945A JP 18794591 A JP18794591 A JP 18794591A JP H0535717 A JPH0535717 A JP H0535717A
Authority
JP
Japan
Prior art keywords
word
display
connection cost
words
display density
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP3187945A
Other languages
English (en)
Inventor
Akihiro Furukawa
章浩 古川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP3187945A priority Critical patent/JPH0535717A/ja
Publication of JPH0535717A publication Critical patent/JPH0535717A/ja
Pending legal-status Critical Current

Links

Landscapes

  • Digital Computer Display Output (AREA)
  • Machine Translation (AREA)
  • Document Processing Apparatus (AREA)

Abstract

(57)【要約】 【目的】 スペースや特別の記号を配置することなく、
語と語の区切りを容易に表示することのできる語切り表
示装置を提供する。 【構成】 日本語テキストを語に分割する形態素分割部
11は、語切り結果と語切りされた隣接する語同士の隣
接のし易さを表わした接続コストとを出力する。表示濃
度設定部は隣接した語が同一濃度で表示されないよう
に、また例えば語切りの誤りの確率を表示できるように
それぞれの語の表示濃度を設定する。表示部14は、こ
の設定された表示濃度でそれぞれの語を表示する。隣接
した語が同一濃度では表示されないので、語と語の間に
スペースや特別の記号を介在させる必要がない。

Description

【発明の詳細な説明】
【0001】
【産業上の利用分野】本発明は機械的に日本語の解析を
行う装置に係わり、詳細には日本語を形態素分割した結
果を表示するために用いる語切り表示装置に関する。
【0002】
【従来の技術】日本語を形態素分割(以下単に語切りと
称する。)した場合には、その結果を表示して、誤りが
ある場合にその訂正を行う必要がある。そこで、従来か
ら語切りの行われたそれぞれの語が区別できるような形
で、この結果を表示部に表示している。この際には、分
割されたそれぞれの語の間に、スペースを配置したり、
スラッシュ等の特別の記号を配置するといったことが行
われていた。
【0003】
【発明が解決しようとする課題】このように従来でと、
語の間に空白を設定したり、特別の記号を配置したの
で、1つの行に表示する語の数がこの分だけ減少すると
いった問題があった。特に解析結果としての語の掛かり
受け関係も同時に表示する場合には、本来1行で済むよ
うな文章が複数行にわたって表示されることになり、解
析結果を理解しにくくなるといった問題があった。ま
た、文章中にスペースやスラッシュ等の記号が存在した
場合に、これが本来的に存在するものなのか、語の区切
りのために配置されたものなのかを判別できない場合が
あり、語切りが性格に行われているかどうかの検出作業
が困難になるという問題もあった。
【0004】そこで本発明の目的は、スペースや特別の
記号を配置することなく、語と語の区切りを容易に表示
することのできる語切り表示装置を提供することにあ
る。
【0005】
【課題を解決するための手段】請求項1記載の発明で
は、日本語テキストを語に分割する形態素分割部と、隣
接している語同士で濃度が異なるように、分割された語
ごとにそれらの表示濃度を設定する表示濃度設定部と、
それぞれの語を設定された表示濃度で表示する表示部と
を語切り表示装置に具備させる。
【0006】すなわち請求項1記載の発明では、隣接す
る2つの語の表示濃度が異なるようにこれらの表示濃度
を設定し、語単位で表示濃度を異ならせてディスプレイ
装置等に表示することにして、スペースや特殊な記号の
配置を不要とし、前記した目的を達成する。
【0007】請求項2記載の発明では、日本語テキスト
を語に分割する形態素分割部と、隣接している語同士で
色彩が異なるように、分割された語ごとにそれらの表示
される色彩を設定する色彩設定部と、それぞれの語を設
定された色彩で表示する表示部とを語切り表示装置に具
備させる。
【0008】すなわち請求項2記載の発明では、隣接す
る2つの語の表示される色彩が異なるようにこれらの色
彩を設定し、語単位で色彩を異ならせてカラーディスプ
レイ装置等に表示することにして、スペースや特殊な記
号の配置を不要とし、前記した目的を達成する。
【0009】請求項3記載の発明では、請求項1または
請求項2記載の語切り表示装置で、語の隣接のしやすさ
に応じて表示濃度あるいは色彩を割り当てるようにして
いる。
【0010】
【実施例】以下実施例につき本発明を詳細に説明する。
【0011】図1は本実施例の語切り表示装置の構成の
概要を表わしたものである。この語切り表示装置は、語
切りのための形態素分割部11と、記憶部12と、各語
の表示濃度を計算する表示濃度計算部13それに語切り
結果の表示を行う表示部14とから構成されている。こ
こで形態素分割部11は、入力された日本語テキストを
用いて語切りを行う。これは、例えば「PIVOT J
−E:日本語形態素分解」(昭和63年度電子通信学会
全国大会において発表)に記載されている日本語形態素
解析手段と同一のものである。
【0012】図2は、形態素分割部の具体的な構成の一
例を表わしたものである。形態素分割部11は、辞書び
きを行う辞書びき部21を備えている。辞書びき部21
は入力テキスト22を記憶する記憶部23と、辞書24
および接続コスト計算部25を接続している。接続コス
トの計算を行う接続コスト計算部25は計算のための接
続コストテーブル26と、語切りの判定を行うための判
定部27を接続している。この判定部27から接続コス
トと語切り結果とが接続コスト・語切り結果28として
出力されるようになっている。
【0013】さて、この図2に示した形態素分割部11
で、辞書びき部21は記憶部23に記憶されている入力
テキスト22と辞書24に収納されている語のマッチン
グをとり、この結果として辞書びきができた場合には、
これを接続コスト計算部25に対して出力するようにな
っている。接続コスト計算部25は、隣接する語の隣接
のしやすさを接続コストとして計算する部分である。こ
の計算のために接続コストテーブル26の参照が行われ
る。接続コストテーブル26では、実際には、語を幾つ
かのカテゴリの集合に分割し、このカテゴリ間で接続コ
ストの定義を行っている。
【0014】ところで、一般に辞書びき結果は複数の可
能性を有している。接続コスト計算部25は辞書びきさ
れた語の並びに関する接続カテゴリ間の接続コストを接
続コストテーブル26から算定し、判定部27に出力す
る。判定部27では、複数の可能性のある語切り結果に
対して、例えば一文の接続コストの総和が最小となるよ
うな語切り結果の組み合わせを選択し、前記した接続コ
スト・語切り結果28として出力することになる。
【0015】図1に戻って説明を続ける。形態素分割部
11から出力される接続コスト・語切り結果28は、記
憶部12に記憶される。すなわち、分割された各語と、
対応する隣接語間の接続コストとが記憶部12に格納さ
れる。表示濃度計算部13は、記憶部12から語とこれ
に対応した接続コストを読み出し、予め定めた規則に従
って、その語を表示装置に表示する場合の表示濃度の計
算を行う。この規則については、後に説明する。表示濃
度計算部13により計算された表示濃度レベルは、記憶
部12に入力され、各語に対応させて記憶される。
【0016】表示部14は例えばディスプレイ装置によ
って構成されており、記憶部12から形態素と該当する
表示濃度レベルとを読み出して表示するようになってい
る。表示方法としては、それぞれの語が表示されている
カラムを各語に対応する表示濃度レベルに対応させて中
間調(ハーフトーン)を用いて表示する。もちろん、デ
ィスプレイ装置がカラー表示可能な装置であれば、表示
濃度レベルに対応させた色彩で表示を行うことも可能で
ある。
【0017】次に、表示濃度計算部13の表示濃度の計
算のための規則を説明する。
【0018】図3は、接続コストの絶対値によらずに語
ごとに2レベルの表示濃度を交互に出力させるようにし
た規則の例を表わしたものである。「ジョンはメアリと
学校へ行った。」という日本語の場合、語切り結果が、
「ジョン」「は」「メアリ」「と」「学校」「へ」「行
っ」「た。」となったものとすると、表示濃度レベルと
しては、2つのレベル“v1 ”と“v2 ”が交互に割り
当てられる。そして、この場合の表示例としては、“v
1 ”と“v2 ”で背景の表示濃度を反転させたものとな
る。装置によっては語ごとに交互に文字の白黒反転を行
うようにしてもよい。
【0019】図4は、図3で説明した表示よりも更に複
雑な表示として語の隣接のしやすさに応じて表示濃度を
変えるための規則を説明するためのものである。この例
では接続コストをある範囲内で積算し、その絶対値に相
当するレベルを上記した2つの表示レベルにオフセット
として加えるようにしている。また、この例では、説明
の便宜のために、体言に連用の助詞が接続するまでを積
算の対象となる範囲としている。
【0020】一般に日本語は、“名詞+助詞、名詞+助
詞、……、述語”の並びで表現される。“名詞+助詞”
の組み合わせは隣接しやすい自然な組み合わせである。
そこで本実施例の場合、その接続コストを“5”として
いる。“連用の助詞+体言”の並びは“連用の助詞+用
言”の並びほど自然ではないが、隣接が否定されること
はない。したがって、本実施例では前者の場合に接続コ
ストとして“10”を与え、後者の場合に“5”を与え
ている。並列の助詞「と」は、通常の場合には「AとB
がある」のように名詞と名詞を接続するが、「(Aと)
Bとがある」というように連用の格助詞「が」と接続す
ることもあり、否定はされない。したがって、この場合
には接続コスとして“10”を与えている。また,“動
詞の語幹+活用語尾”のような並びは、積極的に隣接が
肯定される並びであり、この場合には接続コストとして
“0”が与えられる。
【0021】このようにして品詞とその活用(連用ある
いは連体)によって定義された接続コストを基にして、
明らかに語が切れる部分までその和を求めていく。この
積算された接続コストの和が大きくなる範囲、すなわち
隣接しにくい組み合わせに分割されている範囲に関して
は、濃度が濃く表示される。したがって、このように濃
く表示された範囲については、語切りが誤っている確率
が高いと推定することができる。そこで、このような範
囲を重点的に検査することで、機械によって行われた語
切りの誤りを検出し訂正するための効率を高めることが
可能になる。
【0022】なお、以上説明した実施例では表示濃度の
設定について重点的に説明したが、表示する色彩を同様
の観点から、例えば寒色系統の色彩から暖色系統の色彩
に順次変化させるようにしてもよい。
【0023】
【発明の効果】以上説明したように請求項1記載の発明
によれば、表示濃度設定部で、分割された語ごとにそれ
らの表示濃度が異なるように設定し、この表示濃度で表
示を行うので、語と語の間に空白や特別の記号を配置す
る必要がなく、しかもモノクロ表示の表示装置によって
も、語と語の区切りを分かりやすく表示することができ
る。
【0024】また、請求項2記載の発明によれば、色彩
設定部で、分割された語ごとにそれらの色彩が異なるよ
うに設定し、この色彩で表示を行うので、語と語の間に
空白や特別の記号を配置する必要がなく、しかも色彩を
用いるので、語と語の区切りをより分かりやすく表示す
ることができる。
【0025】更に請求項3記載の発明によれば、請求項
1または請求項2記載の語切り表示装置に、語の隣接の
しやすさに応じて表示濃度あるいは色彩を割り当てるよ
うにしたので、語切りの誤りの確率の高い部分を明示的
に表示することができ、誤りの部分の検出をより効率的
に行うことができるという効果がある。
【図面の簡単な説明】
【図1】本実施例の語切り表示装置の構成の概要を表わ
したブロック図である。
【図2】形態素分割部の具体的な構成の一例を表わした
ブロック図である。
【図3】接続コストの絶対値によらずに語ごとに2レベ
ルの表示濃度を交互に出力させるようにした規則の例を
表わした説明図である。
【図4】語の隣接のしやすさに応じて表示濃度を変える
ための規則を説明するための説明図である。
【符号の説明】
11 形態素分割部 13 表示濃度計算部 14 表示部 25 接続コスト計算部 26 接続コストテーブル 27 判定部

Claims (3)

    【特許請求の範囲】
  1. 【請求項1】 日本語テキストを語に分割する形態素分
    割部と、 隣接している語同士で濃度が異なるように、分割された
    語ごとにそれらの表示濃度を設定する表示濃度設定部
    と、 それぞれの語を設定された表示濃度で表示する表示部と
    を具備することを特徴とする語切り表示装置。
  2. 【請求項2】 日本語テキストを語に分割する形態素分
    割部と、 隣接している語同士で色彩が異なるように、分割された
    語ごとにそれらの表示される色彩を設定する色彩設定部
    と、 それぞれの語を設定された色彩で表示する表示部とを具
    備することを特徴とする語切り表示装置。
  3. 【請求項3】 語の隣接のしやすさに応じて表示濃度あ
    るいは色彩を割り当てることを特徴とする請求項1また
    は請求項2記載の語切り表示装置。
JP3187945A 1991-07-26 1991-07-26 語切り表示装置 Pending JPH0535717A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP3187945A JPH0535717A (ja) 1991-07-26 1991-07-26 語切り表示装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP3187945A JPH0535717A (ja) 1991-07-26 1991-07-26 語切り表示装置

Publications (1)

Publication Number Publication Date
JPH0535717A true JPH0535717A (ja) 1993-02-12

Family

ID=16214925

Family Applications (1)

Application Number Title Priority Date Filing Date
JP3187945A Pending JPH0535717A (ja) 1991-07-26 1991-07-26 語切り表示装置

Country Status (1)

Country Link
JP (1) JPH0535717A (ja)

Similar Documents

Publication Publication Date Title
US6047300A (en) System and method for automatically correcting a misspelled word
US7584093B2 (en) Method and system for generating spelling suggestions
JPH06215029A (ja) テキスト検索方法
US5075851A (en) System for translating a source language word with a prefix into a target language word with multiple forms
JPH0535717A (ja) 語切り表示装置
US4799191A (en) Memory saving electronic dictionary system for spell checking based on noun suffix
JP6303508B2 (ja) 文書分析装置、文書分析システム、文書分析方法およびプログラム
CN117371445A (zh) 一种信息纠错方法、装置、计算机设备和存储介质
US20200089740A1 (en) Structural patent-claim-graphic automatic displaying equipment
JP2003280903A (ja) ソースプログラム比較情報生成システム
CN120952081B (zh) 一种针对大语言模型的比特翻转攻击方法及装置
KR100328963B1 (ko) 띄어쓰기오류허용한국어형태소분석방법및그장치
JP3071745B2 (ja) 文字認識結果の後処理方法
KR940025287A (ko) 영상 처리방법 및 장치
JPH0378872A (ja) 文書の分野推定システム
JP2936426B2 (ja) 英文字認識装置
JPS60136866A (ja) 文字推定装置
JP2000285115A (ja) 文書作成装置、文書作成方法及び文書作成プログラムを記憶した記憶媒体
JPH103469A (ja) 禁則処理方法と文書処理装置
JPH02216527A (ja) ソースプログラムリスト出力方式
JP2871300B2 (ja) 機械翻訳装置
JPH05174195A (ja) 英文字認識装置
JPH07175810A (ja) 形態素解析装置
JPH0262665A (ja) 形熊素分解方式
JPS6368972A (ja) 未登録語処理方式