JPS63217418A - 日本語テキストキ−ワ−ド抽出方式 - Google Patents

日本語テキストキ−ワ−ド抽出方式

Info

Publication number
JPS63217418A
JPS63217418A JP62051317A JP5131787A JPS63217418A JP S63217418 A JPS63217418 A JP S63217418A JP 62051317 A JP62051317 A JP 62051317A JP 5131787 A JP5131787 A JP 5131787A JP S63217418 A JPS63217418 A JP S63217418A
Authority
JP
Japan
Prior art keywords
text
character
character string
keyword
japanese
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP62051317A
Other languages
English (en)
Inventor
Toshihiko Kobayashi
敏彦 小林
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Corp
Original Assignee
NEC Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Corp filed Critical NEC Corp
Priority to JP62051317A priority Critical patent/JPS63217418A/ja
Publication of JPS63217418A publication Critical patent/JPS63217418A/ja
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/20Natural language analysis
    • G06F40/253Grammatical analysis; Style critique

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • General Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Artificial Intelligence (AREA)
  • Machine Translation (AREA)
  • Document Processing Apparatus (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。

Description

【発明の詳細な説明】 〔産業上の利用分野〕 本発明は日本語テキストキーワード抽出方式に関する。
〔従来の技術〕
従来、日本語テキストキーワードの抽出は、人手により
日本語テキストを通読し、人手によりそのテキストを特
徴付けるキーワードを抽出して行なわれていた。
〔発明が解決しようとする問題点〕
上述した従来の人手による日本語テキストキーワード抽
出方式では、人手によりテキストを通読し、人手により
キーワードを抽出していたため、一つのキーワードの抽
出に多くの時間を要し、またキーワードの抽出が個人個
人の判断によりがちで、複数人がたずされる場合に、均
質なキーワードが設定しにくいといった欠点がある。
〔問題点を解決するための手段〕
本発明の日本語テキストキーワード抽出方式は、日本語
の文字をコードに変換する文字・コード変換手段と、 前記文字・コード変換手段により生成された日本語テキ
ストのコード化データから、漢字、カタカナの少なくと
も一方を含む文字列を抽出する文字列抽出手段と、 前記文字列抽出手段で抽出された文字列からそのテキス
トを特徴付は得ない文字列を除外するための情報が蓄え
られている非キーワードファイルと、 対像としている日本語テキストの中で各文字列とその出
現回数を表している文字列出現日数表と、前記文字列抽
出手段で抽出された文字列から、前記非キーワードファ
イル中の情報を参照しながらそのテキストを特徴付は得
ない文字列を除外し、除外されなかった文字列に対し、
前記文字抽出手段を各日本語テキストごとに作成し、作
成された一表の中から出現回数の多いもののみをキーワ
ードとして抽出するキーワード抽出手段とを有する。
〔作用〕 日本語デキストデータをコード化するとき、文字抽出手
段が、漢字コードの範囲、カタカナコード範囲をもとに
テキスト中から漢字、カタカナの少なくとも一方を含む
文字列を抽出し、キーワード抽出手段が、その文字列が
一般にテキストを特徴付けるのに不適切であるかどうか
を非キーワードファイルの情報をもとに判断し、不適切
と判断されなかった文字列の出現回数を文字列出現日数
表をもとに求め、出現回数の多いものをそのテキストの
キーワードとする。
したがって、人手を介することなく日本語テキストデー
タのキーワードを抽出できる。
〔実施例〕
次に、本発明の実施例について図面を参照して説明する
第1図は本発明の日本語テキストキーワードの抽出方式
の一実施例を示す構成図、第2図は第1図中の非キーワ
ードファイル16の情報形式の一例を示す図、第3図、
第4図、第5図はそれぞれ第1図における文字列抽出手
段15、キーワード抽出手段18およびデータベース更
新手段19の処理を表すフローチャートである。
本実施例は、第1図に示すように、入力手段11と表示
装置12と日本語テキスト作成手段13と日本語テキス
トファイル14と文字列抽出手段15と非キーワードフ
ァイル16と文字列出現日数表17とキーワード抽出手
段18とデータベース更新手段19とキーワードベース
20から構成される。
入力手段11は、日本語テキスト作成手段13とデータ
ベース更新手段19への入力手段である。
表示装置12は、入力手段11とキーワード抽出手段1
8からの情報を表示する装置である。日本語テキスト作
成手段13は、入力手段11から入力されたテキストの
文字列情報からコード化データを生成する手段である。
日本語テキストファイル14は、日本語テキスト作成手
段13の生成したコード化テキスト情報を登録しておく
ファイルである。文字列抽出手段15は、自らが保持し
ている漢字コードの範囲、カタカナコードの範囲により
、テキストデータ゛から漢字、カタカナを含む文字列を
抽出する手段である。非キーワードファイル16は、漢
字、カタカナを含む文字列であっても、「該当、本日、
思」等キーワードとして一般にテキストを特徴付けない
ものを判断するために、テキストを特徴付は得ない漢字
・カタカナの文字列を列挙しであるファイルであり、第
2図に示すようにこれらの情報が格納されている。文字
列出現日数表17は、表1に示すように、対象としてい
る日本語テキスト中での漢字、カタカナを含む文字列と
、その出現回数とを表現している表である。
キーワード抽出手段18は、文字列抽出手段15から抽
出されたそのテキスト中の全ての漢字・カタカナからな
る文字列の内、一般にテキストを特徴付は得ないものを
非キーワードファイル16をもとにして除外し、除外す
ることにより15られた同一のキーワードの出現回数を
文字列出現回数衣17を用いて求め、出現回数の多いも
のを表示装置12に表示する。データベース更新手段1
9は、キーワード抽出手段18が表示装Ti12に表示
したキーワードの中から、利用者が一般にテキストを特
徴付けるものではないと判断し、入力装置11から人力
したキーワードを非キーワードファイル16に非キーワ
ードとして追加し、キーワードデータベース20には上
記で非キーワードとされなかったキーワードを登録する
。キーワードデータベース20には、表2に示すように
、日本語テキストファイル14の各テキストデータのテ
キスト番号とともに、キーワードが登録される。
表       2 次に、文字列抽出手段15とキーワード抽出手段18お
よびデータベース更新手段19の処理について第3図、
第4図および第5図を参照して説明する。
(1)文字列抽出手段15(第3図) まず、日本語テキスト作成手段13によりコード化され
たテキストの一文字分の入力を行い〈ステップ31)、
テキストデータが終了かどうかを判断する(ステップ3
2)。テキストデータが終了でないとき、現在調べてい
る一文字が漢字またはカタカナであるかどうかを判断す
る(ステップ33)。漢字、カタカナのいずれがであっ
たとき、もしキーワード候補の文字列を作成中であれば
、作成中の文字列の末尾に現在調べている一文字を追加
し、もし現在キーワード候補の文字列を作成中でなけれ
ば新しく一文字をキーワード候補として作成中の文字列
とし、ステップ31へ飛ぶ(ステップ34)。漢字・カ
タカナのいずれでもない場合、現在作成中の漢字、カタ
カナを含む文字列があるかどうかを判断する(ステップ
35)。現在作成中の漢字、カタカナを含む文字列があ
る場合は作成した文字列をキーワード抽出手段18の入
力となる文字列の一つとし、作成中の文字列を空とし、
ステップ31へ飛ぶ(ステップ36)。
ステップ32でテキストデータの終了と判断したとき、
処理を終了する(ステップ37)。
(2)キーワード抽出手段18(第4図)まず、文字列
抽出手段15によりテキスト中の漢字、カタカナを含む
文字列を全て抽出したあと、非キーワードファイル16
を参照し、このテキストから抽出されたすべての漢字、
カタカナの文字列について非キーワードファイル16に
ないもののみを抽出することをしくステップ41)、抽
出された文字列に対して、文字列出現回数衣17を作成
し、出現回数値を更新しくステップ42)、出現回数が
あらかじめ設定された規定の回数より多い文字列をキー
ワー゛ドとして抽出しくステップ43)、抽出されたキ
ーワードを表示装置12に表示しくステップ44)、処
理を終了する。
(3)データベース更新手段19(第5図)。
まず、キーワード抽出手段18が非キーワードファイル
16と文字出現回数衣17を参照し、キーワードの抽出
を終了したあと、キーワード抽出手段18が抽出したキ
ーワードのうち、利用者から入力手段11を通して、一
般にテキストを特徴付は得ないキーワードとして指示さ
れたキーワードを削除しくステップ51)、削除されな
かったキーワードをキーワー・ドデータベース2oに登
録しくステップ52)、ステップ51で入力手段11か
ら指定された新しくテキストを特徴付は得ない文字列を
非キーワードファイル16に追加し、(ステップ53)
、処理を終了する。
次に、本実施例の全体的な動作を具体的に説明する。
たとえば、入力手段11、表示装置12、日本語テキス
ト作成手段13、日本語テキストファイル14、文字列
抽出手段15、非キーワードファイル16、文字列出現
回数衣17、キーワード抽出手段18、データベース更
新手段19およびキーワードデータベース20をそれぞ
れキーワード、CRTモニタ、コンピュータのプログラ
ムである日本語テキスト作成システム、コンピュータの
プログラムである文字列抽出システム、磁気ディスクを
記録媒体とする非キーワードファイル、コンピュータの
主記憶の中での文字列出現回数衣、コンピュータのプロ
グラムであるキーワード抽出システム、コンピュータの
プログラムであるデータベース更新システムおよび磁気
ディスクを記憶媒体とするキーワードデータベースと−
する。
キーボードにより日本語テキストデータをテキストデー
タ番号とともに日本語テキストファイルへ登録するとき
には、日本語テキスト作成システムが入力された文字を
コードに変換する。このとき、文字列抽出システムは、
変換されたコードを人力し、F述した第3図の処理で漢
字、カタカナを含む文字列を抽出する。抽出された漢字
・カタカナを含む文字列から、キーワード抽出システム
は上述した第4図の処理により、一般にテキストを特徴
付は得ないものを除外し、同一の文字列の出現回数を、
文字列出現回数衣を作成することにより数え、出現回数
の多いものをCRTモニタに表示する。データベース更
新システムは、キーボードからの入力を基に、上述した
第5図の処理に従って、CRTモニタに表示された文字
列のうちテキストを特徴付は得ないと判断されたものを
削除し、キーワードデータベースに不適切と判断されな
かった文字列を、日本語テキストのテキスト番号ととも
に登録し、一般にテキストを特徴付は得ないと判断され
た文字列を非キーワードファイルに登録することをする
〔発明の効果〕
以上説明しように本発明は、漢字コードの範囲、カタカ
ナコードの範囲により日本語テキスト中から漢字、カタ
カナを含む文字列を抽出し、抽出された文字列からテキ
ストを特徴付は得ない文字列を非キーワードファイルを
参照することにより削除し、出現回数の多いものを、文
字列出現回数衣を利用し、キーワードとして抽出するこ
とにより、日本語テキストデータのキーワードの作成に
人手を介することなく、−iL、た抽出手法でキーワー
ドが抽出できるという効果がある。
【図面の簡単な説明】
第1図は本発明の日本語テキストキーワード抽出方式の
一実施例を示す図、第2図は第1図中の非キーワードフ
ァイル16の情報の表現形式の一例を示す図、第3図、
第4図および第5図はそれぞれ第1図における文字列抽
出手段15、キーワード抽出手段18およびデータベー
ス更新手段19の処理を表すフローチャートである。 11・・・入力手段、  12・・・表示装置、13・
・・日本語テキスト作成手段、 14・・・日本語テキストファイル、 15・・・文字列抽出手段、 16・・・非キーワードファイル、 17・・・文字列出現回数衣、 18・・・キーワード抽出手段、 19・・・データベース更新手段、 20・・・キーワードデータベース。 第4図 第5図

Claims (1)

  1. 【特許請求の範囲】 日本語の文字をコードに変換する文字・コード変換手段
    と、 前記文字・コード変換手段により生成された日本語テキ
    ストのコード化データから、漢字、カタカナの少なくと
    も一方を含む文字列を抽出する文字列抽出手段と、 前記文字列抽出手段で抽出された文字列からそのテキス
    トを特徴付け得ない文字列を除外するための情報が蓄え
    られている非キーワードファイルと、 対象としている日本語テキストの中で各文字列とその出
    現回数を表している文字列出現回数表と、前記文字列抽
    出手段で抽出された文字列から、前記非キーワードファ
    イル中の情報を参照しながらそのテキストを特徴付け得
    ない文字列を除外し、除外されなかった文字列に対し、
    前記文字列出現表を各日本語テキストごとに作成し、作
    成された表の中から出現回数の多いもののみをキーワー
    ドとして抽出するキーワード抽出手段とを有する日本語
    テキストキーワード抽出方式。
JP62051317A 1987-03-05 1987-03-05 日本語テキストキ−ワ−ド抽出方式 Pending JPS63217418A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP62051317A JPS63217418A (ja) 1987-03-05 1987-03-05 日本語テキストキ−ワ−ド抽出方式

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP62051317A JPS63217418A (ja) 1987-03-05 1987-03-05 日本語テキストキ−ワ−ド抽出方式

Publications (1)

Publication Number Publication Date
JPS63217418A true JPS63217418A (ja) 1988-09-09

Family

ID=12883538

Family Applications (1)

Application Number Title Priority Date Filing Date
JP62051317A Pending JPS63217418A (ja) 1987-03-05 1987-03-05 日本語テキストキ−ワ−ド抽出方式

Country Status (1)

Country Link
JP (1) JPS63217418A (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276616A (en) * 1989-10-16 1994-01-04 Sharp Kabushiki Kaisha Apparatus for automatically generating index
JPH09128399A (ja) * 1995-11-02 1997-05-16 Techno Res Kk 特許データベースのキーワードデータ抽出方法及びキーワードデータ抽出装置
JP2005050167A (ja) * 2003-07-29 2005-02-24 Kenpakku:Kk 禁止用語を除外した文字列の生成方法

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5276616A (en) * 1989-10-16 1994-01-04 Sharp Kabushiki Kaisha Apparatus for automatically generating index
JPH09128399A (ja) * 1995-11-02 1997-05-16 Techno Res Kk 特許データベースのキーワードデータ抽出方法及びキーワードデータ抽出装置
JP2005050167A (ja) * 2003-07-29 2005-02-24 Kenpakku:Kk 禁止用語を除外した文字列の生成方法

Similar Documents

Publication Publication Date Title
JP2783558B2 (ja) 要約生成方法および要約生成装置
US6496820B1 (en) Method and search method for structured documents
JPH09259140A (ja) 情報検索方法、情報検索装置及び情報検索プログラムを格納する媒体
Bellare et al. Learning extractors from unlabeled text using relevant databases
CN108170294B (zh) 词汇显示、字段转换方法及客户端、电子设备和计算机存储介质
CN101167075A (zh) 专有表现抽取装置、方法以及程序
JPH05324722A (ja) 文書検索方式
JP4065470B2 (ja) 情報検索装置及びその制御方法
US7240278B2 (en) Information display control apparatus and recording medium having recorded information display control program
JPH0877179A (ja) 文書索引生成装置
JP3489326B2 (ja) テーブル生成方法
JP2004361992A (ja) 関連語抽出装置、関連語抽出方法及びプログラム
JP2760524B2 (ja) 情報検索方法
JPH0232455A (ja) 項目抽出方式
JPH0664572B2 (ja) 辞書作成装置
JPS61248160A (ja) 文書情報登録方式
JP3233803B2 (ja) 難読漢字検索装置
JP2001357029A (ja) 文書作成装置
JPH05266080A (ja) 検索装置
JPH03268064A (ja) データ検索装置及びデータ検索方法
JPH0571982B2 (ja)
JP2741923B2 (ja) 辞書検索装置
JPS61182164A (ja) 中国語入力装置
JPH1153400A (ja) 構造化文書検索装置及びプログラムを記録した機械読み取り可能な記録媒体
JPS58159133A (ja) カナ漢字変換処理方式