JP2024123763A - 情報処理装置、情報処理方法および情報処理プログラム - Google Patents

情報処理装置、情報処理方法および情報処理プログラム Download PDF

Info

Publication number
JP2024123763A
JP2024123763A JP2023031419A JP2023031419A JP2024123763A JP 2024123763 A JP2024123763 A JP 2024123763A JP 2023031419 A JP2023031419 A JP 2023031419A JP 2023031419 A JP2023031419 A JP 2023031419A JP 2024123763 A JP2024123763 A JP 2024123763A
Authority
JP
Japan
Prior art keywords
character string
matrix
generated
keyword
information processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2023031419A
Other languages
English (en)
Inventor
武志 渕
Takeshi Fuchi
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
AI Samurai Inc
Original Assignee
AI Samurai Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by AI Samurai Inc filed Critical AI Samurai Inc
Priority to JP2023031419A priority Critical patent/JP2024123763A/ja
Publication of JP2024123763A publication Critical patent/JP2024123763A/ja
Pending legal-status Critical Current

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

Figure 2024123763000001
【課題】検索の事前準備のための時間を短縮する情報処理装置、情報処理方法および情報処理プログラムを提供する。
【解決手段】情報処理装置は、文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する文字列生成部と、文書が有する文章に含まれる文字が生成された文字列に含まれるか否かを示す数字列を文章毎に並べた行列を生成する行列生成部と、キーワードを取得するキーワード取得部と、取得したキーワードに含まれる文字が生成された文字列に含まれるときは要素を正値とする、文字列の大きさを有する入力ベクトルを生成する入力ベクトル生成部と、生成された入力ベクトルと生成された行列との積を演算して出力ベクトルを生成する出力ベクトル生成部と、生成した出力ベクトルの要素の正値の数を判定する判定部と、を備える。
【選択図】図6

Description

本発明は、情報処理装置、情報処理方法および情報処理プログラムに関する。
従来から、ユーザの発話又は操作等に基づいて文章を入力して対話を行う対話システムが提案されている。対話システムに用いられているものとして、入力した文章に自動応答を行うためのルールを記述するAIML(Artificial Intelligence Markup Language)が知られている。
特許文献1には、文章を入力する入力部と、前記入力部によって入力された文章と、予め設定されたマッチング用文章とのマッチングを判断するマッチング判断部と、を備え、前記マッチング用文章は、複数の文字列の単位に分割された構成となっており、当該単位の少なくとも一つは、更に複数の文字列に分割された複数の候補を含んでおり、前記マッチング判断部は、前記入力部によって入力された文章を複数の文字列の単位に分割されたものとして、マッチングを判断する、文章マッチングシステムが記載されている。
また、従来から、検索対象の全ての文書について転置インデックスを予め作成しておき、検索用語と転置インデックスとを用いて文書検索を行う検索方法が知られている。
特許文献2には、情報処理装置の抽出手段は、文書と該文書の特徴を対応付けた転置インデックスから、選択された文書の特徴を抽出し、検索手段は、前記抽出手段によって抽出された特徴のいずれかを有する文書を、前記転置インデックスによって検索し、選択手段は、前記検索手段による複数の検索結果に対応する特徴のうち、該検索結果の絞り込みの効果の高い特徴を選択し、提示手段は、前記選択手段によって選択された特徴の組み合わせを検索条件として提示する情報処理装置が記載されている。
特開2019-192195号公報 特開2016-091354号公報
しかし、特許文献1に記載の技術においては、入力した文章とマッチングを行うためのマッチング用文章を、予め用意しておく必要がある。従来のAIMLでは、入力した文章に対して適切な自動応答を行うためには、一部が異なるだけの数多くのマッチング用文章を用意しておかなければならず、検索の事前準備としてのマッチング用文章の作成に時間がかかっていた。
また、特許文献2に記載の技術においては、予め転置インデックスを記録しておく必要があり、検索の事前準備としての転置インデックスの作成に時間がかかっていた。
本発明は上記事情に鑑みてなされたものであり、検索の事前準備のための時間を短縮することを一つの目的とする。
上記の課題を解決するための一つの実施形態として、情報処理装置は、検索対象のキーワードに基づきデータベースに記憶された複数の被検索対象の文書を検索する情報処理装置であって、文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する文字列生成部と、文書が有する文章に含まれる文字が文字列生成部において生成された文字列に含まれるか否かを示す数字列を文章毎に並べた行列を生成する行列生成部と、キーワードを取得するキーワード取得部と、キーワード取得部において取得されたキーワードに含まれる文字が文字列生成部において生成された前記文字列に含まれるときは要素を正値とする、文字列の大きさを有する入力ベクトルを生成する入力ベクトル生成部と、入力ベクトル生成部で生成された入力ベクトルと行列生成部において生成された行列との積を演算して出力ベクトルを生成する出力ベクトル生成部と、出力ベクトル生成部において生成された出力ベクトルの要素の正値の数を判定する判定部と、を備える。
本発明の一つの実施形態によれば、情報処理装置は、文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成し、文書が有する文章に含まれる文字が生成された文字列に含まれるか否かを示す数字列を文章毎に並べた行列を生成し、キーワードを取得し、取得されたキーワードに含まれる文字が生成された文字列に含まれるときは要素を正値とする、文字列の大きさを有する入力ベクトルを生成し、生成された入力ベクトルと生成された行列との積を演算して出力ベクトルを生成し、生成された出力ベクトルの要素の正値の数を判定することにより、検索の事前準備のための時間を短縮することができる。
実施形態の情報処理方法における処理の概要の一例を示す図である。 実施形態の情報処理装置における第1の処理方法による検索前処理一例を示す図である。 実施形態の情報処理装置における第1の処理方法による検索処理一例を示す図である。 実施形態の情報処理装置における第2の処理方法による検索前処理一例を示す図である。 実施形態の情報処理装置における第2の処理方法による検索処理一例を示す図である。 実施形態の情報処理装置におけるソフトウェア構成の一例を示すブロック図である。 実施形態の情報処理装置におけるハードウェア構成の一例を示すブロック図である。
以下、図面を参照して本発明の一実施形態における情報処理装置、情報処理方法および情報処理プログラムについて詳細に説明する。
先ず、図1を用いて、情報処理方法の概要を説明する。図1は、実施形態の情報処理方法における処理の概要の一例を示す図である。
図1において、情報処理方法は、検索前処理S1と検索処理S2を含む。検索前処理S1は、検索処理S2が実施される前に実施される処理である。本実施例における情報処理方法は、検索前処理S1を高速化することにより、検索の事前準備のための時間を短縮することができる。
本実施形態における検索処理S2は、検索対象のキーワードに基づきデータベースに記憶された複数の被検索対象の文書を検索する処理である。検索対象のキーワードとは、実施形態の情報処理方法を利用して検索を実行する利用者によって入力されるキーワードである。キーワードは、1または複数の文字からなる文字列である。キーワードには、複数の文字の種類を含めることができる。文字の種類とは、例えば、ひらがな、漢字、英字、数字、句読点、記号、絵文字等である。
検索処理S2は、データベースに記憶された複数の文書を被検索対象として実施される。文書は、1または複数の文章から構成される。文章は、1または複数の文字から構成される。本実施形態における文章は、例えば、句点、ピリオド、またはスペース等によって区切られる文字列である。
検索前処理S1は、文字列生成処理S11、連番付与処理S12、行列生成処理S13および行列保存処理S14を含む。
文字列生成処理S11は、被検索対象の文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する処理である。ここで、図2および図3を用いて文字列生成処理S11の第1の処理方法を説明する。図2は、実施形態の情報処理装置における第1の処理方法による検索前処理S11の一例を示す図である。また、図3は、実施形態の情報処理装置における第1の処理方法による検索処理一例を示す図である。
図2において、文字列生成処理S11は、先頭文字抽出処理S111および先頭文字列生成処理S112を含む。先頭文字抽出処理S111は、文書の先頭から文字をスキャンしていき、文書において最初に出現する文字を抽出する。図2は、被検索対象の文書が、「今日は晴れていて気持ちの良い日です。昨日は全日曇りで、とても寒かったです。明日は雨の予報なので、心配です。」の3つの文章を有する場合を示す。なお、「今日は晴れていて気持ちの良い日です。」を第1文章とする。「昨日は全日曇りで、とても寒かったです。」を第2文章とする。また、「明日は雨の予報なので、心配です。」を第3文章とする。先頭文字抽出処理S111において文書において最初に出現する文字として抽出された文字を塗りつぶしで示す。先頭文字抽出処理S111において抽出された文字は、「今日は晴れてい気持ちの良です。昨日全曇り、とも寒かった明雨予報な心配」となる。
先頭文字列生成処理S112は、先頭文字抽出処理S111において抽出された文字を文字の種類毎に文字列として生成する。図2においては、文字の種類が、ひらがな、句読点および漢字の3種類である場合を例示している。先頭文字列生成処理S112において、先頭文字抽出処理S111において抽出された文字である、「今日は晴れてい気持ちの良です。昨日全曇り、とも寒かった明雨予報な心配」をひらがな、句読点および漢字の順の文字列として、「はれていちのですりともかったな、。今日晴気持良昨全曇寒明雨予報心配」の文字列が生成される。
なお、文字列生成処理S11においては、被検索対象の文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する処理として、文書の先頭からスキャンして最初に 出現する文字を文字の種類毎に 文字列として生成する処理(先頭文字抽出処理S111および先頭文字列生成処理S112)を例示した。しかし、文字列生成処理S11において生成される文字列は文字が重複しないものであればよく、上記実施例に限定されるものではない。文字列生成処理S11は、例えば、文字が出現する順序に無関係に並べられた文字列を生成するものであってもよい。
また、文字列生成処理S11は、文字の種類とは無関係に並べられた文字列を生成するものであってもよい。
また、文字列生成処理S11は、文字列は予め定められた固定の文字列(以下、「固定文字列」という。)を生成(選択)するものであってもよい。固定文字列におけるそれぞれの文字は重複しないものであれば任意の文字列を用いることができる。例えば、固定文字列は被検索対象の文書とは無関係な文字列としてもよい。この場合、固定文字列の文字は被検索対象の文書に含まれていない可能性があり、後述する判定処理においてヒットと判定されても原文の再検索において却下と判定される可能性が高くなるおそれがある。しかし、固定文字列とすることにより、被検索対象の文書が変更または追加された場合であっても文字列生成処理S11を再度行う必要がなくなり、処理の高速化が可能となる。
図1に戻り、検索前処理S1は、文字列生成処理S11を実行した後に、連番付与処理S12を実行する。連番付与処理S12は、被検索対象の文書に含まれる文字に対して文章毎に連番を付与する処理である。図2を用いて連番付与処理S12の一例を説明する。
図2において、連番付与処理S12は、第1の連番付与処理S121を含む。第1の連番付与処理S121においては、被検索対象の文書を文章ごとに分解して、それぞれの文章毎に連番を付与する。例えば、第1文章である「今日は晴れていて気持ちの良い日です。」は18文字で構成されるため、1~18の連番が付与される。同様に、第2文章である、「昨日は全日曇りで、とても寒かったです。」には、1~19の連番が付与される。また、第3文章である、「明日は雨の予報なので、心配です。」には、1~16の連番が付与される。
図1に戻り、検索前処理S1は、連番付与処理S12を実行した後に、行列生成処理S13を実行する。行列生成処理13は、文書が有する文章に含まれる文字が文字列生成処理S11において生成された文字列に含まれるか否かを示す数字列を文章毎に並べた行列を生成する処理である。図2を用いて行列生成処理S13の一例を説明する。
図2において、行列生成処理S13は、第1の行列生成処理S131を含む。第1の行列生成処理S131は、文書が有する文章に含まれる文字が先頭文字列生成処理S112において生成された文字列に含まれる正値であるか否かを示す数字列を文章毎に並べた行列(以下、「第1行列」という。)を生成する処理である。生成された文字列に含まれるか否かを示す数字列とは、生成された文字列に含まれる正値であるか、文字列に含まれない負値であるか否かを示す数字を並べたものである。図2は、当該数字列が、第1の連番付与処理S121において付与された連番を用いた数字列(以下、「第1数字列」という。)である場合を示している。
例えば、第1文章である「今日は晴れていて気持ちの良い日です。」には第1の連番付与処理S121において、上述の通り、1~18の連番が付与される。先頭文字列生成処理S112において生成された文字列「はれていちのですりともかったな。、今日晴気持良昨全曇寒明雨予報心配」の1番目の「は」の文字は第1文章の3番目に含まれるため、「は」には「3」の数字が割り当てられる。同様に、2番目の「れ」の文字は第1文章の5番目に含まれるため、「れ」には「5」の数字が割り当てられ、さらに、3番目の「て」の文字には「6」の数字が割り当てられる。一方、9番目の「り」の文字は第1文章には含まれないため、「り」には、文字列に含まれないことを示す「0」の数字が割り当てらる。この処理を先頭文字列生成処理S112において生成された文字列全てについて行うと、「3、5、6、7、11、12、16、17、0、0、0、0、0、0、0、0、18、1、2、4、9、10、13、0、0、0、0、0、0、0、0、0、0」の31個の数字からなる第1数字列が生成される。第2文章および第3文章においても同様の処理を行うことにより、第1の行列生成処理S131において、図示する3行33列の第1行列を生成することができる。
図1に戻り、検索前処理S1は、行列生成処理S13を実行した後に、行列保存処理S14を実行する。行列保存処理S14は、行列生成処理S13で生成した行列を保存する処理であり、行列の保存先は任意である。
検索前処理S1は、以上説明したように、文書が有する文章に含まれる文字が文字列生成処理S11において生成された文字列に含まれるか否かを示す数字列を文章毎に並べた行列を生成することで、転置インデックスを生成するような負荷の大きい処理を行わない。このため、検索の事前準備のための時間を短縮することが可能となる。
検索前処理S1と検索処理S2は、同期または非同期で実施することができる。検索前処理S1は短時間で実行できるため、検索処理S2と非同期して実行される場合には、検索の事前準備のための時間を短縮することが可能となる。また、検索前処理S1を検索処理S2と同期して実行される場合であっても検索処理S2の待ち時間を短くすることができる。
検索処理S2は、キーワード取得処理S21、入力ベクトル生成処理S22、出力ベクトル生成処理S23および判定処理S24を含む。キーワード取得処理S21は、利用者によって入力されたキーワードを取得する処理である。ここで、図3を用いてキーワード取得処理S21を説明する。図3は、実施形態の情報処理装置における第1の処理方法による検索処理S21の一例を示す図である。
図3において、キーワード取得処理S21は、取得処理S211を含む。取得処理S211は、キーワードとして、「良い日」が取得されたことを示している。
図1に戻り、検索処理S2は、キーワード取得処理S21を実行した後に、入力ベクトル生成処理S22を実行する。入力ベクトル生成処理S22は、キーワード取得処理S21において取得されたキーワードに含まれる文字が文字列生成処理S11において生成された文字列に含まれるときは要素を正値とする、文字列の大きさを有する入力ベクトルを生成する処理である。すなわち、入力ベクトルは、字列の大きさに応じた要素の数を有する。
入力ベクトルのそれぞれの要素は、正値または負値のいずれかの値を有する。要素が正値である場合、キーワードに含まれる文字が文字列生成処理S11において生成された文字列に含まれることを示す。一方、要素が負値である場合、キーワードに含まれる文字が文字列生成処理S11において生成された文字列に含まれないことを示す。
図3において、入力ベクトル生成処理S22は、入力ベクトル生成処理S221を含む。文字列生成処理S11において生成された文字列は、上述のように、「はれていちのですりともかったな。、今日晴気持良昨全曇寒明雨予報心配」の33文字である。このため、入力ベクトルの要素の数は33となる。文字列の1番目の「は」の文字は、キーワードである「良い日」に含まれない。このため、入力ベクトル生成処理S221において、入力ベクトルの1番目の要素は、負値であることを示す「0」とされる。同様に、文字列の2番目の「れ」の文字および3番目の「て」の文字は、「良い日」に含まれないため、入力ベクトルの2番目の要素および3番目の要素は「0」とされる。一方、文字列の4番目の「い」の文字は、「良い日」に含まれるため、入力ベクトルの4番目の要素は、正値であることを示す「1」とされる。同様に、33個の全ての要素について「1」または「0」のいずれかの値を有する入力ベクトルが生成される。その結果、入力ベクトル生成処理S221において、33個の要素を有する「000100000000000000100010000000000」の入力ベクトルが生成される。
図1に戻り、検索処理S2は、入力ベクトル生成処理S22を実行した後に、出力ベクトル生成処理S23を実行する。出力ベクトル生成処理S23は、入力ベクトル生成処理S22で生成された入力ベクトルと行列生成処理S13において生成された行列との積を演算して出力ベクトルを生成する。例えば、行列がA、入力ベクトルがxであった場合、出力ベクトルyは、y=Axで生成される。
図3において、出力ベクトル生成処理S23は、出力ベクトル生成処理S231を含む。出力ベクトル生成処理S231において、入力ベクトル生成処理S221で生成された33個の要素を有する入力ベクトルと、行列生成処理131で生成された3行33列の第1行列との積が実行される。出力ベクトル生成処理S231においては、入力ベクトルと第1行列の第1行の積、入力ベクトルと第2行の積、および入力ベクトルと第3行の積の3つの積が実行される。入力ベクトルと第1行の積は、「00001100000000000000091000000000000」と演算される。入力ベクトルと第2行の積は、「000000000000000000000000000000000」と演算される。また、入力ベクトルと第3行の積は、「000000000000000000000000000000000」と演算される。出力ベクトルは上記3つの行を有する33列のベクトルとなる。
出力ベクトル生成処理S23における上記3つの積は並列で処理することができるため処理時間を短縮することができる。例えば、出力ベクトル生成処理S231において並列処理が可能なGPU(Graphics Processing Unit)を用いた場合、3つの積は並列で処理できる。このため、出力ベクトル生成処理S231の処理時間は、逐次処理を行う場合に対して約1/3に短縮することができる。
図1に戻り、検索処理S2は、出力ベクトル生成処理S23を実行した後に、判定処理S24を実行する。判定処理S24は、出力ベクトル生成処理S23において生成された出力ベクトルの要素の正値の数を判定する処理である。判定処理S24の詳細を、図3を用いて説明する。
図3において、判定処理S24は、第1判定処理S241を含む。第1判定処理S241は、出力ベクトル生成処理S231において生成された3行33列の出力ベクトルのそれぞれの行において、要素が「0」以外の正値の数を数える。判定処理S241は、正値の数がキーワードの文字数である3個であって、かつ、出力ベクトル生成処理S231において生成された出力ベクトルの真値の順序が行列生成処理131において生成された第1行列における要素の順序である場合に、文書がキーワードにおいてヒットしたと判定する。ここで、ヒットの判定は、正値の数がキーワードの文字数である3個であって、かつ、生成された出力ベクトルの真値の順序が生成された第1行列における要素の順序である場合であるため、ヒットと判定された場合であってもキーワードが原文に含まれない場合が生じる。このため、第1判定処理S241において、ヒットと判定された場合であっても、ヒットした文章の原文がキーワードによって再検索される。再検索の結果、原文にキーワードが含まれない場合、ヒットしていないと判定(却下判定)する。すなわち、本実施例におけるヒットとは、被検索対象の文書が原文での再検索を行う対象であることを示す判定結果である。
なお、第1判定処理S241においては、生成された出力ベクトルの真値の順序が生成された第1行列における要素の順序であるか否かを判定条件としている。この出力ベクトルの真値の順序は、上述の通り、連番付与処理S121において付与された連番において生成されている。出力ベクトルの真値の順序が生成された第1行列における要素の順序であるか否かを判定条件とすることにより、これを判定条件としない場合に比べて、再検索をする前に却下判定ができる可能性が高くなるという効果を得ることができる。
出力ベクトルの第1行である「00001100000000000000091000000000000」は、正値が「11」、「9」および「10」の3つ(キーワードの文字数=3)であり、かつ「11」→「9」→「10」の順序は、行列生成処理131において生成された第1行列の「3567111216170000000018124910130000000000」における「11」→「9」→「10」の順序と同一である。したがって、第1判定処理S241においては、文書がキーワードにおいてヒットしたと判定することができる。
また、出力ベクトルの第2行である「000000000000000000000000000000000」は、正値が0(3個未満)であるため、第1判定処理S241においては、文書がキーワードにおいてヒットしていないと判定(却下判定)することができる。さらに、出力ベクトルの第3行である「000000000000000000000000000000000」は、正値が0(3個未満)であるため、文書がキーワードにおいて却下判定することができる。
上述した第1の処理方法においては、生成される行列に被検索対象の文書における文字(最初に出現する文字)の順序が記録されるため、ヒットした文書においては行列と入力ベクトルとの積により算出される出力ベクトルにもその順序が記録される。このため、正値の数と正値となった文字の順序とを判定することにより、再検索で却下判定とならない可能性の高い判定を実施することができる。
なお、本実施形態においては、キーワードから入力ベクトルを生成する場合を説明している。入力ベクトルは、キーワードの文字の順序を示すベクトル成分とキーワードの文字の有無を示すスカラー成分からなる。しかし、文書のヒットを判断するのに使用されるのは上述の通りスカラー成分のみである。したがって、入力ベクトル生成処理においは、スカラー成分のみを生成するものであってもよい。この場合、「入力ベクトル生成処理」は「入力スカラー生成処理」と読み替えることができる。
また、本実施形態において、出力ベクトルは行列と入力ベクトルの積として説明した。しかし、行列の各行は上述の通り、文字の順序を示すベクトル成分を有する。このため、行列の代わりに各行をベクトルとして、出力ベクトルを、各行のベクトルと入力ベクトルとの積において演算するようにしてもよい。
次に、図4および図5を用いて文字列生成処理S11の第2の実施方法を説明する。図4は、実施形態の情報処理装置における第2の処理方法による検索前処理S11の一例を示す図である。また、図5は、実施形態の情報処理装置における第2の処理方法による検索処理一例を示す図である。第2の処理方法は、第1の処理方法において実行される連番付与処理S12を実行しない処理方法である。
図4において、文字列生成処理S11は、先頭文字抽出処理S113および先頭文字列生成処理S114を含む。先頭文字抽出処理S113の処理は先頭文字抽出処理S111の処理と同様である。また、先頭文字列生成処理S114の処理は先頭文字列生成処理S112と同様である。このため、先頭文字抽出処理S113および先頭文字列生成処理S114の説明は省略する。
図4において、第2の行列生成処理S132は、文書が有する文章に含まれる文字が、先頭文字列生成処理S114において生成された文字列に含まれる正値であるか、または文字列に含まれない負値であるかを示す数字列を文章毎に並べた行列(以下、「第2行列」という。)を生成する処理である。図4は、当該数字列が、正値である場合「1」、負値である場合「0」を用いる場合を示している。第2行列は第1行列に含まれていた連番が含まれない。このため、行列生成処理S132で生成される行列には、先頭文字抽出処理S113で抽出された文字の順序は記録されない。
行列生成処理S132において、先頭文字列生成処理S114において生成された文字列「はれていちのですりともかったな。、今日晴気持良昨全曇寒明雨予報心配」の1番目の「は」の文字は第1文章の3番目に含まれるため、「は」には正値である「1」の数字が割り当てられる。2番目の「れ」の文字は第1文章の5番目に含まれるため、「れ」には正値である「1」の数字が割り当てられる。一方、9番目の「り」の文字は第1文章には含まれないため、「り」には、文字列に含まれないことを示す負値の「0」の数字が割り当てられる。この処理を先頭文字列生成処理S114において生成された文字列全てについて行うと、「1、1、1、1、1、1、1、1、0、0、0、0、0、0、0、0、1、1、1、1、1、1、1、0、0、0、0、0、0、0、0、0、0」の31個の数字からなる第2数字列が生成される。第2の行列生成処理S132においては、第2文章および第3文章においても同様の処理を行うことにより、図示する3行33列の第1行列を生成することができる。
図5において、取得処理S212は、取得処理S211と同様であり、入力ベクトル生成処理S222は、入力ベクトル生成処理S221と同様である。このため、取得処理S212および入力ベクトル生成処理S222の説明は省略する。
図5において、出力ベクトル生成処理S23は、出力ベクトル生成処理S232を含む。出力ベクトル生成処理S232において、行列生成処理132で生成された3行33列の第1行列と、入力ベクトル生成処理S222で生成された33個の要素を有する入力ベクトルとの積が実行される。出力ベクトル生成処理S232においては、第2行列の第1行と入力ベクトルとの積、第2行と入力ベクトルとの積、および第3行と入力ベクトルとの積の3つの積が実行される。第1行と入力ベクトルとの積は、「00001100000000000000091000000000000」と演算される。第2行と入力ベクトルとの積は、「000000000000000000000000000000000」と演算される。また、第3行と入力ベクトルとの積は、「000000000000000000000000000000000」と演算される。出力ベクトルは上記3つの行を有する3行33列のベクトルとなる。
判定処理S24は、第1判定処理S242を含む。第2判定処理S242は、出力ベクトル生成処理S232において生成された3行33列の出力ベクトルのそれぞれの行において、要素が「1」の正値の数を数える。判定処理S242は、正値の数が3個である場合、文書がキーワードにおいてヒットしたと判定する。一方、判定処理S242は、正値の数が3個未満である場合、文書がキーワードにおいてヒットしていないと判定(却下判定)する。
第2の処理方法においては、上述の通り、生成される行列に被検索対象の文書における文字(最初に出現する文字)の順序を記録しないため、ヒットした文書においては行列と入力ベクトルとの積により算出される出力ベクトルにもその順序が記録されない。このため、第2の処理方法においては、第1の処理方法に比べて、再検索により却下判定となる可能性が高くなる。しかし、第2の処理方法においては、第1の処理方法で実行される連番付与処理を省略できるため、検索前処理S1の負荷がさらに軽減される。
以上説明した情報処理方法は、以下に説明する情報処理装置において実行することができる。図6を用いて、情報処理装置のソフトウェア構成を説明する。図6は、実施形態の情報処理装置におけるソフトウェア構成の一例を示すブロック図である。
図6において、情報処理装置1は、ネットワーク9を介して、文書データベース2および利用者端末3と通信可能に接続されている。文書データベース2は、被検索対象の文書を複数記憶することができる。文書データベースに記憶された文書は、複数の文章を有する文書であって、例えば特許文献である。利用者端末3は、情報処理装置1を利用する利用者が操作する端末である。利用者端末3は検索アプリ31を有する。検索アプリ31は、情報処理装置1を介して文書データベース2に記憶された文書を検索するアプリであって、上述した検索処理S2の処理を情報処理装置1に実行させる。検索アプリ31は、検索処理2の処理を専用に行うアプリであってもよく、また、Webブラウザ等の汎用のアプリであってもよい。ネットワーク9は、有線または無線を介したネットワークであり、例えばインターネットである。
なお、図6は情報処理装置1の接続先を例示するものであり、情報処理装置1の接続先を限定するものではない。例えば、情報処理装置1は、複数の文書データベース2または複数の利用者端末3と接続されるものであってもよい。また、図6は、情報処理装置1と文書データベース2とがネットワーク9を介して接続される場合を示したが、情報処理装置1と文書データベース2は、ネットワーク9を介さない一体の装置またはシステムにおいて構成されるものであってもよい。
情報処理装置1は、文字列生成部11、連番付与部12、行列生成部13、キーワード取得部14、入力ベクトル生成部15、出力ベクトル生成部16、判定部17および行列保存部18を有する。なお、情報処理装置1は、図1等において説明した情報処理方法を実行する装置である。情報処理装置1における、文字列生成部11、連番付与部12、行列生成部13、キーワード取得部14、入力ベクトル生成部15、出力ベクトル生成部16、判定部17および行列保存部18は、本実施形態における情報処理を実行するための情報処理プログラム(ソフトウェア)によって実現される機能モジュールであるものとして説明する。
文字列生成部11は、データベースに記憶された複数の被検索対象の文書に含まれる文字をこの文書の先頭からスキャンして最初に出現する文字を文字の種類毎に文字列として生成する。文字列生成部11は、図1において説明した文字列生成処理S11を実行する。
連番付与部12は、データベースに記憶された複数の被検索対象の文書に含まれる文字に対して文章毎に連番を付与する。連番付与部12は、図1において説明した連番付与処理S12を実行する。
行列生成部13は、データベースに記憶された複数の被検索対象の文書が有する文章に含まれる文字が文字列生成部11において生成された文字列に含まれるか否かを示す数字列を被検索対象の文書が有する文章毎に並べた行列を生成する。行列生成部13は、図1において説明した行列生成処理S13を実行する。
キーワード取得部14は、検索対象のキーワードを取得する。キーワード取得部14は、図1において説明したキーワード取得処理S21を実行する。
入力ベクトル生成部15は、キーワード取得部14において取得されたキーワードに含まれる文字が文字列生成部11において生成された文字列に含まれるときは要素を真値とする、文字列の大きさを有する入力ベクトルを生成する。入力ベクトル生成部15は、図1において説明した入力ベクトル生成処理S22を実行する。
出力ベクトル生成部16は、入力ベクトル生成部15で生成された入力ベクトルと行列生成部13において生成された行列との積を演算して出力ベクトルを生成する。出力ベクトル生成部16は、図1において説明した出力ベクトル生成処理S23を実行する。
判定部17は、出力ベクトル生成部16において生成された出力ベクトルの要素の真値の数を判定する。判定部17は、図1において説明した判定処理S24を実行する。
行列保存部18は、行列生成部13において生成された行列を保存する。行列保存部18は、図1において説明した行列保存S14を実行する。
なお、情報処理装置1が有する上述の各機能部は、情報処理装置1の機能部の一例を示したものであり、情報処理装置1が有する機能を限定したものではない。例えば、情報処理装置1は、上記全ての機能部を有している必要はなく、一部の機能部を有するものであってもよい。また、情報処理装置1は、上記以外の他の機能を有するものであってもよい。例えば、情報処理装置1は、情報を入力するために入力機能、情報を表示するための表示機能、装置の稼働状態を報知する報知機能等を有していてもよい。
また、情報処理装置1が有する上記各機能部は、上述の通り、ソフトウェアによって実現されるものとして説明した。しかし、情報処理装置1が有する上記機能部の中で少なくとも1つ以上の機能部は、ハードウェアによって実現されるものであってもよい。
また、情報処理装置1が有する上記何れかの機能部は、1つの機能部を複数の機能部に分割して実施してもよい。また、情報処理装置1が有する上記何れか2つ以上の機能部を1つの機能部に集約して実施してもよい。情報処理装置1は、情報処理装置1が有するそれぞれの機能をそれぞれの機能ブロックで表現したものであり、プログラムファイル数等の物理的な構成を限定するものではない。例えば、各機能部がそれぞれ別個のプログラムファイル等で構成されていてもよく、また複数の機能部が1つのプログラムファイル等で構成されていてもよい。
また、情報処理装置1は、1つの筐体によって実現される装置であっても、ネットワーク等を介して接続された複数の装置から実現されるシステムであってもよい。例えば、情報処理装置1は、その機能の一部または全部をクラウドコンピューティングシステムによって提供されるクラウドサービス等、他の仮想的な装置によって実現するものであってもよい。また、情報処理装置1は、上記各機能部のうち、少なくとも1以上の機能部を他の装置において実現するようにしてもよい。また、情報処理装置1は、デスクトップPC等の汎用的なコンピュータであってもよく、機能が限定された専用の装置であってもよい。
次に、図7を用いて、情報処理装置1のハードウェア構成を説明する。図7は、実施形態における情報処理装置1のハードウェア構成の一例を示すブロック図である。
情報処理装置1は、CPU(Central Processing Unit)101、RAM(Random Access Memory)102、ROM(Read Only Memory)103、I/O機器104、および通信I/F(Interface)105を有する。情報処理装置1は、図1で説明した情報処理プログラムを実行する装置である。
CPU101は、RAM102またはROM103に記憶された情報処理プログラムを実行することにより、情報処理装置1の制御を行う。情報処理プログラムは、例えば、プログラムを記録した記録媒体、又はネットワークを介したプログラム配信サーバ等から取得されて、ROM103にインストールされ、CPU101から読出されて実行される。
I/O機器104は、操作入力機能と表示機能(操作表示機能)を有する。I/O機器104は、例えばタッチパネルである。タッチパネルは、情報処理装置1の利用者に対して指先又はタッチペン等を用いた操作入力を可能にする。本実施形態におけるI/O機器104は、操作表示機能を有するタッチパネルを用いることができるが、I/O機器104は、表示機能を有する表示装置と操作入力機能を有する操作入力装置とを別個有するものであってもよい。その場合、タッチパネルの表示画面は表示装置の表示画面、タッチパネルの操作は操作入力装置の操作として実施することができる。なお、I/O機器104は、ヘッドマウント型、メガネ型、腕時計型のディスプレイ等の種々の形態によって実現されてもよい。
通信I/F105は、通信用のI/Fである。通信I/F105は、例えば、無線LAN、有線LAN、赤外線等の近距離無線通信を実行する。図は通信用のI/Fとして通信I/F105のみを図示するが、情報処理装置1は複数の通信方式においてそれぞれの通信用のI/Fを有するものであってもよい。
なお、本実施形態で説明した装置を構成する機能を実現するためのプログラムを、コンピュータ読み取り可能な記録媒体に記録して、当該記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、本実施形態の上述した種々の処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものであってもよい。また、「コンピュータシステム」は、WWWシステムを利用している場合であれば、ホームページ提供環境(あるいは表示環境)も含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、フラッシュメモリ等の書き込み可能な不揮発性メモリ、CD-ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ(例えばDRAM(Dynamic Random Access Memory))のように、一定時間プログラムを保持しているものも含むものとする。また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組合せで実現するもの、いわゆる差分ファイル(差分プログラム)であっても良い。
以上、本発明の実施形態について、図面を参照して説明してきたが、具体的な構成はこの実施形態に限定されるものではなく、本発明の趣旨を逸脱しない範囲においての種々の変更も含まれる。
1 情報処理装置
11 文字列生成部
12 連番付与部
13 行列生成部
14 キーワード取得部
15 入力ベクトル生成部
16 出力ベクトル生成部
17 判定部
18 行列保存部
2 文書データベース
3 利用者端末
31 検索アプリ
9 ネットワーク
101 CPU
102 RAM
103 ROM
104 I/O機器
105 通信I/F

Claims (6)

  1. 検索対象のキーワードに基づきデータベースに記憶された複数の被検索対象の文書を検索する情報処理装置であって、
    前記文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する文字列生成部と、
    前記文書が有する文章に含まれる文字が前記文字列生成部において生成された前記文字列に含まれるか否かを示す数字列を前記文章毎に並べた行列を生成する行列生成部と、
    前記キーワードを取得するキーワード取得部と、
    前記キーワード取得部において取得された前記キーワードに含まれる文字が前記文字列生成部において生成された前記文字列に含まれるときは要素を真値とする、前記文字列の大きさを有する入力ベクトルを生成する入力ベクトル生成部と、
    前記入力ベクトル生成部で生成された前記入力ベクトルと前記行列生成部において生成された前記行列との積を演算して出力ベクトルを生成する出力ベクトル生成部と、
    前記出力ベクトル生成部において生成された前記出力ベクトルの要素の真値の数を判定する判定部と
    を備える情報処理装置。
  2. 前記文書に含まれる文字に対して文章毎に連番を付与する連番付与部をさらに備え、
    前記行列生成部は、前記行列を、前記連番付与部において付与された前記連番を用いた前記数字列を前記文章毎に並べて生成する、請求項1に記載の情報処理装置。
  3. 前記判定部は、前記真値の数が前記キーワードの文字数であって、かつ、前記真値の順序が前記行列生成部において生成された前記行列における要素の順である場合に、前記文書が前記キーワードにおいてヒットしたと判定する、請求項2に記載の情報処理装置。
  4. 前記判定部は、前記真値の数が前記キーワードの文字数である場合、前記文書の全文を前記キーワードにおける再検索の対象として判定する、請求項1または2に記載の情報処理装置。
  5. コンピュータが、
    検索対象のキーワードに基づきデータベースに記憶された複数の被検索対象の文書を検索する情報処理方法であって、
    前記文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する文字列生成ステップと、
    前記文書が有する文章に含まれる文字が前記文字列生成ステップにおいて生成された前記文字列に含まれるか否かを示す数字列を前記文章毎に並べた行列を生成する行列生成ステップと、
    前記キーワードを取得するキーワード取得ステップと、
    前記キーワード取得ステップにおいて取得された前記キーワードに含まれる文字が前記文字列生成ステップにおいて生成された前記文字列に含まれるときは要素を真値とする、前記文字列の大きさを有する入力ベクトルを生成する入力ベクトル生成ステップと、
    前記入力ベクトル生成ステップで生成された前記入力ベクトルと前記行列生成ステップにおいて生成された前記行列との積を演算して出力ベクトルを生成する出力ベクトル生成ステップと、
    前記出力ベクトル生成ステップにおいて生成された前記出力ベクトルの要素の真値の数を判定する判定ステップと
    を実行する情報処理方法。
  6. コンピュータに、
    検索対象のキーワードに基づきデータベースに記憶された複数の被検索対象の文書を検索させる情報処理プログラムであって、
    前記文書に含まれる文字をスキャンして出現する文字が重複しない文字列を生成する文字列生成機能と、
    前記文書が有する文章に含まれる文字が前記文字列生成機能において生成された前記文字列に含まれるか否かを示す数字列を前記文章毎に並べた行列を生成する行列生成機能と、
    前記キーワードを取得するキーワード取得機能と、
    前記キーワード取得機能において取得された前記キーワードに含まれる文字が前記文字列生成機能において生成された前記文字列に含まれるときは要素を真値とする、前記文字列の大きさを有する入力ベクトルを生成する入力ベクトル生成機能と、
    前記入力ベクトル生成機能で生成された前記入力ベクトルと前記行列生成機能において生成された前記行列との積を演算して出力ベクトルを生成する出力ベクトル生成機能と、
    前記出力ベクトル生成機能において生成された前記出力ベクトルの要素の真値の数を判定する判定機能と
    を実現させる情報処理プログラム。
JP2023031419A 2023-03-01 2023-03-01 情報処理装置、情報処理方法および情報処理プログラム Pending JP2024123763A (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2023031419A JP2024123763A (ja) 2023-03-01 2023-03-01 情報処理装置、情報処理方法および情報処理プログラム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2023031419A JP2024123763A (ja) 2023-03-01 2023-03-01 情報処理装置、情報処理方法および情報処理プログラム

Publications (1)

Publication Number Publication Date
JP2024123763A true JP2024123763A (ja) 2024-09-12

Family

ID=92676402

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023031419A Pending JP2024123763A (ja) 2023-03-01 2023-03-01 情報処理装置、情報処理方法および情報処理プログラム

Country Status (1)

Country Link
JP (1) JP2024123763A (ja)

Similar Documents

Publication Publication Date Title
US11210468B2 (en) System and method for comparing plurality of documents
US11106873B2 (en) Context-based translation retrieval via multilingual space
JP6691280B1 (ja) 管理システム及び管理方法
KR102090237B1 (ko) 시맨틱 트리플 기반의 지식 확장 시스템, 방법 및 컴퓨터 프로그램
US20050027704A1 (en) Method and system for assessing relevant properties of work contexts for use by information services
JP5710581B2 (ja) 質問応答装置、方法、及びプログラム
JPWO2007099812A1 (ja) 質問回答装置、質問回答方法および質問回答用プログラム
JP6346367B1 (ja) 類似性指標値算出装置、類似検索装置および類似性指標値算出用プログラム
JP4160548B2 (ja) 文書要約作成システム、方法、及びプログラム
CN111143400A (zh) 一种全栈式检索方法、系统、引擎及电子设备
Costello et al. Patapasco: a Python framework for cross-language information retrieval experiments
JP2016110256A (ja) 情報処理装置及び情報処理プログラム
JP4711761B2 (ja) データ検索装置、データ検索方法、データ検索プログラムおよびコンピュータに読み取り可能な記録媒体
US20140358522A1 (en) Information search apparatus and information search method
JP7566387B1 (ja) 情報処理装置、方法、及びプログラム
JP2024123763A (ja) 情報処理装置、情報処理方法および情報処理プログラム
JP2011248827A (ja) 言語横断型情報検索方法、言語横断型情報検索システム及び言語横断型情報検索プログラム
CN111931034A (zh) 数据搜索方法、装置、设备及存储介质
KR20190013907A (ko) 정보 처리 시스템 및 방법, 및 프로그램
CN110688559A (zh) 一种检索方法及装置
JP5368900B2 (ja) 情報提示装置、情報提示方法およびプログラム
JP2004227037A (ja) フィールドマッチング装置とそのプログラム、コンピュータ読み取り可能な記録媒体、及び同一フィールド判定方法
JP6976537B1 (ja) 情報検索装置、情報検索方法および情報検索用プログラム
CN115827829A (zh) 一种基于本体的搜索意图优化方法及系统
JP5998779B2 (ja) 検索装置、検索方法、及びプログラム