JP5127066B2 - ウィンドウ操作の活性度検出装置、ウィンドウ操作の活性度検出方法及びプログラム - Google Patents

Description

本発明は、ユーザがパーソナルコンピュータ上で行ったウィンドウ操作を記録するウィンドウ操作記録手段を用い、ユーザがファイル名を指定すると、この指定されたファイル名のファイルに関連する操作を検索するウィンドウ操作の活性度検出装置に関し、特に、検索結果をランキングして表示するウィンドウ操作の活性度検出装置に関する。

Ｗｅｂ閲覧を含む、パーソナルコンピュータ上で、ユーザが行った操作を記録するシステムとして、たとえば、マウス、キーボード、ウィンドウ状態、コピー、印刷等の行動履歴を収集する発明が知られている（たとえば、非特許文献１参照）。

また、蓄積された操作履歴を検索する方式として、ファイル名またはＵＲＬを入力すると、関連する操作履歴を検索するシステムが提案されている（たとえば、非特許文献２参照）。このシステムによれば、たとえば、あるＷｏｒｄファイルを作成していたときに閲覧していたＷｅｂページを検索することができる。

森田哲之、他著「Memory-Retriever：体験獲得情報を想起させる行動検索手法」情報処理学会論文誌、Vol.48, No.3, pp.1197-1208, 2007年3月 大澤亮、他著「俺デスク：ユーザ操作履歴に基づく情報想起支援ツール」情報処理学会第４７回プログラミング・シンポジウム、2006年1月

上記非特許文献１記載のシステムでは、蓄積された行動履歴をキーワードで検索する機能が提供されている。しかし、上記非特許文献１記載のシステムでは、ファイル名を指定しても、それに関連する履歴を検索することができないという問題がある。

非特許文献２記載のシステムでは、ファイル名を指定すると、参照時刻、テキスト内検索、クリップボードの利用履歴等から、関連度を算出し、関連する操作履歴を検索する機能を有している。

しかし、ファイルを開いている場合にも、キーボード操作、マウス操作を多数行い、活発に文書作成を行っている度合いを示す活性度が高い状態があり、一方、文書作成がほぼ終わり、文書内容を確認し、活性度が低い状態もある。活性度が高い時間帯近くで行われている操作を、ランクの上位に設定することが望ましいと考えられる。

また、ファイルを開いている間であっても、そのファイルと無関係なＷｅｂページを閲覧する可能性もあり、閲覧パターンから、ファイルの重要度を判定することが望ましいと考えられる。

しかし、非特許文献２で述べられているシステムでは、このような文書作成の活性度の考慮、閲覧パターンから、ファイルの重要度を判定してはいない。

つまり、上記従来例では、ウィンドウ操作を頻繁に実行しているファイルを、ユーザが容易に知ることができないという問題がある。

本発明は、ウィンドウ操作を頻繁に実行しているファイルを、ユーザが容易に知ることができるウィンドウ操作の活性度検出装置を提供することを目的とする。

本発明のウィンドウ操作の活性度検出装置は、ユーザがパーソナルコンピュータ上で複数のウィンドウを開き、ファイルの編集、Ｗｅｂ閲覧の操作を行う状況下で、１つのファイルを指定すると、指定されたファイルの関連操作を検索するウィンドウ操作の活性度検出装置において、ウィンドウがアクティブであった開始日時、終了日時、開いていたファイル名によって構成されているウィンドウ操作履歴を記録するウィンドウ操作履歴記録手段と、キーボード、マウスの操作状況に基づいて、ウィンドウ操作の活性度を算出し、時系列で記録する操作活性度算出手段と、ファイル名を指定されると、上記ウィンドウ操作履歴から、上記指定されたファイル名のファイルが開かれていた期間を抽出し、この抽出されたファイル・オープン期間を出力するファイル・オープン期間抽出手段と、指定されたファイル名のファイルがオープンされた期間に行われた、所定の期間以下に別のウィンドウで操作されたウィンドウ操作である同時実行操作を、期間ごとに１つ以上抽出する同時実行操作抽出手段と、上記同時実行操作について、近接するウィンドウ操作の操作活性度と、上記同時実行操作の持続時間と互いに隣接するウィンドウ操作の間隔時間との重なり度合いとから、上記同時実行操作の重要度のランキングを作る同時実行操作ランキング作成手段と、ファイル名を指定されると、そのファイルが開かれていた期間の同時実行操作を抽出し、操作活性度を用いてそれらの同時実行操作をランキングして出力する出力手段とを有することを特徴とする。

本発明によれば、ウィンドウ操作を頻繁に実行しているファイルを、ユーザが容易に知ることができるという効果を奏する。

本発明の実施例１であるウィンドウ操作の活性度検出装置１００を示すブロック図である。 実施例１におけるファイル・オープン期間抽出手段２０の説明図である。 抽出された同時実行操作に、重要度を付与する処理の説明図である。 同時実行操作１に対する重要度を算出する動作を示すフローチャートである。 実施例１におけるデータベース中の各テーブルの構成図の例を示す図である。 重要度ｒ_１を算出する処理を示すフローチャートである。

発明を実施するための形態は、以下の実施例である。

図１は、本発明の実施例１であるウィンドウ操作の活性度検出装置１００を示すブロック図である。

ウィンドウ操作の活性度検出装置１００において、ウィンドウがアクティブである間におけるキー入力、マウスクリックの時間当たりの頻度を得る。これがウィンドウに対する操作の活性度である。

ウィンドウ操作の活性度検出装置１００は、ウィンドウ操作履歴記録手段１０と、ウィンドウ操作履歴データベース１１と、ファイル・オープン期間抽出手段２０と、同時実行操作抽出手段３０と、マウスＭ１と、操作活性度算出手段４０と、操作活性度データベース４１と、同時実行操作ランキング作成手段５０とを有する。

ウィンドウ操作履歴記録手段１０は、ユーザがＷｅｂページ閲覧を行うと、ウィンドウ操作履歴を、ウィンドウ操作履歴データベース１１に記録する。上記ウィンドウ操作履歴は、アクティブ開始日時、アクティブ終了日時、ファイル名、またはＵＲＬによって構成されている。なお、アクティブ終了日時からアクティブ開始日時を差し引いたものが、アクティブ継続時間であり、このアクティブ継続時間を、上記ウィンドウ操作履歴として、ウィンドウ操作履歴データベース１１に格納するようにしてもよい。また、アプリケーション名を、上記ウィンドウ操作履歴として、ウィンドウ操作履歴データベース１１に格納するようにしてもよい。

ファイル・オープン期間抽出手段２０は、ファイル名またはＵＲＬが与えられると、ウィンドウ操作履歴データベース１１から、対応するファイル名またはＵＲＬのウィンドウ操作履歴を検索し、ファイル名またはＵＲＬが一致するレコード（ウィンドウ操作履歴）を抽出する。

また、ウィンドウ操作が複数回実行され、１つのウィンドウ操作と次のウィンドウ操作との間の間隔が、予め与えられた閾値Ｔよりも短ければ、上記２つのウィンドウ操作を、１つのウィンドウ操作として、統合し、ファイル・オープン期間を抽出する。

図２は、実施例１におけるファイル・オープン期間抽出手段２０の動作の説明図である。

図２において、ウィンドウ操作ＷＯ１、期間ｔ_１、ウィンドウ操作ＷＯ２、期間ｔ_２、ウィンドウ操作ＷＯ３、期間ｔ_３、ウィンドウ操作ＷＯ４が発生し、所定の閾値Ｔに対してｔ_１＜Ｔ、Ｔ＜ｔ_２、ｔ_３＜Ｔであるとする。また、ウィンドウ操作ＷＯ１、ＷＯ２、ＷＯ３において、同一のファイルについてのウィンドウ（１つ目のウィンドウ）が開かれている。期間ｔ_１、ｔ_２、ｔ_３には、１つ目のウィンドウ操作が実行されていない。また、ウィンドウ操作ＷＯ１とウィンドウ操作ＷＯ２との間の期間ｔ_１が、閾値Ｔよりも短いので、ウィンドウ操作ＷＯ１と、ＷＯ２とが、１つの新たなウィンドウ操作として統合され、ファイル・オープン期間ＦＯ１とされる。

また、ウィンドウ操作ＷＯ３とウィンドウ操作ＷＯ４との間の期間ｔ_３が、閾値Ｔよりも短いので、ウィンドウ操作ＷＯ３と、ＷＯ４とが、１つの新たなウィンドウ操作として統合され、ファイル・オープン期間ＦＯ２とされる。

なお、ウィンドウ操作ＷＯ２とウィンドウ操作ＷＯ３との間の期間ｔ_２が、閾値Ｔよりも長いので、ウィンドウ操作ＷＯ２とウィンドウ操作ＷＯ３とを統合せずに、２つのファイル・オープン期間ＦＯ１、ＦＯ２が形成される。

同時実行操作抽出手段３０は、ファイル・オープン期間の開始、終了期間内に実行された操作を、ウィンドウ操作履歴データベース１１から抽出する。

操作活性度算出手段４０は、マウスＭ１によるマウス操作を監視し、ユーザによる操作が活発に行われているかどうかを示す操作活性度を算出し、操作活性度データベース４１に格納する。なお、マウスＭ１によるマウス操作の替わりに、キーボード操作を監視し、キーボード操作が活発に行われていれば、操作活性度が高いと判断するようにしてもよいし、マウス操作とキーボード操作の両方を監視してもよい。

操作活性度を算出する場合、たとえば次の算出法が考えられる。

まず、マウス・クリックのスコア（重み）ｐ_ｍ、キーボード打鍵のスコア（重み）ｐ_ｋを事前に定める。そして、ある期間（継続時間ｔ）内に、マウス・クリック・イベントがｎ_ｍ回、キーボード打鍵イベントがｎ_ｋ回検出されたとすると、この期間の操作活性度Ａ１を、次の式（１）で求める。

Ａ１＝（ｐ_ｍ・ｎ_ｍ＋ｐ_ｋ・ｎ_ｋ）／ｔ ……式（１）
１つ目のウィンドウをアクティブにして、マウスクリックまたはキーボード打鍵し、その後に、１つ目のウィンドウをパッシブにし、２つ目のウィンドウをアクティブにして、別のアプリケーション上でマウスクリックまたはキーボード打鍵した後に、２つ目のウィンドウをパッシブにし、１つ目のウィンドウを再びアクティブにして、マウスクリックまたはキーボード打鍵する場合を考える。この場合、１つ目のウィンドウをパッシブにし、２つ目のウィンドウをアクティブにして、行った操作を、「同時実行操作」と表記する。

同時実行操作ランキング作成手段５０は、複数の上記同時実行操作について、その重要度の高いもの順にランキングする手段である。

次に、抽出された同時実行操作について、重要度を付与する処理について説明する。

図３は、抽出された同時実行操作について、重要度を付与する処理の説明図である。

図３に示す例では、ウィンドウ操作ＷＯ１、ＷＯ２、ＷＯ３、ＷＯ４を実行しているファイル・オープン期間ＦＯ３が存在している。図３の下部には、ファイル・オープン期間ＦＯ３における操作活性度Ａ１の変化を示し、ウィンドウ操作ＷＯ１、ＷＯ２、ＷＯ３、ＷＯ４のそれぞれに対応する期間の操作活性度Ａ１の平均値がａ_１、ａ_２、ａ_３、ａ_４であるとする。

このときに、同時実行操作ＳＯ１に対する重要度を、次のように算出する。

図４は、同時実行操作ＳＯ１に対する重要度を算出する動作を示すフローチャートである。

Ｓ１で、隣接するウィンドウ操作、たとえば、ウィンドウ操作ＷＯ１とウィンドウ操作ＷＯ２とを求め、図示しない記憶装置に記憶する。Ｓ２で、ウィンドウ操作ＷＯ１、ウィンドウ操作ＷＯ２の平均操作活性度ａ_１、ａ_２を求め、記憶装置に記憶する。Ｓ３で、同時実行操作ＳＯ１の継続時間ｕ_１と、ウィンドウ操作ＷＯ１とＷＯ２との間隔ｔ_１とを求め、記憶装置に記憶する。

Ｓ４で、同時実行操作ＳＯ１の重要度ｒ_１を、次の式（２）によって求め、記憶装置に記憶する。

ｒ_１＝（ａ_１＋ａ_２）×ｕ_１／ｔ_１ ……式（２）
また、同時実行操作ＳＯ２の重要度ｒ_２を、次の式（３）で求める。

ｒ_２＝（ａ_３＋ａ_４）×ｕ_２／ｔ_３ ……式（３）
重要度ｒ_１とｒ_２とを比較すると、ｒ_１＞ｒ_２であり、同時実行操作ＳＯ１の重要度が高い。つまり、平均操作活性度ａ_１、ａ_２が、平均操作活性度ａ_３、ａ_４よりも高く、また、ｕ_１／ｔ_１が、ｕ_２／ｔ_３よりも大きいので、ｒ_１＞ｒ_２であり、同時実行操作ＳＯ１の重要度が高い。つまり、同時実行操作ＳＯ１の重要度が高いことは、同時実行操作ＳＯ１の近辺におけるウィンドウ操作ＷＯ１とＷＯ２の操作活性度ａ_１とａ_２が高く、また、ウィンドウ操作の間隔を埋める割合が高いこと、すなわち、ウィンドウ操作の間隔のうちで、同時実行操作の時間が占める割合が高いことを意味する。

図５は、実施例１におけるウィンドウ操作履歴データベース１１、操作活性度データベース４１に格納されている各テーブルの構成例を示す図である。

ウィンドウ操作履歴記録手段１０は、ユーザのＰＣ操作を監視し、ウィンドウ操作が行われる毎に、ウィンドウ操作履歴テーブルＴＢ１の各フィールドにデータを記録する。

ファイル・オープン期間抽出手段２０は、ファイルが与えられると、ウィンドウ操作履歴テーブルＴＢ１から、ファイル名が与えられたファイル名と一致するものを検索し、この検出結果を、ファイル・オープン期間作業テーブルＴＢ２中のイベントＩＤ、開始日時、終了日時、継続時間、アプリ名のフィールドに書き込む。

次に、連続するイベント間で、終了日時と次のイベント開始日時との差を計算し、間隔フィールドに値を書き込む。この時点で、活性度フィールドには、値が書き込まれない。

さらに、ファイル・オープン期間作業テーブルＴＢ２の各レコードを順に辿り、間隔フィールドの値が、与えられた閾値よりも小さい場合、間隔フィールドに、同一の期間ＩＤを与える、という処理を実行し、この結果を、ファイル・オープン期間テーブルＴＢ３に書き込む。

操作活性度算出手段４０は、マウス、キーボードのイベントを監視し、この監視結果を、イベントテーブルＴＢ５に書き込む。さらに、ファイル・オープン期間作業テーブルＴＢ２の各レコードについて、開始日時と終了日時との間にあるイベントを、イベントテーブルＴＢ５から抽出し、この抽出結果に基づいて、操作活性度Ａ１を計算し、ファイル・オープン期間作業テーブルＴＢ２の活性度フィールドに書き込む。

同時実行操作抽出手段３０は、ファイル・オープン期間テーブルＴＢ３の各期間ＩＤについて、全体の開始日時、終了日時を求め、この期間内にあるイベントをウィンドウ操作履歴テーブルＴＢ１から検索し、このイベントＩＤを、同時実行操作テーブルＴＢ４に書き込む。ただし、ファイル・オープン期間テーブルＴＢ３に、既に書かれているイベントＩＤを除く。

同時実行操作ランキング作成手段５０は、各レコードのイベントについて、その直前に起きているイベントを、ウィンドウ操作履歴テーブルＴＢ１から検索し、この検索されたイベントＩＤを、隣接イベント１フィールドに書き込む。また、その直後に起きているイベントを、ウィンドウ操作履歴テーブルＴＢ１から検索し、この検索されたイベントＩＤを、隣接イベント２フィールドに書き込む。さらに、重要度のフィールドには、次の手順で、算出し、値を書き込む。

図６は、重要度ｒ_１を算出する処理を示すフローチャートである。

Ｓ１１で、ファイル・オープン期間作業テーブルＴＢ２から、隣接イベント１の活性度ａ_１を取得し、記憶装置に記憶する。Ｓ１２で、ファイル・オープン期間作業テーブルＴＢ２から、隣接イベント２の活性度ａ_２を取得し、記憶装置に記憶する。Ｓ１３で、ファイル・オープン期間作業テーブルＴＢ２から、隣接イベント１の間隔フィールドの値ｔを取得し、記憶装置に記憶する。

Ｓ１４で、対象イベントのＩＤの、ウィンドウ操作履歴テーブルＴＢ１の継続時間フィールド値ｕを取得し、記憶装置に記憶する。Ｓ１５で、重要度ｒ_１を、（ａ_１×ａ_２）×ｕ／ｔで算出する。

上記実施例によれば、着目しているウィンドウ操作の近辺で行われている操作の操作活性化度を利用し、また、ウィンドウ操作の間隔を埋める割合を利用することによって、同時実行操作のランキングをより適切に得ることができる。

ウィンドウ操作履歴記録手段１０は、所定のファイルについてのウィンドウがアクティブである間におけるキー入力操作、マウスクリック操作の時間当たりの回数と、上記所定のファイルのファイル名とによって構成されている操作履歴を取得する操作履歴取得手段の例である。

同時実行操作ランキング作成手段５０は、上記操作履歴手段が取得した操作履歴に基づいて、ファイル名毎に、操作回数または単位時間あたりの操作回数の多い順に、ランキングを作るランキング作成手段の例である。

ウィンドウ操作の活性度検出装置１００は、ユーザがパーソナルコンピュータ上で複数のウィンドウを開き、ファイルの編集、Ｗｅｂ閲覧の操作を行う状況下で、１つのファイルを指定すると、指定されたファイルの関連操作を検索するウィンドウ操作の活性度検出装置の例である。

ウィンドウ操作履歴記録手段１０は、ウィンドウがアクティブであった開始日時、終了日時、開いていたファイル名によって構成されているウィンドウ操作履歴を記録するウィンドウ操作履歴記録手段の例である。

操作活性度算出手段４０は、キーボード、マウスの操作状況に基づいて、ウィンドウ操作の活性度を、時系列で記録する操作活性度算出手段の例である。

ファイル・オープン期間抽出手段２０は、ファイル名を指定されると、上記ウィンドウ操作履歴から、上記指定されたファイル名のファイルが開かれていた期間を抽出し、この抽出されたファイル・オープン期間を出力するファイル・オープン期間抽出手段の例である。

同時実行操作抽出手段３０は、ファイルがオープンされていた期間に行われていた操作を、上記ウィンドウ操作履歴から、同時実行操作として抽出する同時実行操作抽出手段の例である。

同時実行操作ランキング作成手段５０は、上記同時実行操作について、近接するウィンドウ操作の操作活性度と、上記同時実行操作の持続時間と互いに隣接するウィンドウ操作の間隔時間との重なり度合いとから、上記同時実行操作の重要度のランキングを作る同時実行操作ランキング作成手段の例である。

図には記載されていないが、図１の同時実行操作ランキング作成手段５０の後段に出力手段が設けられている。この出力手段は、ファイル名を指定されると、そのファイルが開かれていた期間に基づいて、同時実行操作を抽出し、操作活性度を用いてそれらの同時実行操作をランキングして出力する出力手段の例である。

また、上記実施例における各手段を工程に置き換えれば、上記実施例は、ウィンドウ操作の活性度検出方法の例である。つまり、操作履歴取得工程と、ランキング作成工程とによって、ウィンドウ操作の活性度検出方法が構成されている。また、ウィンドウ操作履歴記録工程と、操作活性度算出工程と、ファイル・オープン期間抽出工程と、同時実行操作抽出工程と、同時実行操作ランキング作成工程と、出力工程とによって、ウィンドウ操作の活性度検出方法が構成されている。

また、上記実施例を、プログラムの発明として把握することができる。つまり、上記実施例は、請求項１または請求項２記載のウィンドウ操作の活性度検出装置を構成する各手段としてコンピュータを機能させるプログラムの例である。

１００…ウィンドウ操作の活性度検出装置、
１０…ウィンドウ操作履歴記録手段、
１１…ウィンドウ操作履歴データベース、
２０…ファイル・オープン期間抽出手段、
３０…同時実行操作抽出手段、
４０…操作活性度算出手段、
４１…操作活性度データベース、
５０…同時実行操作ランキング作成手段、
ｐ_ｍ…スコア（重み）、
ｐ_ｋ…キーボード打鍵のスコア（重み）、
ｎ_ｍ…マウス・クリック・イベント回数、
ｎ_ｋ…キーボード打鍵イベント回数、
ＷＯ１、ＷＯ２、ＷＯ３、ＷＯ４…ウィンドウ操作、
ａ_１、ａ_２、ａ_３、ａ_４…ウィンドウ操作ＷＯ１、ＷＯ２、ＷＯ３、ＷＯ４に対応する期間の操作活性度の平均値、
ｕ_１…同時実行操作ＳＯ１の継続時間、
ｔ_１…ウィンドウ操作ＷＯ１とＷＯ２との間隔、
ｒ_１…同時実行操作ＳＯ１の重要度、
ｒ_２…同時実行操作ＳＯ２の重要度。

Claims (3)

1. ユーザがパーソナルコンピュータ上で複数のウィンドウを開き、ファイルの編集、Ｗｅｂ閲覧の操作を行う状況下で、１つのファイルを指定すると、指定されたファイルの関連操作を検索するウィンドウ操作の活性度検出装置において、
   ウィンドウがアクティブであった開始日時、終了日時、開いていたファイル名によって構成されているウィンドウ操作履歴を記録するウィンドウ操作履歴記録手段と；
   キーボード、マウスの操作状況に基づいて、ウィンドウ操作の活性度を算出し、時系列で記録する操作活性度算出手段と；
   ファイル名を指定されると、上記ウィンドウ操作履歴から、上記指定されたファイル名のファイルが開かれていた期間を抽出し、この抽出されたファイル・オープン期間を出力するファイル・オープン期間抽出手段と；
   指定されたファイル名のファイルがオープンされた期間に行われた、所定の期間以下に別のウィンドウで操作されたウィンドウ操作である同時実行操作を、期間ごとに１つ以上抽出する同時実行操作抽出手段と；
   上記同時実行操作について、近接するウィンドウ操作の操作活性度と、上記同時実行操作の持続時間と互いに隣接するウィンドウ操作の間隔時間との重なり度合いとから、上記同時実行操作の重要度のランキングを作る同時実行操作ランキング作成手段と；
   ファイル名を指定されると、そのファイルが開かれていた期間の同時実行操作を抽出し、操作活性度を用いてそれらの同時実行操作をランキングして出力する出力手段と；
   を有することを特徴とするウィンドウ操作の活性度検出装置。
2. ユーザがパーソナルコンピュータ上で複数のウィンドウを開き、ファイルの編集、Ｗｅｂ閲覧の操作を行う状況下で、１つのファイルを指定すると、指定されたファイルの関連操作を検索するウィンドウ操作の活性度検出方法において、
   ウィンドウがアクティブであった開始日時、終了日時、開いていたファイル名によって構成されているウィンドウ操作履歴を、ウィンドウ操作履歴記録手段が記録するウィンドウ操作履歴記録工程と；
   キーボード、マウスの操作状況に基づいて、ウィンドウ操作の活性度を算出し、操作活性度算出手段が時系列で記録する操作活性度算出工程と；
   ファイル名を指定されると、上記ウィンドウ操作履歴から、上記指定されたファイル名のファイルが開かれていた期間を抽出し、この抽出されたファイル・オープン期間を、ファイル・オープン期間抽出手段が出力するファイル・オープン期間抽出工程と；
   指定されたファイル名のファイルがオープンされた期間に行われた、所定の期間以下に別のウィンドウで操作されたウィンドウ操作である同時実行操作を、期間ごとに１つ以上、同時実行操作抽出手段が抽出する同時実行操作抽出工程と；
   上記同時実行操作について、近接するウィンドウ操作の操作活性度と、上記同時実行操作の持続時間と互いに隣接するウィンドウ操作の間隔時間との重なり度合いとから、上記同時実行操作の重要度のランキングを、同時実行操作ランキング作成手段が作る同時実行操作ランキング作成工程と；
   ファイル名を指定されると、そのファイルが開かれていた期間の同時実行操作を抽出し、操作活性度を用いてそれらの同時実行操作をランキングして、出力手段が出力する出力工程と；
   を有することを特徴とするウィンドウ操作の活性度検出方法。
3. 請求項１に記載のウィンドウ操作の活性度検出装置を構成する各手段としてコンピュータを機能させるプログラム。

Images