JP2017517775A - データストリームのカスタムパーティション - Google Patents

データストリームのカスタムパーティション Download PDF

Info

Publication number
JP2017517775A
JP2017517775A JP2016521684A JP2016521684A JP2017517775A JP 2017517775 A JP2017517775 A JP 2017517775A JP 2016521684 A JP2016521684 A JP 2016521684A JP 2016521684 A JP2016521684 A JP 2016521684A JP 2017517775 A JP2017517775 A JP 2017517775A
Authority
JP
Japan
Prior art keywords
query
event
data stream
user
code
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2016521684A
Other languages
English (en)
Other versions
JP6539647B2 (ja
JP2017517775A5 (ja
Inventor
アルベス,アレクサンダー
ビシュノイ,サンディープ
Original Assignee
オラクル・インターナショナル・コーポレイション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オラクル・インターナショナル・コーポレイション filed Critical オラクル・インターナショナル・コーポレイション
Publication of JP2017517775A publication Critical patent/JP2017517775A/ja
Publication of JP2017517775A5 publication Critical patent/JP2017517775A5/ja
Application granted granted Critical
Publication of JP6539647B2 publication Critical patent/JP6539647B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2453Query optimisation
    • G06F16/24534Query rewriting; Transformation
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2455Query execution
    • G06F16/24568Data stream processing; Continuous queries
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24Querying
    • G06F16/245Query processing
    • G06F16/2457Query processing with adaptation to user needs
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/90Details of database functions independent of the retrieved data types
    • G06F16/903Querying

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

データストリームをパーティションするための技術が提供される。一部の例において、データストリームの少なくとも一部分を処理するためのクエリが識別され得る。データストリームは、ユーザーに関連付けられ得る。加えて、一部の例において、識別されたストリームの属性を識別するコードが受信され得る。コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり得る。さらに、一部の局面において、コードは属性に少なくとも部分的に基づいてデータストリームを少なくともサブストリームにパーティションするように構成され得る。

Description

関連する出願への相互参照
本願は、「CUSTOM PARTITIONING OF DATA STREAM」と題された2014年6月11日付け米国仮特許出願番号第14/302,031号、代理人番号88325-904541-152300USの利益および優先権を主張する。その全内容は、完全に本明細書に記載されるように引用によって援用される。
背景
イベント処理アプリケーションは、多くの異種のソースからの極めて大量のストリーミングデータを処理するように構成されることができる。一部の場合において、ストリーミングデータは、複数の異なる属性に関連付けられ得る。たとえば、企業のアクセスネットワークコンテンツに関連付けられるカスタマーデータのストリームは、インターネットプロトコル(IP)アドレスおよび/またはカスタマーに関連付けられる地理的な位置情報を含み得る。多くの場合、データストリームは非常に高速で受信され、ほぼ管理不可能な量の情報を含む。多様な入力ストリームおよびデータパラメータ、ならびに受信される情報の速度および量のさらなる増大により、そのようなデータストリームを管理することが負担となる可能性がある。したがって、データストリームをカスタムパーティションするための解決策を提供する必要性がある。
詳細な説明が、添付の図面を参照して述べられる。図面において、参照番号の最も左の数字は、参照番号が最初に表われる図面を識別する。異なる図面において同じ参照番号が使用される場合、それは同様もしくは同一の要素を示す。
少なくとも1つの例に従う、本明細書において記載されるデータストリームのカスタムパーティションを管理するためのアーキテクチャ例を例示する簡易化されたブロック図である。 少なくとも1つの例に従う、本明細書において記載されるデータの連続ストリームを扱うことが可能なイベント処理エンジンの少なくとも一部の特徴を例示する簡易化されたブロック図である。 少なくとも1つの例に従う、本明細書において記載されるデータストリームのカスタムパーティションを実施するように構成されるカスタムコンフィギュレーションサービスの少なくとも一部の特徴を例示する簡易化されたブロック図である。 少なくとも1つの例に従う、本明細書において記載されるデータストリームのカスタムパーティションのための少なくとも一部の技術を例示する簡易化されたフロー図である。 少なくとも1つの例に従う、本明細書において記載されるデータストリームのカスタムパーティションを実施するためのうち少なくとも1つのプロセスを例示する簡易化されたフロー図である。 少なくとも1つの例に従う、本明細書において記載されるデータストリームのカスタムパーティションを実施するためのうち少なくとも1つのプロセスを例示する簡易化されたフロー図である。 少なくとも1つの例に従う、本明細書において記載される例のうちの一部を実現するための分散型システムの簡易化された図である。 少なくとも1つの例に従う、本明細書において記載される例のうちの一部に係る、実施形態のシステムのコンポーネントによって提供されるサービスがクラウドサービスとして提示され得るシステム環境のコンポーネントの簡易化されたブロック図である。 少なくとも1つの例に従う、本明細書において記載される例のうちの一部に係る、本開示の様々な実施形態が実施され得る典型的なコンピューターシステムを例示する図である。 少なくとも1つの例に従うシステムのブロック図を例示する図である。 少なくとも1つの例に従うシステムのブロック図を例示する図である。 少なくとも1つの例に従うコンピューター実装システムのブロック図を例示する図である。
概要
以下の説明において、様々な実施形態が記載される。説明を目的として、実施形態についての完全な理解を提供するために、具体的な構成および詳細が述べられる。しかしながら、具体的な詳細がなくとも実施形態が実施され得ることは当業者にとって明らかである。さらにまた、周知の特徴は、記載される実施形態を不明瞭にしないために、省略もしくは簡易化され得る。
一実施形態によれば、システムはメモリーおよびプロセッサーによって構成され得る。プロセッサーは、メモリー上に記憶された命令を実行して、ユーザーに関連付けられるデータストリームを識別するように構成され得る。プロセッサーは、識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信し、識別されたデータストリームの属性を識別するコードをユーザーから受信するための命令を実行するようにも構成され得て、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能である。一部の局面において、プロセスは、コンピューターシステムによってコードをクエリに関連付け、コードがクエリに関連付けられた後、属性に少なくとも部分的に基づいてデータストリームをパーティションするようにクエリを構成するための命令を実行するように構成され得る。命令は、属性に少なくとも部分的に基づいてデータストリームを複数の部分にパーティションし、複数の部分のうちの少なくとも1つのためのサブストリームをクエリに提供し、提供されたサブストリームに少なくとも部分的に基づいてクエリの結果を提供するようにも実行され得る。
一部の例において、コードは、ユーザーに提供されるコントラクトに少なくとも部分的に基づくオブジェクト指向のクラスを含み、クエリを構成することは、オブジェクト指向のクラスにクエリを結び付けることを含む。命令は、クエリに少なくとも部分的に基づいてデータストリームのイベントを受信し、イベントをオブジェクト指向のクラスに提供し、オブジェクト指向のクラスからの出力を受信するようにも実行され得る。データストリームは、オブジェクト指向のクラスからの出力に少なくとも部分的に基づいてパーティションされ得る。属性は、ユーザーのカスタマーのコンピューティングデバイスの第1の識別子、ユーザーに関連付けられる項目の第2の識別子、または当該項目に関連付けられる項目属性の第3の識別子のうち少なくとも1つを含み得る。カスタマーのコンピューティングデバイスの識別子は、カスタマーのコンピューティングデバイスのインターネットプロトコルアドレス、またはカスタマーのコンピューティングデバイスが位置する地理的領域を示し得る。
別の実施形態によれば、コンピューター読取可能媒体は、実行されると、ユーザーに関連付けられるデータストリームの少なくとも一部分を処理するためのクエリを識別するようにコンピュータープロセッサーを構成する命令を含み得る。命令はさらに、識別されたデータストリームの属性を識別するコードをユーザーから受信するようにプロセッサーを構成し得て、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能である。命令は、属性に少なくとも部分的に基づいてデータストリームの1つ以上のサブストリームを処理するようにクエリを構成するようにもプロセッサーを構成し得る。
一部の例において、複数の命令はさらに、1つ以上のサブストリームの複数を並行して1つ以上のプロセッサーに処理させる命令を含み得る。コードは、ユーザーに提供されたJava(登録商標)コントラクトに少なくとも部分的に基づくjavaクラスを含み得る。複数の命令はさらに、1つ以上のプロセッサーにクエリに少なくとも部分的に基づいてデータストリームのイベントを受信させ、javaクラスにイベントを提供させる命令を含み得る。複数の命令はさらに、1つ以上のプロセッサーにjavaクラスを実施させて、属性に少なくとも部分的に基づいてイベントを処理させ、かつjavaクラスからの出力を受信させる命令を含み得る。一部の例において、javaクラスからの出力は1つ以上のサブストリームのうちの少なくとも1つであり得る。属性は、コードの受信に先立ってユーザーによって特定され得る。一部の例において、1つ以上のサブストリームのうちの少なくとも1つのサブストリームは、データストリームの少なくとも一部分に対して行なわれるハッシュ関数に少なくとも部分的に基づいて生成され得る。
別の実施形態によれば、方法はコンピューターシステムによって実行されて、少なくともユーザーに関連付けられるデータストリームをコンピューティングシステムによって識別し得る。方法は、識別されたデータストリームの少なくとも一部分を処理するためのクエリも受信し得る。方法は、識別されたデータストリームの属性を識別するコードもユーザーから受信し得て、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能である。方法はまた、属性に少なくとも部分的に基づいてデータストリームを少なくとも1つのサブストリームにパーティションし、受信されたクエリを用いて少なくとも1つのサブストリームを処理するようにコードを構成し得る。
一部の場合において、方法はまた、コードをクエリに関連付け得る。少なくとも1つのサブストリームは、コードから出力として受信された少なくとも第2のサブストリームと並行して、受信されたクエリを用いて処理され得る。方法はまた、クエリに少なくとも部分的に基づいてデータストリームのイベントを受信し、受信されたコードに対応するjavaクラスにイベントを提供し得る。一部のインスタンスにおいて、方法は、属性に少なくとも部分的に基づいてイベントを処理し、少なくとも1つのサブストリームを識別するjavaクラスからの出力を受信するようにjavaクラスを実施し得る。データストリームは、javaクラスに少なくとも部分的に基づいてパーティションされ得る。サブストリームは、複数の部分のうち少なくとも1つに対して行なわれるハッシュ関数に少なくとも部分的に基づいて生成され得る。加えて、属性は、ユーザーのカスタマーに関連付けられるインターネットプロトコルアドレス、またはユーザーのカスタマーに関連付けられる地理的領域のうち少なくとも一方を含み得る。
上記は、他の特徴および実施形態と共に、以下の明細書、請求項および添付の図面を参照することでより明らかにとなる。
詳細な説明
以下の説明において、様々な実施形態が記載される。説明を目的として、実施形態についての完全な理解を提供するために、具体的な構成および詳細が述べられる。しかしながら、具体的な詳細がなくとも実施形態が実施され得ることは当業者にとって明らかである。さらにまた、周知の特徴は、記載される実施形態を不明瞭にしないために、省略もしくは簡易化され得る。
本開示の実施形態は、とりわけ、ストリーミングデータをパーティションするためのカスタム(たとえばカスタマイズ可能な)メカニズムを提供することに向けられている。一部の例において、このカスタムメカニズムは、イベント処理および/またはビジネスインテリジェンスフレームワーク内に設けられ得る。たとえば、イベント処理フレームワークは1つ以上のソース(たとえば第三者ストリーミングソース等)からのストリーミングデータを処理し、1つ以上のフォーマットで(たとえばストリームおよび/または1つ以上のサブストリームとして)データを管理し、記憶し、かつ/または出力するように構成され得る。記載したように、一人以上のユーザー、カスタマーなどが(たとえばイベント処理エンジンを利用して)イベント処理フレームワークを構成して、カスタムパラメータに少なくとも部分的に基づいて1つ以上の受信中のストリームをパーティションすることを可能にするカスタマイズ可能なメカニズムが提供され得る。
非限定的な一例では、カスタマーは、受信中のデータストリームからデータを照会するためのクエリ(たとえば連続クエリ)を生じさせ、かつ/または提供し得る。ストリームは、カスタマーについてのクエリを用いてストリームを処理するサービスプロバイダーによって受信され得るが、他の例では、カスタマーはサービスプロバイダーを使用せずにクエリを用いてデータを処理させ得る。いずれのイベントでも、カスタマーは、パーティションのためにデータストリームの1つ以上の属性を識別する何らかの構成情報も提供し得る。たとえば、データストリームのデータは、任意の数および/またはタイプの属性(たとえばデータに関連付けられるIPアドレス、データに関連付けられる地理的な位置(または領域)、データに関連付けられるユーザー識別子(ID)等)を含み得る。構成情報に基づいて、サービスプロバイダーは、構成情報にリストされた属性を識別し、識別された属性に関連付けられるイベントを抽出するかまたは他の方法で収集し、属性に関連付けられる、抽出されかつ/または収集されたイベントを(たとえば限定はしないがサブストリームなどの出力データストリームとして)提供するように構成され得る。出力サブストリームは、限定はしないが、フィルタリング、集約(aggregation)などを含む後処理を含む1つ以上のクエリを用いて処理され得る。したがって、コードがイベントストリームをサブストリームにパーティションした後、下流クエリ処理が生じ得る。このように、カスタマー(本明細書ではユーザーともいわれる)は、選択されたイベント属性に少なくとも部分的に基づいて、受信中のデータストリームをパーティションするようにサービスプロバイダーを構成し得る。加えて、ユーザーは、パーティションを完全にカスタマイズしてもよく、かつ/または受信中のデータストリームのパーティションを完全にカスタマイズするようにコードを提供してもよい。
一部の例において、サービスプロバイダーは、1つ以上のデータストリームに対する連続クエリ言語(CQL)クエリ(「クエリ宣言」ともいわれる)をサポートするように構成され得る。加えて、一部の例において、CQLクエリをサポートするためのメカニズムは、サービスプロバイダー(たとえばJavaScript(登録商標)等)によって実行されるスクリプトコードの構成も可能にし得る。このコードは、ユーザー、管理者、またはイベントデータ(たとえばビジネスイベントデータ)に関連付けられる他のエンティティによって、構成され、生成され、管理され、更新され、かつ/または他の方法で操作され得る。
一般に、連続的なデータストリーム(イベントストリームともいわれる)は、明示的な終点のない連続もしくは非有界の特性を有し得るデータもしくはイベントのストリームを含み得る。論理的に、イベントもしくはデータストリームは、データ要素(イベントともいわれる)のシーケンスであり得て、各データ要素は、関連付けられたタイムスタンプを有する。連続イベントストリームは、要素のバッグもしくはセット(s,T)として論理的に表わされ得て、ここで「s」はデータ部分を表わし、「T」は時間ドメインに属する。「s」部分は、概してタプルもしくはイベントといわれる。したがって、イベントストリームは、タイムスタンプを持つタプルもしくはイベントのシーケンスであり得る。
一部の局面において、ストリームにおけるイベントに関連付けられるタイムスタンプは、クロックタイムと同等とされ得る。しかしながら、他の例において、イベントストリームにおけるイベントに関連付けられる時間は、アプリケーションドメインによって定義され得て、クロックタイムに対応しない場合があるが、たとえば、代わりにシーケンス番号によって表わされ得る。このため、イベントストリームにおけるイベントに関連付けられる時間情報は、数字、タイムスタンプ、または時間の概念を表わす他の情報によって表され得る。入力イベントストリームを受信するシステムについては、イベントは、タイムスタンプの増加順でシステムに到達する。同じタイムスタンプを有する2つ以上のイベントがあり得る。
一部の例において、イベントストリームにおけるイベントは、いくぶん世俗的なイベント(たとえば、温度センサーが値を新しい値に変更した場合や、株式表示記号の価格が変化した場合など)の発生を表わし得て、イベントに関連付けられる時間情報は、データストリームイベントによって表わされる世俗的なイベントが発生した場合を示し得る。加えて、各イベントに関連付けられる属性は、限定はしないが、世俗的なイベントに関連付けられるユーザーおよび/または項目(たとえば購入者ID、販売者ID、製品ID、商品価格、ユーザーの位置等)、世俗的なイベント中の場所での天候等といった世俗的なイベントに関する(たとえばメタデータとして記憶される)特定の(たとえば関連する)情報を示し得る。
イベントストリームを介して受信したイベントについては、イベントストリームにおけるイベントが確実にタイムスタンプ値の増加順で到達するように、イベントに関連付けられる時間情報が使用され得る。これにより、イベントストリームにおいて受信されたイベントを、それらに関連付けられる時間情報に基づいてオーダー付けることができる。このオーダー付けを可能にするために、後に生成されるイベントが前に生成されるイベントよりも後のタイムスタンプを有するように、タイムスタンプがイベントストリームにおけるイベントに対して非減少の態様で関連付けられ得る。他の例として、シーケンス番号が時間情報として使用されている場合、後に生成されるイベントに関連付けられるシーケンス番号は、前に生成されるイベントに関連付けられるシーケンス番号よりも大きくなり得る。一部の例において、たとえばデータストリームイベントによって表される世俗的なイベントが同時に発生した場合に、複数のイベントが、同じタイムスタンプもしくは同じシーケンス番号に関連付けられ得る。同じイベントストリームに属するイベントは、概して、関連付けられる時間情報によってイベントに対して加えられるオーダーで処理され得て、前のイベントは後のイベントの前に処理される。
イベントストリームにおけるイベントに関連付けられる時間情報(たとえば、タイムスタンプ)は、ストリームのソースによって設定され得る、または代替的にストリームを受信するシステムによって設定され得る。たとえば、特定の実施形態において、イベントストリームを受信するシステムに対してハートビートが維持され得て、イベントに関連付けられる時間は、ハートビートによって測定されるようにシステムへのイベントの到達の時間に基づき得る。イベントストリームにおける2つのイベントが同じ時間情報を有することは可能である。なお、タイムスタンプオーダー付け要件は1つのイベントストリームに対して特定のものであるが、異なるストリームのイベントが適宜インターリーブされ得る。
イベントストリームは、関連付けられるスキーマ「S」を有し得て、スキーマは、時間情報と、1つ以上の指定される名前付き属性の集合とを含む。特定のイベントストリームに属するすべてのイベントは、その特定のイベントストリームに関連付けられるスキーマに準拠する。このため、イベントストリーム(s,T)については、イベントストリームは、スキーマ「S」を(<time_stamp>,<attribute(s)>)として有し得て、ここで<attributes>は、スキーマのデータ部分を表わし、1つ以上の属性を含み得る。たとえば、株式相場ディスプレイデバイスイベントストリームについてのスキーマは、<stock symbol>および<stock price>の属性を含み得る。このようなストリームを介して受信される各イベントは、タイムスタンプと1つ以上の属性とを有する。たとえば、株式相場ディスプレイデバイスイベントストリームは、以下のイベントおよび関連付けられるタイムスタンプを受け取り得る。
(<timestamp_N>,<NVDA,4>)
(<timestamp_N+1>,<ORCL,62>)
(<timestamp_N+2>,<PCAR,38>)
(<timestamp_N+3>,<SPOT,53>)
(<timestamp_N+4>,<PDCO,44>)
(<timestamp_N+5>,<PTEN,50>)
上記のストリームにおいて、ストリーム要素(<timestamp_N+1>,<ORCL,62>)については、イベントは、「stock_symbol」および「stock_value」を伴う<ORCL,62>である。ストリーム要素に関連付けられるタイムスタンプは、「timestamp_N+1」である。したがって、連続イベントストリームはイベントのフローであり、各イベントは一連の(一部の例では、同じ一連の)属性を有する。
記載したように、ストリームはCQLクエリが作用し得るデータの主要なソースであり得る。ストリームSは、要素(s,T)のバッグ(「マルチセットともいわれる)であり得て、ここで「s」はSのスキーマに属し、「T」は時間ドメインに属する。加えて、ストリーム要素は、タプルとタイムスタンプのペアであり得て、タイムスタンプを持つタプル挿入のシーケンスとして表わされ得る。言い換えると、ストリームは、タイムスタンプを持つタプルのシーケンスであり得る。一部の場合において、同じタイムスタンプを有する2つ以上のタプルがあり得る。また、入力ストリームのタプルは、タイムスタンプの増加順でシステムに到達する必要があり得る。さらに、本願明細書で使用される連続クエリは、概してストリームおよび/またはリレーションのデータを処理する(すなわち、照会する)ことが可能であり得る。加えて、リレーションは、ストリームのデータを参照し得る。
以下の記載では、説明を目的として、実施形態についての十分な理解をもたらすために具体的な詳細を記載する。しかしながら、具体的な詳細がなくとも実施形態が実施され得ることは当業者にとって明らかである。図および説明は、限定的なものとは意図されていない。
図のうちの一部に示されるシステムは、様々な構成で提供され得る。一部の実施形態において、システムは、システムの1つ以上のコンポーネントがクラウドコンピューティングシステムにおいて1つ以上のネットワークを介して分散される分散型システムとして構成され得る。
図1は、データストリームのコンフィギュラブル/カスタムパーティションを管理するための技術が実施され得る、簡易化された例示的なシステムもしくはアーキテクチャ100を示す。アーキテクチャ100において、1人以上のユーザー102(たとえば、アカウント保持者)が、コンピューティングデバイス104(1)〜104(N)(まとめて、「ユーザーデバイス104」)を利用し、1つ以上のネットワーク108を介して1つ以上のサービスプロバイダーコンピューター106にアクセスし得る。一部の局面において、サービスプロバイダーコンピューター106は、ネットワーク108を介して、1つ以上のストリーミングデータソースコンピューター110および/または1つ以上のデータベース112と通信し得る。たとえば、ユーザー102は、サービスプロバイダーコンピューター106を利用し、ストリーミングデータソースコンピューター110および/またはデータベース112のデータにアクセスし得る、またはそれ以外にデータを管理し得る(たとえば、ストリーミングデータソースコンピューター110またはデータベース112のうちのいずれかもしくは両方のデータを処理するのにクエリが使用され得る)。データベース112は、リレーショナルデータベースまたはSQLサーバーなどであり得て、一部の例においては、過去データ、イベントデータ、リレーション、またはアーカイブされたリレーションなどをユーザー102の代わりに管理し得る。加えて、データベース112は、ストリーミングデータソースコンピューター110によって提供されるデータを受信もしくはそれ以外に記憶し得る。一部の例において、ユーザー102は、ユーザーデバイス104を利用し、データ(たとえば、過去のイベントデータ、ストリーミングイベントデータなど)についてのクエリ(「クエリ宣言」ともいう)または他のリクエストを提供することによってサービスプロバイダーコンピューター106と対話し得る。そして、このようなクエリまたはリクエストは、サービスプロバイダーコンピューター106によって実行され、データベース112のデータおよび/またはストリーミングデータソースコンピューター110からの受信中のデータが処理され得る(たとえば、受信中のデータがクエリに送られる際に受信中のデータを連続的に照会する)。さらに、一部の例において、ストリーミングデータソースコンピューター110および/またはデータベース112は、サービスプロバイダーコンピューター106に関連付けられる、統合された分散環境の一部であり得る。
一部の例において、ネットワーク108は、ケーブルネットワーク、インターネット、無線ネットワーク、携帯電話ネットワーク、イントラネットシステム、ならびに/または他の私的および/もしくは公共ネットワークなど、複数の異なるタイプのネットワークのうちの1つもしくはこれらの組み合せを含み得る。示される例は、ユーザー102がネットワーク108を介してサービスプロバイダーコンピューター106にアクセスすることを表わしているが、記載の技術は、ユーザー102が固定電話で1つ以上のユーザーデバイス104を介して、キオスクを介して、または他の方法により1つ以上のサービスプロバイダーコンピューター106と対話する場合においても等しく適用され得る。また、記載の技術は、他のクライアント/サーバー構成(たとえば、セットトップボックスなど)および非クライアント/サーバー構成(たとえば、ローカルに記憶されるアプリケーションなど)においても適用され得る。
ユーザーデバイス104は、携帯電話、スマートフォン、パーソナルデジタルアシスタント(PDA)、ラップトップコンピューター、デスクトップコンピューター、シンクライアントデバイス、タブレットPCなどの任意のタイプのコンピューティングデバイスであり得るが、これらに限定されない。一部の例において、ユーザーデバイス104は、ネットワーク108を介して、または他のネットワーク接続を介して、サービスプロバイダーコンピューター106と通信し得る。さらに、ユーザーデバイス104は、データベース112(または他のデータストア)の処理されるデータを要求するための1つ以上のクエリもしくはクエリ宣言を提供するようにも構成され得る。ユーザーデバイス104は、コードに少なくとも部分的に基づいて受信中のイベントデータをパーティションするようにサービスプロバイダーコンピューター106を構成するためのコードを提供するようにも構成され得る。たとえば、ユーザーコンピューター104は、受信中のストリームを適宜パーティションするようにJavaScriptを実施するためにサービスプロバイダーコンピューター106が実行することができる拡張可能なハイパーテキストマークアップ言語(XML)、ユーザーが構成したjavaクラス等を提供し得る。
一部の局面において、サービスプロバイダーコンピューター106は、モバイル、デスクトップ、シンクライアント、および/またはサーバーのようなクラウドコンピューティングデバイスなど、任意のタイプのコンピューティングデバイスでもあり得るが、これらに限定されない。一部の例において、サービスプロバイダーコンピューター106は、ネットワーク108を介して、または他のネットワーク接続を介してユーザーデバイス104と通信し得る。サービスプロバイダーコンピューター106は、場合によってはクラスターにおいて、サーバーファームとして、または互いに関連付けられていない個別のサーバーとして構成される1つ以上のサーバーを含み得る。これらのサーバーは、本願明細書において記載されるCQLリレーションの管理、入力リレーションの生成、入力リレーションに関連付けられるコンフィギュラブルウィンドウ演算子、および出力リレーションの生成を含む、本願明細書に記載される特徴を行なう、もしくはホスティングするように構成され得る。加えて、一部の局面において、サービスプロバイダーコンピューター106は、ストリーミングデータソースコンピューター110および/またはデータベース112を含む、統合された分散コンピューティング環境の一部として構成され得る。
1つの例示的な構成において、サービスプロバイダーコンピューター106は、少なくとも1つのメモリー136と1つ以上の処理ユニット(プロセッサー)138とを含み得る。プロセッサー138は、ハードウェア、コンピューター実行可能命令、ファームウェア、またはこれらの組み合せにおいて適切に実施され得る。プロセッサー138のコンピューター実行可能命令またはファームウェアの実施は、記載される様々な機能を行なうために任意の適したプログラミング言語で書かれたコンピューター実行可能命令もしくはマシン実行可能命令を含み得る。
メモリー136は、プロセッサー138上でローディング可能および実行可能なプログラム命令ならびにこれらのプログラムの実行時に生成されるデータを記憶し得る。サービスプロバイダーコンピューター106の構成およびタイプに応じて、メモリー136は、揮発性(ランダムアクセスメモリー(RAM)など)および/または不揮発性(読み取り専用メモリー(ROM)、フラッシュメモリーなど)であり得る。サービスプロバイダーコンピューター106またはサーバーは、追加の記憶部140も含み得て、この記憶部140は、リムーバブル記憶部および/または非リムーバブル記憶部を含み得る。追加の記憶部140は、磁気記憶部、光学ディスク、および/またはテープ記憶部を含み得るが、これらに限定されない。ディスクドライブおよびこれに関連付けられるコンピューター読取可能媒体は、コンピューター読取可能命令、データ構造、プログラムモジュール、およびコンピューティングデバイスのための他のデータの不揮発性記憶部を提供し得る。一部の実施において、メモリー136は、スタティックランダムアクセスメモリー(SRAM)、ダイナミックランダムアクセスメモリー(DRAM)、またはROMなどの複数の異なるタイプのメモリーを含み得る。
メモリー136ならびにリムーバブルおよび非リムーバブルの両方の追加の記憶部140は、すべてコンピューター読取可能記憶媒体の例である(かつ非一時的であり得る)。たとえば、コンピューター読取可能記憶媒体は、コンピューター読取可能命令、データ構造、プログラムモジュール、もしくは他のデータなどの情報の記憶のための任意の方法もしくは技術において実施される、揮発性もしくは不揮発性のリムーバブルもしくは非リムーバブル媒体を含み得る。メモリー136および追加の記憶部140は、すべてコンピューター記憶媒体の例である。
代替的に、コンピューター読取可能通信媒体は、コンピューター読取可能命令、プログラムモジュール、または搬送波などのデータ信号もしくは他の伝送で送信される他のデータを含み得る。しかしながら、本明細書で用いられるコンピューター読取可能記憶媒体は、コンピューター読取可能通信媒体を含まない。
サービスプロバイダーコンピューター106は、記憶されるデータベース、他のコンピューティングデバイスもしくはサーバー、ユーザー端末、および/またはネットワーク108上の他のデバイスとサービスプロバイダーコンピューター106が通信することを可能にする通信接続142も含み得る。サービスプロバイダーコンピューター106は、キーボード、マウス、ペン、音声入力デバイス、タッチ入力デバイス、ディスプレイ、1つ以上のスピーカー、プリンターなどの入力/出力(I/O)デバイス144も含み得る。
より詳細にメモリー136の内容を見ると、メモリー136は、オペレーティングシステム145と、少なくともカスタムコンフィギュレーションサービス146を含む、本願明細書に開示される特徴を実施するための1つ以上のアプリケーションプログラムもしくはサービスとを含み得る。一部の例において、カスタムコンフィギュレーションサービス146は、ユーザーアプリケーションモジュール148、コントラクトモジュール149、および/またはコンフィギュラブルパーティションモジュール150を含むがこれらに限定されない1つ以上のアプリケーションプログラムまたは特徴によって実施され得る。本願明細書において使用されるモジュールは、サービス(たとえばカスタムコンフィギュレーションサービス146)の一部であるサーバーもしくはサーバーのクラスターによって実行されるプログラミングモジュールを言い得る。この特定の文脈において、モジュールは、サービスプロバイダーコンピューター106の一部であるサーバーもしくはサーバーのクラスターによって実行され得る。
一部の例において、ユーザーアプリケーションモジュール148は、ユーザー102に関連付けられるイベントストリームを、受信し、識別し、生成し、または他の方法で管理するように構成され得る。たとえば、ユーザー102は、ストリーミングデータソースコンピューター110の1つを介してイベントストリームを提供するビジネス(たとえば電子市場等)を所有し得る。そのため、ユーザー102は、サービスプロバイダーコンピューター106に依拠して、イベントストリームのデータを管理し得る。加えて、一部の例において、ユーザー102は、彼らのビジネスに関連付けられる受信中のイベントストリームを処理するために1つ以上のクエリ(たとえばクエリ154)を提供し得る。そのため、受信されたクエリ154および受信されたイベントストリームに少なくとも部分的に基づいて、サービスプロバイダーコンピューター106は、ユーザーアプリケーションモジュール148を介してクエリ154の結果を(たとえばユーザーインターフェイス(UI)等において)提供し得る。
一部の例において、コントラクトモジュール149は、イベントストリームのパーティションを構成するためにソフト開発キット(SDK)等をユーザー102に提供するように構成され得る。加えて、コントラクトモジュール149は、SDKまたは他の合意に少なくとも部分的に基づいて策定される(たとえばユーザー102からの)1つ以上のカスタムコントラクトを受信し、記憶し、かつ/または管理するように構成され得る。カスタムコントラクトは、ユーザー102によってリクエストされたカスタムパーティションを識別する構成情報155を含み得る。しかし一部の場合において、コントラクトモジュール149は、ユーザー102がいずれかのコードを書く必要なしにカスタムパーティションを構成するためのUIを提供するために、ユーザーアプリケーションモジュール148の一部であり得、かつ/または、ユーザーアプリケーションモジュール148と協働し得る。そのため、UIは、ドロップダウンリスト、チェックボックス、ラジオボタン、テキストフィールド、および/またはユーザーがUIを介して構成情報155を示すいずれかの他のやり方を提供し得る。
加えて、一部の例において、コンフィギュラブルパーティションモジュール150は、少なくともコントラクトモジュール149から構成情報155を受信し、かつユーザーアプリケーションモジュール148からクエリ154を受信するように構成され得る。コンフィギュラブルパーティションモジュール150は、構成情報155およびクエリ154に少なくとも部分的に基づいてクエリ154を構成する156ようにも構成され得る。ひとたびクエリ154が構成される156と、コンフィギュラブルパーティションモジュール150は、1つ以上の受信中のデータストリームをパーティションし157、1つ以上のサブストリームを生成し得る158。次いで、生成された158サブストリームは、処理のためにクエリ154に提供され(たとえば送られ)、次いでリクエストしたユーザーデバイス104にその後提供され得る。
サービスプロバイダーコンピューター106および/またはユーザーデバイス104に存在し得る追加的なタイプの(非一時的でもあり得る)コンピューター記憶装置媒体は、限定はしないが、プログラム可能なランダムアクセスメモリー(PRAM)、SRAM、DRAM、RAM、ROM、電気的消去可能プログラム可能な読み取り専用メモリー(EEPROM)、フラッシュメモリーまたは他のメモリー技術(コンパクトディスク読み取り専用メモリー(CD−ROM))、デジタルバーサタイルディスク(DVD)もしくは他の光学記憶部、磁気カセット、磁気テープ、磁気ディスク記憶部または他の磁気記憶デバイス、または所望の情報を記憶するために用いることができるとともに、サービスプロバイダーコンピューター106および/またはユーザーデバイス104によってアクセスすることができる任意の他の媒体を含み得る。上記のうちいずれかの組み合せも、コンピューター読取可能記憶媒体の範囲内に含まれるべきである。
図2は、本開示の実施形態を組込み得るイベント処理システム200の簡易化されたハイレベル図を示す。イベント処理システム200は、1つ以上のイベントソース204,206,208、イベントストリームを処理するための環境を提供するように構成されるイベント処理サーバー(EPS)202、1つ以上のイベントシンク210,212を含み得る。イベントソースは、EPS202によって受信されるイベントストリームを生成する。EPS202は、1つ以上のイベントソース204,206,208から1つ以上のイベントストリームを受信し得る。たとえば、図2に示されるように、EPS202は、入力イベントストリーム214をイベントソース204から、第2の入力イベントストリーム216をイベントソース206から、第3のイベントストリーム218をイベントソース208から受信する。1つ以上のイベント処理アプリケーション220,222,および224がEPS202上に配置され得て、EPS202によって実行され得る。EPS202によって実行されるイベント処理アプリケーション(たとえばイベントアプリケーション220)は、1つ以上の入力イベントストリームを聞き取り、入力イベントストリームから1つ以上のイベントを注目すべきイベントとして選択する処理ロジックに基づいて1つ以上のイベントストリームを介して受信されたイベントを処理するように構成され得る。注目すべきイベントは、次いで、1つ以上の出力イベントストリームの形態で1つ以上のイベントシンク210,212に送信され得る。たとえば図2において、EPS202は、イベントストリーム226をイベントシンク210に、第2の出力イベントストリーム228をイベントシンク212に出力する。特定の実施形態において、イベントソース、イベント処理アプリケーション、およびイベントシンクは、他のコンポーネントに変化を生じさせることなくこれらのコンポーネントのうちのいずれかを追加するかまたは除去することができるように互いから分断される。
一実施形態において、EPS202は、共有サービスを有するEquinox(登録商標)OSGi(登録商標)に基づくものなどの軽量Javaアプリケーションコンテナを含むJavaサーバーとして実施され得る。一部の実施形態において、EPS202は、たとえばJRockit(登録商標)Real Timeを用いることによってイベントを処理するために超高速スループットおよびマイクロセカンドレイテンシーをサポートし得る。EPS202は、イベント処理アプリケーションを開発するためのツール(たとえばOracle CEP VisualizerおよびOracle CEP IDE)を含む開発プラットフォーム(たとえば完全リアルタイムエンドツーエンドのJava Event Driven Architecture (EDA)開発プラットフォーム)も提供し得る。
イベント処理アプリケーション220,222,224のうち少なくとも1つは、1つ以上の入力イベントストリーム214,216,218を聞き取り、1つ以上の入力イベントストリームから1つ以上の注目すべきイベントを選択するためのロジック(たとえばクエリ)を実行し、選択された注目すべきイベントを1つ以上の出力イベントストリーム226,228を介して1つ以上のイベントシンク210,212に出力するように構成される。図2は、一部の例においてカスタムコンフィギュレーションサービス146に関して上記した特徴を行なうように構成され得る1つのそのようなイベント処理アプリケーション220のためのドリルダウンを提示する。図2に示されるように、イベント処理アプリケーション220は、入力イベントストリーム218を聞き取り、入力イベントストリーム218から1つ以上の注目すべきイベントを選択するためのロジックを含むCQLエンジン/CQサービスによってクエリを実行し、選択された注目すべきイベントを出力イベントストリーム228を介してイベントシンク212に出力するように構成される。イベントソースの例は、限定はしないが、アダプタ(たとえばJMS、HTTPおよびファイル)、チャネル、プロセッサー、表、キャッシュ等を含む。イベントシンクの例は、限定はしないが、アダプタ(たとえばJMS、HTTPおよびファイル)、チャネル、プロセッサー、キャッシュ等を含む。
図2のイベント処理アプリケーション220は、1つの入力ストリームを聞き取り、選択されたイベントを1つの出力ストリームを介して出力するものとして示されるが、これは限定的なものとは意図されていない。代替的な実施形態において、イベント処理アプリケーションは、1つ以上のイベントソースから受信されたマルチ入力ストリームを聞き取り、監視されたストリームからイベントを選択し、選択されたイベントを1つ以上の出力イベントストリームを介して1つ以上のイベントシンクに出力するように構成され得る。同じクエリは、2つ以上のイベントシンク、および異なるタイプのイベントシンクに関連付けられ得る。
その非有界性質により、イベントストリームを介して受信されるデータ量は概して非常に大きい。したがって、照会目的のためにデータすべてを記憶するかまたはアーカイブすることは一般に非実用的であり、望ましくない。イベントストリームの処理は、イベントがEPS202によって受信される際に、受信されるイベントデータすべてを記憶する必要なしに、リアルタイムなイベントの処理を必要とする。したがって、EPS202は、受信されるイベントすべてを記憶する必要なしに、EPS202によってイベントが受信される際にイベントの処理が行なわれることを可能にする特別な照会メカニズムを提供し得る。
イベントドリブンアプリケーションはルールドリブンであり得て、これらのルールは入力ストリームを処理するのに用いられる連続クエリの形態で表現され得る。連続クエリは、どのイベントが注目すべきイベントとして選択されるべきかを含む受信されるイベントのために行なわれる処理を識別する命令(たとえばビジネスロジック)を含み得て、照会処理の結果として出力し得る。連続クエリはデータストアに持続され、イベントの入力ストリームを処理しイベントの出力ストリームを生成するために用いられ得る。連続クエリは典型的に、フィルタリングおよび集約機能を行なって、入力イベントストリームから注目すべきイベントを発見し抽出する。その結果、出力イベントストリーム内のアウトバウンドイベントの数は、イベントが選択される入力イベントストリーム中のイベントの数よりも一般にはるかに少ない。
有限データセットに対して一回実行されるSQLクエリとは異なり、特定のイベントストリームについてEPS202と共にアプリケーションによって登録されている連続クエリは、そのイベントストリームにおいてイベントが受信されるたびに実行され得る。連続クエリ実行の一部として、EPS202は、連続クエリによって特定された命令に少なくとも部分的に基づいて、受信されたイベントを評価して、1つ以上のイベントが注目すべきイベントとして選択されるべきかどうかを判定し、連続クエリ実行の結果として出力し得る。
連続クエリは、異なる言語を用いてプログラムされ得る。特定の実施形態において、連続クエリは、Oracleによって提供され、OracleのComplex Events Processing(CEP)製品提供によって用いられるCQLを用いて構成され得る。OracleのCQLは、イベントストリームに対して実行することができるクエリ(CQLクエリともいわれる)をプログラムするために用いることができる宣言型言語である。特定の実施形態において、CQLは、ストリーミングイベントデータの処理をサポートする追加された構造体を有するSQLに基づく。
一実施形態において、イベント処理アプリケーションは以下のコンポーネントタイプで構成され得る:
(1)入力および出力ストリームならびにリレーションソースおよびシンクに直接にインターフェイス接続する1つ以上のアダプタ。アダプタは、入力および出力ストリームプロトコルを理解するように構成され、アプリケーションプロセッサーによって照会されることができる正規形にイベントデータを変換することを担う。アダプタは、正規化されたイベントデータをチャネルまたは出力ストリームおよびリレーションシンクに転送し得る。イベントアダプタは、様々なデータソースおよびシンクについて規定され得る。
(2)イベント処理エンドポイントとして作用する1つ以上のチャネル。とりわけ、チャネルは、イベント処理エージェントがそれに基づいて作用することができるまでイベントデータをキューに入れることを担う。
(3)1つ以上のアプリケーションプロセッサー(またはイベント処理エージェント)は、正規化されたイベントデータをチャネルから消費し、クエリを用いてそれを処理して注目すべきイベントを選択し、選択された注目すべきイベントを出力チャネルに転送(またはコピー)するように構成される。
(4)1つ以上のユーザー定義Javaクラスは、イベントデータの属性に少なくとも部分的に基づいて、注目すべきイベントをパーティションするように実施され得る。一部の例において、イベントデータは次いで、パーティションに少なくとも部分的に基づいてサブストリームに分割され得て、それぞれのサブストリームを適当な出力チャネルに送ることができる。
(5)1つ以上のビーンは出力チャネルを聞き取るように構成され、出力チャネルへの新しいイベントの挿入によってトリガーされる。一部の実施形態において、このユーザーコードは、通常の従来型Javaオブジェクト(POJO)である。ユーザーアプリケーションは、JMS、ウェブサービスおよびファイルライターなどの1組の外部サービスを利用して、生成されたイベントを外部イベントシンクに転送することができる。
(6)イベントビーンは、出力チャネルを聞き取るように登録され得て、出力チャネルへの新しいイベントの挿入によってトリガーされる。一部の実施形態において、このユーザーコードは、ビーンをOracle CEPによって管理することができるように、Oracle CEPイベントビーンAPIを使用し得る。
一実施形態において、イベントアダプタは、イベントデータを入力チャネルに提供する。入力チャネルは、入力チャネルによって提示されるイベント上で動作する1つ以上のCQLクエリに関連付けられるCQLプロセッサーに接続される。CQLプロセッサーは、クエリ結果が書かれている出力チャネルに接続される。
一部の実施形態において、アセンブリファイルは、イベント処理アプリケーションの様々なコンポーネント、コンポーネントがどのように互いに接続されるか、およびアプリケーションによって処理されるイベントタイプについて記述するイベント処理アプリケーションに提供され得る。イベントの選択のために連続クエリまたはビジネスロジックを特定するため、別個のファイルが提供され得る。
なお、図2に示されるシステム200は、図2に示される以外のコンポーネントを有し得る。さらに、図2に示される実施形態は、本開示の実施形態を組込み得るシステムの単なる一例である。一部の他の実施形態において、システム200は、図2に示されるよりも多いかもしくは少ないコンポーネントを有してもよいし、2つ以上のコンポーネントを組み合わせてもよいし、または異なる構成または配置のコンポーネントを有してもよい。システム200は、パーソナルコンピューター、携帯機器(たとえば自動車電話またはデバイス)、ワークステーション、ネットワークコンピューター、メインフレーム、キオスク、サーバー、または任意の他のデータ処理システムを含む様々なタイプであり得る。一部の他の実施形態において、システム200は、システム200の1つ以上のコンポーネントがクラウドにおける1つ以上のネットワークを介して分散される分散型システムとして構成され得る。
図2に示されるコンポーネントの1つ以上は、ソフトウェア、ハードウェア、またはそれらの組み合せにおいて実施され得る。一部の実施形態において、ソフトウェアはメモリー(たとえば非一時的コンピューター読取可能媒体)内、メモリーデバイス上、またはいくつかの他の物理メモリーに記憶され得て、サービスプロバイダーコンピューター106または他のコンピューティングシステムの1つ以上の処理ユニット(たとえば1つ以上のプロセッサー、1つ以上のプロセッサーコア、1つ以上のGPU等)によって実行され得る。
図3は、図1および図2のカスタムコンフィギュレーションサービス146の追加的な局面および/または特徴を例示する簡易化されたアーキテクチャ300を示す。たとえば図3は、(たとえば、1つ以上のストリーミングソースまたはチャネルからの)入力データストリーム302および1つ以上のイベントシンク304(1)〜(N)(まとめて、イベントシンク304)に通信可能に結合されたカスタムコンフィギュレーションサービス146を例示する。図3に見られるように、カスタムコンフィギュレーションサービス146は、サブストリーム(たとえばクエリ306がデータストリーム302から注目すべきイベントを抽出した後、またはクエリ306を変更した後のいずれかにおいて入力ストリーム302のデータを処理するためのJavaクラス308の出力)を照会するための(たとえば、ユーザー102から受信され得る図1のクエリ154のような)クエリ306によっても構成され得る。言いかえれば、一部の例において、javaクラス308は、図1のユーザー102から受信された構成情報155によって変更され、その構成情報に少なくとも部分的に基づいてクエリを実施するために利用され得る。加えて、一部の例において、ユーザーがクエリを提供し、登録し、かつ/または構成すると、その特定のストリームをパーティションすることを担う1つ以上のJavaコンポーネントを特定し得る。いずれにせよ、Javaクラス308は、ユーザー定義構成情報155に少なくとも部分的に基づいて(たとえば、データストリーム302の属性に少なくとも部分的に基づいて)、より高いレベルのイベント処理言語の拡張子を用いて(たとえば、Java実施をJavaインターフェイスによって照会言語に結び付けて)、入力ストリーム302のデータをパーティションするように構成され得る。
一部の局面において、イベントがカスタムJavaクラスによってパーティションされると、各パーティションにはパーティションIDまたはバケットIDがアサインされ得る。1つ以上のアプリケーションプログラミングインターフェイス(API)コールまたはJavaインターフェイスコールは、パーティションIDおよび/またはバケットIDに少なくとも部分的に基づいて、パーティションされたイベントをバケットに配置するように行なわれ得る。ハッシュ関数がユーザーによって提供され得る場合、これらのバケットは、ランタイムに実施され得て、パーティションされたデータのハッシングに少なくとも部分的に基づき得る。一部の例において、各パーティションはそれぞれのバケット310(1)〜(N)(まとめて、バケット310)に提供され得て、次いでパーティションされたデータを1つ以上の出力サブストリーム312(1)〜(N)(まとめて、出力サブストリーム312)を介してクエリ306に提供され得る。一部の例において、2つ以上の出力サブストリーム(たとえば出力サブストリーム312(1)および312(2))は、パーティションされたデータをクエリ306に提供し得、クエリ306は、パーティションされたストリームそれ自体を管理することができ、並行してそれらを処理し得る。出力サブストリーム312を介してクエリ306に提供されるパーティションの例は、限定はしないが、特定の期間中に一定回数より多く出現した入力ストリーム302からのIPアドレス、特定の期間中の特定回数より多い(たとえばユーザー102の)口座アクセスに関連付けられる入力ストリーム302からのIPアドレス、および/または(たとえばある期間中にまたは永久的に)所与のストリングと一致するアカウント名を有する入力ストリーム302からのIPアドレスを含む。カスタムコンフィギュレーションサービス146は次いで、クエリ306を用いて(たとえば出力サブストリーム312のデータをクエリ306に送ることによって)出力サブストリーム312を(たとえば並行して)処理し得て、1つ以上のイベントシンク304に結果を提供し得る。一部の例において、クエリ306は、クエリ構成体に応じて、単一のストリームまたはリレーションを(たとえばイベントシンク304(1)に)出力し得る。しかしながら、他の例においては、クエリ306は複数のストリームまたはリレーション(たとえばイベントシンク304(1)および304(N)の各々に一つ)を提供し得る。
一部の例において、クエリ306は、CQL言語を拡張してストリングのための新しいデータ定義をサポートすることによってパーティションを実施するようにJavaクラス308に関連付けられ得る。新しいデータ定義は、ユーザーがいずれかのコードを書いても書かなくてもパーティションスキームがクエリコンポーネントに関連付けられ得るように発行され得る。加えて、各イベントは次いでストリームから受信され、サービスプロバイダーコンピューター106上で動くJavaエンジンに渡され得る。一部の場合において、XMLファイルを利用して、カスタマーコンフィギュレーションサービス146がランタイムにそれをピックアップし得、イベントを処理している間にJavaクラス308を呼び出してどのバケット310にイベントを配置するかを見出し得、したがって適切なサブストリーム312で終了するように、Javaクラス308をクエリ306に関連付け得る。これらの特徴を実施するために、ユーザーがJavaクラス308を関連付けることを可能にするためにCQL言語が変更され得る。加えて、CQLエンジンのランタイム実行の一部である物理的なオペレータは、関連付けられているJavaクラスへの呼出しを可能にするように変更され得る。加えて、各XMLファイルは、いつどのクエリについて各パーティションスキームを実施するかを識別し得る。たとえば、複数のクエリは複数のパーティションスキームに関連付けられ得て、各XMLファイルは、どのパーティションスキームが、どのJavaクラスに、どのクエリに、どのストリームに、および/またはどの時間に属しているかを識別することが可能であり得る。Javaクラスは、複数の異なるクエリおよび/またはデータストリーム上で再使用され得る。さらに、サービスプロバイダーコンピューター106は、異なるデータストリーム、ビジネス利用ケース、および/またはクエリに使用されるJavaクラスの推奨および/または提案を提供するように構成され得る。たとえば、イベントストリームは、カスタマーがどのようにそれらをパーティションしているかと同様に研究され得る。そのため、一人のカスタマーによって用いられる1つのパーティションスキームは、同様のイベントストリーム、データのタイプ等に少なくとも部分的に基づいて他のカスタマーに推奨され得る。たとえば、第1のカスタマーのイベントストリームが財務情報を含むことが識別され、かつ財務情報を処理している第2のカスタマーが特定のパーティションスキームを利用したことをサービスプロバイダーコンピューター106がさらに識別した場合、サービスプロバイダーコンピューター106は、第2のカスタマーによって提供されるJavaクラスおよび/または第2のカスタマーによって用いられるパーティションスキームを第1のカスタマーが実施することを推奨し得る。
加えて、一部の例において、クエリ306は、ユーザーから受信された構成情報155に少なくとも部分的に基づいて変更され得る。記載したように、Javaクラス308は入力データストリーム302を適宜パーティションするためにこの構成情報155に少なくとも部分的に基づいてクエリ306を変更するように構成され得る。一部の例において、クエリ306は、元来以下のクエリ宣言に類似し得る:
View#1(IPView1):
SELECT ipAddress, acctName
FROM DSLoadChannel1 [RANGE 240 SECONDS]
Query#1 (DSEventIPQuery1):
SELECT ipAddress FROM IPView1
GROUP BY ipAddress HAVING COUNT(1) = 100
Query#2 (DSEventIPQuery2):
SELECT ipAddress FROM IPView1
GROUP BY ipAddress, acctName HAVING COUNT(1) = 50
Query#3 (DSEventIPQuery3):
SELECT ipAddress FROM IPView1
WHERE acctName LIKE '10101010' GROUP BY ipAddress
一部の例において、ベンチマークデータは、これらのクエリについてのスロットルイベント送出レートが毎秒およそ10,000イベントである傾向があることを例示、以下の問題領域が明らかとなる:
スケーラビリティ問題
・30%未満のCPU利用
・入力スレッドの数の増大はスループットを拡大しない
有効なパーティションの欠如
・入力スレッドのランタイムはそれらの寿命の約40%である
・入力スレッド間のコンテンション
特に、有効なパーティションの欠如に関して、1つの問題は、各スレッドのランタイムはその寿命の約40%であるため、ベンチマークテストのスレッドタイムラインがロットスレッドコンテンションを示すことであると考えられる。これは、IPアドレス属性を「ストリング」値と想定することによって入力データがIPアドレスについて効果的にパーティションされなかったことによるケースであると考えられる。この問題に対する少数の解決策は、限定はしないが、IPアドレスオクテット値を用いてIPアドレスごとにクラス(たとえば、クラスA、クラスB、およびクラスC)を判定することと、CQLの拡張性フレームワークを用いて、IPアドレス値およびそのクラスIDを有することになる拡張可能なタイプとしてIPアドレスを定義することと、IPアドレスクラスに従ってデータをパーティションするための適切なハッシュメカニズムによるhashCode()法を定義することとを含む。たとえば、一例として以下のコードを用いる:
public class IPAddress {
public String ipAddress;
// getter & setters
@Override
public int hashCode(){
return ipAddress.hashCode();
}
@Override
public boolean equals(Object obj) {
if(obj instanceof IPAddress) {
IPAddress other = (IPAddress)obj;
return this.ipAddress.equals(other.getIpAddress());
}
else
return false;
}
}
同様に:
public class DSEvent {
protected IPAddress ipAddress ;
protected String acctName ;
protected long partitionId;
protected long eventTs ;
protected int hashCode;
public DSEvent () {}
public DSEvent (IPAddress ipAddress, String acctName, long eventTS, long num, long partitionId)
{
this.ipAddress = ipAddress;
this.acctName = acctName;
this.eventTs = eventTS;
this.partitionId = partitionId;
this.hashCode = (int)num;
}
......
......
}
現行システムのないクエリのモデリングに関して、1つの問題は、少なくとも、上記したオリジナルのクエリにおいて「IPView1」という名のビューが以下のように規定されたことから、データベースビューの使用法がパーティションを可能にしない場合があることであるようと考えられる:
SELECT ipAddress, acctName
FROM DSLoadChannel1 [RANGE 240 SECONDS]
しかしながら、Partitioningを用いたParallelizationの現在のサポートでは、ビューソースに基づいてクエリをパーティションすることができない。したがって、本開示は、RANGE WINDOWを直接にクエリに以下のように適用することを説明する:
SELECT ipAddress FROM DSLoadChannel1[RANGE 240 SECONDS]
GROUP BY ipAddress
HAVING COUNT(ipAddress) = 100
以下の変更されたクエリがもたらされる:
変更されたクエリ1:
SELECT ipAddress
FROM DSLoadChannel1[RANGE 240 SECONDS]
GROUP BY ipAddress HAVING COUNT(ipAddress) = 100
変更されたクエリ2:
SELECT ipAddress
FROM DSLoadChannel1[RANGE 240 SECONDS]
GROUP BY ipAddress, acctName HAVING COUNT(ipAddress) = 50
変更されたクエリ3:
SELECT ipAddress
FROM DSLoadChannel1[RANGE 240 SECONDS]
WHERE acctName LIKE'10101010'
GROUP BY ipAddress
そのため、上記の技術および特徴は、とりわけ、IPアドレス属性について新しいJavaクラスを提供している。たとえば、新しいイベントを生成している間に、IPAddressおよびそのクラスを有するクラスIPAddressのインスタンスの生成。加えて、ThrottleEventSender内のスレッドがそのIPAddressが同じクラスに属するイベントを常に送信することを確実にするメカニズムが導入される。さらに、スレッドごとに危険地域を縮小するための別個のstatカウンターが維持される。これらの技術のうちの少なくとも一部は、同じかまたは同様のコンピューター環境および関連付けられた状態が与えられたとすると、(上記の)毎秒約10,000イベントから毎秒約50,000イベントまで進むことを含むスロットルイベント送出レートの向上につながる。
したがって、記載される技術は、CQL内の在来のOBJECTデータタイプのためのCOUNT集合体のサポート、下流の処理時間に関係なく呼出し当たりわずか1つのタイムアウトハートビートを送信するための固定されたScheduler Thread、入力スレッド上で待機する入力がある場合にタイムアウトハートビート伝播が行なわれないことを確実にするための同期されたメカニズムの導入、および現行システム時間がタイムアウト値以上に最後の入力のタイムスタンプと異なる場合にのみタイムアウトハートビートを送信するためのメカニズムの導入を提供する。記載される技術は、(他の属性タイプ間の)IPAddress属性タイプを、JAVAクラスとして定義することによってCQL拡張可能データタイプに変換もし、Throttle Event senderにおいて、各スレッドが同じクラスに属するIPアドレスを有するイベントを送信することを確実にし、ScheduledThreadPoolExecutorスレッドの代わりに単純なスレッドを用いる。
図4は、一例に従う、データストリームのカスタムパーティションを実施するための1つ以上の技術400を示す簡易化されたフロー図を示す。図4において、サービスプロバイダーコンピューター106は、ネットワーク108を介してユーザー102、ユーザーデバイス104、および/またはストリームソース110と通信しているものとして再び示される。加えて、一部の例において、サービスプロバイダーコンピューター106は、(たとえばネットワーク108を介して)1つ以上のイベントプロセッサーコンピューターおよび/またはデータベースを含んでいてもよいし、それらと通信してもよい。技術400は(任意のシーケンス番号を含む)特定のオーダーで図4に示されているが、特定のオーダーは必要ではなく、技術400の1つ以上のステップまたは部分が省略、スキップ、および/または並べ替えされ得ることが理解されるべきである。少なくとも一つの非限定的な例において、図1および図2に関して上記した1つ以上のサービスプロバイダーコンピューター106は、(たとえばユーザー102のビジネスに関連付けられる)ストリームを識別し得、かつ/またはストリームのイベントを照会するためにユーザーからクエリを受信し得る。一部の例において、サービスプロバイダーコンピューター106は、ユーザーデバイス104からのコードも受信し得る。コードは、サービスプロバイダーコンピューター106によって実行されて、CEPエンジンまたは他のイベント処理サーバー/サービス/プログラムに関連付けられて実行されているJavaコードと相互作用するかまたは他の方法でJavaコードを変更するように構成され得る。サービスプロバイダーコンピューター106は、一部の例において、コードに少なくとも部分的に基づいてクエリを構成し得る。コードは、ストリームの1つ以上のパラメータを識別して、データおよび/またはデータをパーティションするための1つ以上のコンディションもしくはルールをパーティションし得る。
一部の例において、サービスプロバイダーコンピューター106は、1つ以上のストリームソース110からストリーミングデータも受信し得て、次いでストリームの結果を受信されたコードに少なくとも部分的に基づいてバケット、および/またはサブストリームにパーティションし得る(たとえばランタイムに)。記載したように、パーティションは、受信されたコードによって定義されるように、イベント自体のルール、状態、および/または属性に基づき得る。一部の例において、サービスプロバイダーコンピューター106は次いで、サブストリームを(たとえば並行して)処理するために受信されたクエリに、次いでクエリからユーザーデバイス104に、および/または1つ以上のイベントシンクに送り得る。
図5および図6は、本願明細書において記載されるデータストリームのカスタムパーティションを実施するためのそれぞれの処理500および600を示す例示的なフロー図である。これらの処理500,600は、論理フロー図として示され、その各動作は、ハードウェア、コンピューター命令、またはそれらの組み合せにおいて実施され得る動作のシーケンスを表わす。コンピューター命令の文脈において、動作は、1つ以上のプロセッサーによって実行される場合に記載の動作を行なう、1つ以上のコンピューター読取可能記憶媒体に記憶されるコンピューター実行可能命令を表わす。概して、コンピューター実行可能命令には、特定の機能を行なう、もしくは特定のデータタイプを実施する、ルーチン、プログラム、オブジェクト、コンポーネント、データ構造などが含まれる。動作が記載されるオーダーは、限定的に解釈されることを意図しておらず、任意の数の記載の動作が任意のオーダーで、および/または並列に組み合わされ得て、処理が実施され得る。
加えて、一部の、任意の、もしくはすべての処理は、実行可能命令を用いて構成される1つ以上のコンピューターシステムの制御下において行なわれ得る、および1つ以上のプロセッサー上でまとめて実行されるコード(たとえば、実行可能命令、1つ以上のコンピュータープログラム、または1つ以上のアプリケーション)として実施され得る、またはハードウェアによって実施され得る、またはこれらの組み合せによって実施され得る。上記のように、コードは、たとえば1つ以上のプロセッサーによって実行可能な複数の命令を含むコンピュータープログラムの形態でコンピューター読取可能記憶媒体上に記憶され得る。コンピューター読取可能記憶媒体は、非一時的であり得る。
一部の例において、図1〜図4に示される1つ以上のサービスプロバイダーコンピューター106(たとえば、少なくともカスタムコンフィギュレーションサービス146および/またはコンフィギュラブルパーティションモジュール150を利用する)は、図5の処理500を行ない得る。処理500は、ユーザーに関連付けられるデータストリームの一部分を処理するためのクエリを識別することによってブロック502において開始され得る。記載したように、クエリはユーザーから受信され得て、実体経済イベントについてデータストリームに照会するように構成され得る。504において、プロセス500は、識別されたストリームの属性を識別するコードを受信することを含み得る。一部の例において、コードは、イベントの属性に少なくとも部分的に基づいてクエリを構成することが可能であり得る。プロセス500は、506においてコードをクエリに関連付けることも含み得る。コードは、上記のように多くの異なるやり方でクエリに関連付けられ得る。たとえば、コードは、クエリを変更してイベントデータをパーティションするためにサービスプロバイダーコンピューターによって利用され得る。コードはまた、イベント処理エンジン、何らかのJavaScriptまたはクエリを実施するように構成される他のプロセスを変更するために、サービスプロバイダーコンピューターによって利用され得る。
508において、プロセス500は、クエリに少なくとも部分的に基づいてデータストリームのイベントデータを受信することを含み得る。プロセス500は、510において、(たとえば、受信されたコードに少なくとも部分的に基づいて)各イベントをJavaクラスに提供することも含み得る。Javaクラスは次いで、512において、属性に少なくとも部分的に基づいてイベントをパーティションするように実施され得る。514において、プロセス500は、Javaクラス実施(たとえばサブストリーム)の出力を受信することを含み得る。出力は、パーティションされたデータのバケットを含み得る(たとえば各バケットはデータイベントの異なるパーティションに対応し得る)。516において、プロセス500は、属性に少なくとも部分的に基づいて(たとえば、さらに、実施されるJavaクラスに少なくとも部分的に基づいて)サブストリームを処理するようにクエリを構成することにより終了し得る。
図6は、本明細書において記載されるデータストリームのカスタムパーティションを実施するための処理600を示す例示的なフロー図を例示する。図1〜図4に示される1つ以上のサービスプロバイダーコンピューター106は(たとえば少なくともカスタムコンフィギュレーションサービス146および/またはコンフィギュラブルパーティションモジュール150を利用して)、図6の処理600を行ない得る。処理600は、ユーザー(たとえば図1のユーザー102)に関連付けられるデータストリームを識別することによって602において開始され得る。604において、処理600は、データストリームによって受信されているイベントのレートがしきい値を上回っているかどうかを判定することを含み得る。一部の例において、しきい値は、問題のあるものとして識別された、かつ/または問題(たとえば低いスロットルイベント送出レート、多くかつ/または管理不可能な数の入力スレッド、高入力スレッドランタイム、入力スレッドコンテンション、スタービング入力スレッド等)を引起こすことが知られている数を含み得る。一部の例において、イベントのレートがしきい値を上回っていると判定されない場合、処理600は、606において、標準的なまたはオリジナルのパーティションルールおよび/またはクエリモデルに従って、シングル出力ストリームを提供することを含み得る。代替的に、604においてしきい値に達している場合、処理600は、608においてユーザーからクエリを受信することを含み得る。しかしながら、一部の例において、クエリは、604における判定に先立って、かつその判定とは無関係に受信され得る。
一部の例において、プロセスは、610において、カスタムコンフィギュレーションコード(たとえば構成情報155)が受信されるかどうか判定することを含み得る。カスタムコンフィギュレーションコードが受信されていないと判定された場合、処理600は606に進むことを含み得る。しかしながら、カスタムコンフィギュレーションコードが610において受信され、イベントのレートがしきい値を上回っている場合は、処理600は、612においてコードをクエリに関連付けることを含み得る。614において、プロセスは、コードにおいて識別された属性に少なくとも部分的に基づいて、イベントデータをパーティションするためにストリームイベントをコード(たとえばJavaサーバーまたはエンジン)に送ることを含み得る。616において、処理600は、各パーティション/属性のための出力サブストリームを、608において受信されたクエリに提供することを含み得る。さらに、処理600は618において終了し得る。処理600は、クエリ(または、限定はしないがフィルタ、集約、結合等を含む他のクエリオペレーター)を用いてサブストリームを処理することを含み得る。したがって、コードがイベントストリームをサブストリームにパーティションした後で、下流のクエリ処理が生じ得る。
図7は、本明細書において記載される実施形態の1つを実施するための分散型システム700の簡易化された図を示す。例示された実施形態では、分散型システム700は、1つ以上のクライアントコンピューティングデバイス702,704,706,および708を含み、これらは、1つ以上のネットワーク710を通じて、ウェブブラウザー、専用クライアント(たとえば、Oracle Forms)などのクライアントアプリケーションを実行および動作させるように構成される。サーバー712は、ネットワーク710を介して遠隔のクライアントコンピューティングデバイス702,704,706,および708と通信可能に結合され得る。
様々な実施形態において、サーバー712は、システムのコンポーネントの1つ以上によって提供される1つ以上のサービスまたはソフトウェアアプリケーションを実行するように適合され得る。一部の実施形態において、これらのサービスは、ウェブベースもしくはクラウドサービスとして、またはサービス(SaaS)モデルとしてのソフトウェアの下で、クライアントコンピューティングデバイス702,704,706,および/または708のユーザーに提供され得る。クライアントコンピューティングデバイス702、704および706,および/または708を動作させるユーザーはひいては、1つ以上のクライアントアプリケーションを利用して、サーバー712と相互作用して、これらのコンポーネントによって提供されるサービスを利用し得る。
図7に示される構成において、システム700のソフトウエアコンポーネント718、720および722は、サーバー712上で実施されるものとして示される。他の実施形態において、システム700のコンポーネントの1つ以上および/またはこれらのコンポーネントによって提供されるサービスは、クライアントコンピューティングデバイス702,704,706,および/または708のうち1つ以上によっても実施され得る。クライアントコンピューティングデバイスを動作させるユーザーは次いで、1つ以上のクライアントアプリケーションを利用して、これらのコンポーネントによって提供されるサービスを使用し得る。これらのコンポーネントは、ハードウェア、ファームウェア、ソフトウェア、またはそれらの組み合せにおいて実施され得る。分散型システム700とは異なり得る様々な異なるシステムコンフィギュレーションが可能であることが認識されるべきである。図に示される実施形態は、したがって実施形態のシステムを実施するための分散型システムの一例であり、限定するものとは意図されていない。
クライアントコンピューティングデバイス702,704,706,および/または708は、ポータブルハンドヘルドデバイス(たとえばiPhone(登録商標)、携帯電話、iPad(登録商標)、コンピューティングタブレット、携帯情報端末(PDA))、またはウェアラブルデバイス(たとえばGoogle Glass(登録商標)ヘッドマウンテッドディスプレイ)、Microsoft Windows Mobile(登録商標)などの実行ソフトウェア、および/またはiOS(登録商標)、ウィンドウズフォン、アンドロイド、Blackberry16、Palm OS等といった様々なモバイルオペレーティングシステムであり得、インターネット、電子メール、ショートメッセージサービス(SMS)、Blackberry(登録商標)、または他の通信プロトコルに対応する。クライアントコンピューティングデバイスは、Microsoft Windows(登録商標)、Apple Macintosh(登録商標)、および/またはLinux(登録商標)オペレーティングシステムの様々なバージョンを実行するパーソナルコンピューターおよび/またはラップトップコンピューターを例として含む汎用パーソナルコンピューターであり得る。クライアントコンピューティングデバイスは、たとえばGoogle Chrome OSなどの様々なGNU/Linuxオペレーティングシステムを含み、限定されない様々な商業的に利用可能なUNIX(登録商標)もしくはUNIXのようなオペレーティングシステムのいずれかを実行するワークステーションコンピューターであり得る。代替的に、または加えて、クライアントコンピューティングデバイス702,704,706,および708は、ネットワーク710を通じて通信可能な、シンクライアントコンピューター、インターネット対応ゲーミングシステム(たとえばKinect(登録商標)ジェスチャー入力デバイスの有無に関わらずMicrosoft Xbox(登録商標)ゲーミングコンソール)、および/またはパーソナルメッセージングデバイスなどの任意の他の電子デバイスであり得る。
4つのクライアントコンピューティングデバイスを用いて例示的な分散型システム700が示されているが、任意の数のクライアントコンピューティングデバイスが支持され得る。センサーを有するデバイスなどの他のデバイスが、サーバー712と対話し得る。
分散型システム700のネットワーク710は、TCP/IP(Transmission control protocol/Internet protocol)、SNA(systems network architecture)、IPX(Internet packet exchange)、AppleTalk(登録商標)などを含みこれらに限定されない様々な商業的に利用可能なプロトコルのいずれかを使用してデータ通信をサポートすることができる、当業者によく知られた任意のタイプのネットワークであり得る。単に例示であるが、ネットワーク710は、イーサネット(登録商標)および/またはトークンリングなどに基づくものなどの、ローカルエリアネットワーク(LAN)であり得る。ネットワーク710は、広域ネットワークおよびインターネットであり得る。これは、仮想プライベートネットワーク(VPN)を含むがこれに限定されない仮想ネットワーク、インターネット、イントラネット、エクストラネット、公衆交換電話網(PSTN)、赤外線ネットワーク、無線ネットワーク(たとえば、Institute of Electrical and Electronics (IEEE)702.11プロトコルスイート、Bluetooth(登録商標)プロトコル、および/または任意の他の無線プロトコルのうちのいずれかにおいて動作するネットワーク)、ならびに/またはこれらおよび/もしくは他のネットワークの組み合せを含むことができる。
サーバーコンピューター712は、1つ以上の汎用コンピューター、専用サーバーコンピューター(たとえば、PC(パーソナルコンピューター)サーバー、UNIX(登録商標)サーバー、ミッドレンジサーバー、メインフレームコンピューター、ラックマウントサーバーなどを含む)、サーバーファーム、サーバークラスター、または任意の他の適切な構成および/または組み合せで構成され得る。様々な実施形態において、サーバー712は、上記の開示において記載される1つ以上のサービスもしくはソフトウェアアプリケーションを実行するように適合され得る。たとえば、サーバー712は、本開示の実施形態に係る、上記の処理を行なうためのサーバーに対応し得る。
サーバー712は、上記のいずれかを含むオペレーティングシステム、ならびに商業的に利用可能なサーバーオペレーティングシステムのいずれかを実行し得る。また、サーバー712は、HTTP(hypertext transport protocol)サーバー、FTP(file transfer protocol)サーバー、CGI(common gateway interface)サーバー、JAVA(登録商標)サーバー、データベースサーバーなどを含む、様々な付加的なサーバーアプリケーションおよび/またはミッドティアアプリケーションのいずれかを実行し得る。例示的なデータベースサーバーは、Oracle、Microsoft、Sybase、IBM(International Business Machines)などから商業的に入手可能なものも含むが、これらに限定されない。
一部の実施において、サーバー712は、クライアントコンピューティングデバイス702,704,706,および708のユーザーから受信されたデータフィードおよび/またはイベント更新を分析し統合するための1つ以上のアプリケーションを含み得る。一例として、データフィードおよび/またはイベント更新は、限定はしないが、1つ以上の第三者情報源および連続データストリームから受信されたTwitter(登録商標)フィード、Facebook(登録商標)更新、またはリアルタイム更新を含み得て、これらはデータアプリケーション、株式相場ディスプレイデバイス、ネットワーク性能測定ツール(たとえば、ネットワーク監視およびトラフィック管理アプリケーション)、クリックストリーム分析ツール、自動車トラフィック監視などに関連するリアルタイムイベントを含み得る。サーバー712は、クライアントコンピューティングデバイス702,704,706,および708の1つ以上のディスプレイデバイスを介してデータフィードおよび/またはリアルタイムイベントを表示するための1つ以上のアプリケーションも含み得る。
また、分散型システム700は、1つ以上のデータベース714および716を含み得る。データベース714および716は、様々な場所に置かれ得る。たとえば、データベース714および716のうちの1つ以上は、サーバー712に対してローカルの(および/またはそこに置かれる)非一時的記憶媒体上に置かれ得る。代替的に、データベース714および716は、サーバー712から遠隔に設けられ得て、ネットワークベースもしくは専属接続を介してサーバー712と通信し得る。実施形態の1つのセットにおいて、データベース714および716は、ストレージエリアネットワーク(SAN)内に置かれ得る。同様に、サーバー712に帰する機能を行なうために必要な任意のファイルは、適宜、サーバー712にローカルに記憶され得る、および/または遠隔的に記憶され得る。実施形態の1つの集合において、データベース714および716は、SQLフォーマットの命令に応答してデータを記憶、更新、および検索するように適合される、Oracleによって提供されるデータベースなどのリレーショナルデータベースを含み得る。
図8は、本開示の実施形態に従う、実施形態のシステムの1つ以上のコンポーネントによって提供されるサービスがクラウドサービスとして提供され得るシステム環境800の1つ以上のコンポーネントの簡易化されたブロック図である。例示される実施形態では、システム環境800は、クラウドサービスを提供するクラウドインフラストラクチャーシステム802と相互作用するためにユーザーによって用いられ得る1つ以上のクライアントコンピューティングデバイス804,806,および808を含む。クライアントコンピューティングデバイスは、クラウドインフラストラクチャーシステム802と相互作用してクラウドインフラストラクチャーシステム802によって提供されるサービスを使用するためにクライアントコンピューティングデバイスのユーザーによって用いられ得るウェブブラウザー、専用クライアントアプリケーション(たとえばOracle Forms)または何らかの他のアプリケーションなどのクライアントアプリケーションを動作させるように構成され得る。
図に示されるクラウドインフラストラクチャーシステム802は、図に示されているもの以外のコンポーネントを有し得ることが認識されるべきである。さらに、図に示される実施形態は、開示の実施形態を組込み得るクラウドインフラストラクチャーシステムの単なる一例である。一部の他の実施形態において、クラウドインフラストラクチャーシステム802は図に示されるよりも多いかもしくは少ないコンポーネントを有してもよいし、2つ以上のコンポーネントを組み合わせてもよいし、または異なる構成または配置のコンポーネントを有してもよい。
クライアントコンピューティングデバイス804,806,および808は、702,704,706,および708について上記したのと同様のデバイスであり得る。
典型的なシステム環境800は、3つのクライアントコンピューティングデバイスを用いて例示的なシステム環境800が示されているが、任意の数のクライアントコンピューティングデバイスが支持され得る。センサーを有するデバイスなどの他のデバイスが、サーバー812と対話し得る。
ネットワーク810は、クライアント804,806、808とクラウドインフラストラクチャーシステム802との間のデータの通信および交換を容易にし得る。各ネットワークは、ネットワーク1410について上記したものを含む様々な商業的に利用可能なプロトコルのいずれかを使用してデータ通信をサポートすることができる、当業者によく知られた任意のタイプのネットワークであり得る。
クラウドインフラストラクチャーシステム802は、サーバー712について上記したものを含み得る1つ以上のコンピューターおよび/またはサーバーを含み得る。
特定の実施形態において、クラウドインフラストラクチャーシステムによって提供されるサービスは、オンラインデータストレージおよびバックアップソリューション、ウェブベースの電子メールサービス、ホストされたオフィスパッケージおよびドキュメントコラボレーションサービス、データベース処理、管理された技術サポートサービス等といったクラウドインフラストラクチャーシステムのユーザーに対してオンデマンドで利用可能とされる多数のサービスを含み得る。クラウドインフラストラクチャーシステムによって提供されるサービスは、そのユーザーのニーズを満たすために動的にスケール変更することができる。クラウドインフラストラクチャーシステムによって提供されるサービスの具体的なインスタンス化は、本明細書において「サービスインスタンス」と称される。一般に、クラウドサービスプロバイダーのシステムから、インターネットなどの通信ネットワークを介してユーザーに利用可能とされる任意のサービスは、「クラウドサービス」と称される。典型的に、パブリッククラウド環境において、クラウドサービスプロバイダーのシステムを構築するサーバーおよびシステムは、カスタマー自身のオンプレミスサーバーおよびシステムとは異なる。たとえば、クラウドサービスプロバイダーのシステムはアプリケーションをホストし得て、ユーザーは、インターネットなどの通信ネットワークを介してオンデマンドにアプリケーションをオーダーし、使用し得る。
一部の例において、コンピューターネットワーククラウドインフラストラクチャーにおけるサービスは、クラウドベンダーによってユーザーに提供される記憶部、ホストされたデータベース、ホストされたウェブサーバー、ソフトウェアアプリケーション、または他のサービスに対する保護されたコンピューターネットワークアクセスを含み得るか、または当技術において他の方法で知られている。たとえば、サービスは、インターネットを通じてクラウド上の遠隔ストレージに対するパスワードで保護されたアクセスを含むことができる。別の例として、サービスは、ネットワーク化されたデベロッパーによる私的使用のためのウェブサービスベースのホストされたリレーショナルデータベースおよびスクリプト言語ミドルウェアエンジンを含むことができる。別の例として、サービスは、クラウドベンダーのウェブサイト上にホストされた電子メールソフトウェアアプリケーションに対するアクセスを含むことができる。
特定の実施形態において、クラウドインフラストラクチャーシステム802は、セルフサービスで、申し込みに基づき、弾力的に拡張可能で、確実で、非常に有効で、安全なやり方でカスタマーに与えられるアプリケーション、ミドルウェアおよびデータベースサービス提供物一式を含み得る。そのようなクラウドインフラストラクチャーシステムの一例は、本譲受人によって提供されるOracle Public Cloudである。
様々な実施形態において、クラウドインフラストラクチャーシステム802は、クラウドインフラストラクチャーシステム802によって提供されるサービスに対するカスタマーの申し込みを自動的にプロビジョニングし、管理し、かつトラックするように適合され得る。クラウドインフラストラクチャーシステム802は、異なるデプロイメントモデルを介してクラウドサービスを提供し得る。たとえば、サービスは、(たとえばOracle所有の)クラウドサービスを販売する組織によってクラウドインフラストラクチャーシステム802が所有されるパブリッククラウドモデルの下で提供され得て、サービスは、一般大衆または異なる産業企業にとって利用可能とされる。別の例として、サービスは、クラウドインフラストラクチャーシステム802が単一の組織のためにのみ動作され、組織内の1つ以上のエンティティのためのサービスを提供し得る個人のクラウドモデルの下で提供され得る。また、クラウドサービスは、クラウドインフラストラクチャーシステム802およびクラウドインフラストラクチャーシステム802によって提供されるサービスが、関連するコミュニティー内の一部の組織によって共有されるコミュニティークラウドモデルの下で提供され得る。また、クラウドサービスは、2つ以上の異なるモデルの組み合せであるハイブリッドクラウドモデルの下で提供され得る。
一部の実施形態において、クラウドインフラストラクチャーシステム802によって提供されるサービスは、Service(SaaS)カテゴリーとしてのソフトウェア、Service(PaaS)カテゴリーとしてのプラットフォーム、Service(IaaS)カテゴリーとしてのインフラストラクチャー、またはハイブリッドサービスを含む他のカテゴリーのサービスの下で提供される1つ以上のサービスを含み得る。カスタマーは、クラウドインフラストラクチャーシステム802によって提供される1つ以上のサービスを申し込みオーダーによってオーダーし得る。クラウドインフラストラクチャーシステム802は次いで、カスタマーの申し込みオーダーにおけるサービスを提供するための処理を行なう。
一部の実施形態において、クラウドインフラストラクチャーシステム802によって提供されるサービスは、限定はしないが、アプリケーションサービス、プラットフォームサービスおよびインフラストラクチャーサービスを含み得る。一部の例において、アプリケーションサービスは、クラウドインフラストラクチャーシステムによってSaaSプラットフォームを介して提供され得る。SaaSプラットフォームは、SaaSカテゴリーに入るクラウドサービスを提供するように構成され得る。たとえば、SaaSプラットフォームは、統合された開発およびデプロイメントプラットフォーム上のオンデマンドのアプリケーション一式を構築し、伝える能力を提供し得る。SaaSプラットフォームは、SaaSサービスを提供するための基礎的なソフトウェアおよびインフラストラクチャーを管理し、制御し得る。SaaSプラットフォームによって提供されるサービスを利用することによって、カスタマーは、クラウドインフラストラクチャーシステム上で実行するアプリケーションを利用することができる。カスタマーは、カスタマーが別個のライセンスおよびサポートを購入する必要なしに、アプリケーションサービスを得ることができる。様々な異なるSaaSサービスが提供され得る。例は、限定はしないが、大きな組織のための販売実績管理、企業統合およびビジネス上のフレキシビリティのためのソリューションを提供するサービスを含む。
一部の実施形態において、プラットフォームサービスは、クラウドインフラストラクチャーシステムによってPaaSプラットフォームを介して提供され得る。PaaSプラットフォームは、PaaSカテゴリーに入るクラウドサービスを提供するように構成され得る。プラットフォームサービスの例は、共有の共通アーキテクチャ上の既存のアプリケーションを組織(Oracleなど)が統合することを可能にするサービスと、プラットフォームによって提供される共有サービスを活用する新しいアプリケーションを構築する能力とを含み得る。PaaSプラットフォームは、PaaSサービスを提供するための基礎的なソフトウェアおよびインフラストラクチャーを管理し、制御し得る。カスタマーは、カスタマーが別個のライセンスおよびサポートを購入する必要なしに、クラウドインフラストラクチャーシステムによって提供されるPaaSサービスを得ることができる。プラットフォームサービスの例は、限定はしないが、Oracle Java Cloud Service(JCS)、Oracle Database Cloud Service(DBCS)他を含む。
PaaSプラットフォームによって提供されるサービスを利用することによって、カスタマーは、クラウドインフラストラクチャーシステムによってサポートされたプログラミング言語およびツールを採用し、また、デプロイされたサービスを制御することができる。一部の実施形態において、クラウドインフラストラクチャーシステムによって提供されるプラットフォームサービスは、データベースクラウドサービス、ミドルウェアクラウドサービス(たとえばOracle Fusion Middleware services)、およびJavaクラウドサービスを含み得る。一実施形態において、データベースクラウドサービスは、組織がデータベースリソースをプールし、かつデータベースクラウドの形態でのサービスとしてカスタマーにデータベースを提示することを可能にする共有サービスデプロイメントモデルをサポートし得る。ミドルウェアクラウドサービスは、カスタマーが様々なビジネスアプリケーションを展開しデプロイするためのプラットフォームを提供し得て、Javaクラウドサービスは、クラウドインフラストラクチャーシステムにおいてカスタマーがJavaアプリケーションをデプロイするためのプラットフォームを提供し得る。
様々な異なるインフラストラクチャーサービスは、クラウドインフラストラクチャーシステムにおいてIaaSプラットフォームによって提供され得る。インフラストラクチャーサービスは、SaaSプラットフォームおよびPaaSプラットフォームによって提供されるサービスを利用するカスタマーのための記憶部、ネットワーク、および他の基本のコンピューティングリソースといった基礎的なコンピューティングリソースの管理および制御を容易にする。
特定の実施形態において、クラウドインフラストラクチャーシステム802は、クラウドインフラストラクチャーシステムのカスタマーに様々なサービスを提供するために用いられるリソースを提供するためのインフラストラクチャーリソース830を含み得る。一実施形態において、インフラストラクチャーリソース830は、PaaSプラットフォームおよびSaaSプラットフォームによって提供されるサービスを実行するためのサーバー、記憶部、およびネットワークのリソースといったハードウェアのあらかじめ統合され最適化された組み合せを含み得る。
一部の実施形態において、クラウドインフラストラクチャーシステム802におけるリソースは、複数のユーザーによって共有され、要求ごとに動的に再び割り当てられ得る。加えて、リソースは、異なるタイムゾーンのユーザーに割り当てられ得る。たとえば、クラウドインフラストラクチャーシステム830は、第1のタイムゾーンでの第1の組のユーザーに特定数の時間クラウドインフラストラクチャーシステムのリソースを利用させ、次いで異なるタイムゾーンに位置する別の組のユーザーに対する同じリソースの再割り当てを可能にすることが可能であり、それによってリソースの利用を最大化し得る。
特定の実施形態において、クラウドインフラストラクチャーシステム802の異なるコンポーネントまたはモジュールによって、かつクラウドインフラストラクチャーシステム802により提供されるサービスによって共有される多数の内部共有サービス832が提供され得る。これらの内部共有サービスは、限定はしないが、セキュリティおよびアイデンティティサービス、インテグレーションサービス、企業リポジトリサービス、企業マネージャーサービス、ウィルススキャン、およびホワイトリストサービス、高アベイラビリティ、保存後修復サービス、クラウドサポートを可能にするためのサービス、電子メールサービス、通知サービス、ファイル転送サービス等を含み得る。
特定の実施形態において、クラウドインフラストラクチャーシステム802は、クラウドインフラストラクチャーシステムにおいてクラウドサービス(たとえばSaaS、PaaSおよびIaaSサービス)の包括的な管理を提供し得る。一実施形態において、クラウド管理機能性は、クラウドインフラストラクチャーシステム802によって受信されたカスタマーの申し込みをプロビジョニングし、管理し、トラックする機能を含み得る。
一実施形態において、図に示されるように、クラウド管理機能性は、オーダー管理モジュール820、オーダー組織化モジュール822、オーダープロビジョニングモジュール824、オーダー管理および監視モジュール826、およびアイデンティティ管理モジュール828といった1つ以上のモジュールによって提供され得る。これらのモジュールは、汎用コンピューター、専用サーバーコンピューター、サーバーファーム、サーバークラスター、および/または任意の他の適切な配置および/または組み合せであり得る1つ以上のコンピューターおよび/またはサーバーを含み得るか、またはそれらを用いて提供され得る。
典型的な動作834において、クライアントデバイス804、806、または808などのクライアントデバイスを用いるカスタマーは、クラウドインフラストラクチャーシステム802によって提供される1つ以上のサービスをリクエストし、クラウドインフラストラクチャーシステム802によって提示される1つ以上のサービスに申し込むためのオーダーを行うことによって、クラウドインフラストラクチャーシステム802と相互作用し得る。特定の実施形態において、カスタマーは、クラウドユーザーインターフェイス(UI)、クラウドUI812、クラウドUI814、および/またはクラウドUI816にアクセスし、これらのUIを介して申し込みオーダーを行ない得る。カスタマーがオーダーを行ったことに応じてクラウドインフラストラクチャーシステム802によって受信されるオーダー情報は、カスタマーを識別する情報と、カスタマーが申し込むつもりのクラウドインフラストラクチャーシステム802によって提供される1つ以上のサービスとを含み得る。
カスタマーによってオーダーが行なわれた後、オーダー情報は、クラウドUI812,814,および/または816によって受信される。
動作836において、オーダーはオーダーデータベース818に記憶される。オーダーデータベース818は、クラウドインフラストラクチャーシステム818によって動作され、他のシステムエレメントと共に動作される一部のデータベースの1つであり得る。
動作838において、オーダー情報はオーダー管理モジュール820に転送される。一部のインスタンスにおいて、オーダー管理モジュール820は、オーダーを確認し、確認後にオーダーを記入するなどの、オーダーに関連する課金および会計機能を行なうように構成され得る。
動作840において、オーダーに関する情報がオーダー組織化モジュール822に伝えられる。オーダー組織化モジュール822は、カスタマーによって行なわれたオーダーのためのサービスおよびリソースのプロビジョニングを調整するためにオーダー情報を利用し得る。一部のインスタンスにおいて、組織化モジュール822は、リソースのプロビジョニングを組織化して、申し込まれたサービスをオーダープロビジョニングモジュール824のサービスを用いてサポートし得る。
特定の実施形態において、オーダー組織化モジュール822は、各オーダーに関連付けられるビジネスプロセスの管理を可能にし、オーダーがプロビジョニングに進むべきかどうか判定するためにビジネスロジックを適用する。動作842において、新規申し込みのためのオーダーを受信すると、オーダー組織化モジュール822は、オーダープロビジョニングモジュール824にリクエストを送信して、リソースを割り当て、申し込みオーダーを遂行するために必要とされるリソースを構成する。オーダープロビジョニングモジュール824は、カスタマーによってオーダーされたサービスのためのリソースの割り当てを可能にする。オーダープロビジョニングモジュール824は、クラウドインフラストラクチャーシステム800によって提供されるクラウドサービスと、リクエストされたサービスを提供するためにリソースをプロビジョニングのために用いられる物理的な実施層との間に抽象化レベルを提供する。オーダー組織化モジュール822はしたがって、サービスおよびリソースが実際にオンザフライでプロビジョニングされるかまたはあらかじめプロビジョニングされ、かつリクエスト後に割当て/アサインされたかどうかといった実施詳細から分離され得る。
動作844において、ひとたびサービスおよびリソースがプロビジョニングされると、プロビジョニングされたサービスの通知が、クラウドインフラストラクチャーシステム802のオーダープロビジョニングモジュール824によってクライアントデバイス804、806および/または808上のカスタマーに送信され得る。
動作846において、カスタマーの申し込みオーダーは、オーダー管理および監視モジュール826によって管理され、追跡され得る。一部のインスタンスにおいて、オーダー管理および監視モジュール826は、用いられる記憶部の量、転送されるデータ量、ユーザー数、ならびにシステムアップタイムおよびシステムダウンタイムの量といった、申し込みオーダーにおけるサービスのための使用統計を収集するように構成され得る。
特定の実施形態において、クラウドインフラストラクチャーシステム800は、アイデンティティ管理モジュール828を含み得る。アイデンティティ管理モジュール828はクラウドインフラストラクチャーシステム800へのアクセス管理および権限付与のサービスといったアイデンティティサービスを提供するように構成され得る。一部の実施形態において、アイデンティティ管理モジュール828は、クラウドインフラストラクチャーシステム802によって提供されるサービスを利用したいカスタマーに関する情報を制御し得る。そのような情報は、そのようなカスタマーのアイデンティティを認証する情報と、どの動作によって様々なシステムリソース(たとえばファイル、ディレクトリ、アプリケーション、通信ポート、メモリーセグメントなど)に対してそれらのカスタマーが行なうことを権限付与されるかを記述する情報とを含むことができる。アイデンティティ管理モジュール828は、各カスタマーについての、またどのように誰によってその記述情報がアクセスされ変更することができるかについての記述情報の管理も含み得る。
図9は、本開示の様々な実施形態が実施され得る典型的なコンピューターシステム900を例示する。システム900は上記したコンピューターシステムのうちのいずれかを実施するために用いられ得る。図に示されるように、コンピューターシステム900は、バスサブシステム902を介して多くの周辺サブシステムと通信する処理ユニット904を含む。これらの周辺サブシステムは、処理加速ユニット906、I/Oサブシステム908、記憶サブシステム918、および通信サブシステム924を含み得る。記憶サブシステム918は、有形のコンピューター読取可能記憶媒体922およびシステムメモリー910を含む。
バスサブシステム902は、コンピューターシステム900の様々なコンポーネントおよびサブシステムを意図される通りに互いに通信させるためのメカニズムを提供する。バスサブシステム902は、単母線として概略的に示されるが、バスサブシステムの代替的な実施形態は複数のバスを利用し得る。バスサブシステム902は、多様なバスアーキテクチャのうちのいずれかを用いて、メモリーバスまたはメモリーコントローラー、周辺バス、およびローカルバスを含むいくつかのタイプのバス構造のいずれかであり得る。たとえば、そのようなアーキテクチャは、IEEE P1386.1規格で製造されたMezzanineバスとして実施することができるIndustry Standard Architecture (ISA)バス、Micro Channel Architecture(MCA)バス、Enhanced ISA(EISA)バス、Video Electronics Standards Association (VESA)ローカルバス、およびPeripheral Component Interconnect (PCI)を含み得る。
1つ以上の集積回路(たとえば従来のマイクロプロセッサーまたはマイクロコントローラー)として実施することができる処理ユニット904は、コンピューターシステム900の動作を制御する。1つ以上のプロセッサーが処理ユニット904に含まれ得る。これらのプロセッサーは、シングルコアまたはマルチコアプロセッサーを含み得る。特定の実施形態において、処理ユニット904は、各処理ユニットに含まれるシングルまたはマルチコアプロセッサーを有する1つ以上の独立した処理ユニット932および/または934として実施され得る。他の実施形態において、処理ユニット904は、2つのデュアルコアプロセッサーをシングルチップに統合することによって形成されたクアッドコア処理ユニットとしても実施され得る。
様々な実施形態において、処理ユニット904はプログラムコードに応じて様々なプログラムを実行することができ、複数の同時に実行するプログラムまたはプロセスを維持することができる。任意の所与の時間において、実行されるべきプログラムコードの一部またはすべては、プロセッサー904におよび/または記憶サブシステム918に存在し得る。適切なプログラミングによって、プロセッサー904は、上記した様々な機能を提供することができる。コンピューターシステム900は加えて、デジタル信号プロセッサー(DSP)、専用プロセッサーなどを含むことができる処理加速ユニット906を含み得る。
I/Oサブシステム908は、ユーザーインターフェイス入力デバイスおよびユーザーインターフェイス出力デバイスを含み得る。ユーザーインターフェイス入力デバイスは、キーボード、マウスまたはトラックボールなどのポインティングデバイス、ディスプレイに組込まれたタッチパッドまたはタッチスクリーン、スクロールホイール、クリックホイール、ダイヤル、ボタン、スイッチ、キーパッド、音声コマンド認識システム付きオーディオ入力デバイス、マイクロフォン、および他の種類の入力デバイスを含み得る。ユーザーインターフェイス入力デバイスは、たとえば、ジェスチャーおよび口頭での指示を用いた生来のユーザーインターフェイスによって、Microsoft Xbox(登録商標)360ゲームコントローラーなどの入力デバイスをユーザーが制御しそれと対話することを可能にするMicrosoft Kinect(登録商標)モーションセンサなどの動き検知および/またはジェスチャー認識装置を含み得る。ユーザーインターフェイス入力デバイスは、ユーザーから目の動作(たとえば撮影および/またはメニュー選択を行っている間の「まばたき」)を検出し、アイジェスチャーを入力デバイス(たとえばGoogle Glass(登録商標))への入力として変換するGoogle Glass(登録商標)まばたき検出器などのアイジェスチャー認識装置を含み得る。加えて、ユーザーインターフェイス入力デバイスは、ユーザーが音声コマンドによって音声認識システム(たとえばSiri(登録商標)ナビゲーター)と相互作用することを可能にする音声認識検知装置を含み得る。
ユーザーインターフェイス入力デバイスは、限定はしないが、三次元(3D)マウス、ジョイスティックまたはポインティングスティック、ゲームパッドおよびグラフィックタブレット、およびスピーカーなどのオーディオ/ビジュアル装置、デジタルカメラ、デジタルビデオカメラ、ポータブルメディアプレイヤー、ウェブカメラ、イメージスキャナ、指紋スキャナ、バーコードリーダー、3Dスキャナ、3Dプリンター、レーザー測距装置、およびアイゲイズトラッキング装置を含み得る。加えて、ユーザーインターフェイス入力デバイスは、たとえば、コンピューター断層撮影装置、磁気共鳴画像装置、ポジトロン断層撮影装置、医療用超音波検査装置などの医療用撮像入力デバイスを含み得る。ユーザーインターフェイス入力デバイスは、たとえば、MIDIキーボード、デジタル楽器などといった音声入力装置も含み得る。
ユーザーインターフェイス出力デバイスは、ディスプレイサブシステム、表示灯、または音声出力装置などの非視覚的ディスプレイを含み得る。ディスプレイサブシステムは、陰極線管(CRT)、液晶ディスプレイ(LCD)またはプラズマディスプレイを用いるものなどのフラットパネルデバイス、投影デバイス、タッチスクリーンなどであり得る。一般に、「出力デバイス」という用語の使用は、コンピューターシステム900からユーザーまたは他のコンピューターに情報を出力するためのあらゆる可能な種類の装置およびメカニズムを含むことが意図されている。たとえば、ユーザーインターフェイス出力デバイスは、限定はしないが、モニタ、プリンター、スピーカー、ヘッドホン、カーナビ、プロッタ、音声出力デバイス、およびモデムといった、テキスト、図形、およびオーディオ/ビデオ情報を視覚的に伝える様々なディスプレイデバイスを含み得る。
コンピューターシステム900は、現在システムメモリー910内にあるものとして示される、ソフトウェア要素を含む記憶サブシステム918を含み得る。システムメモリー910は、処理ユニット904上でローディング可能および実行可能なプログラム命令ならびにこれらのプログラムの実行時に生成されるデータを記憶し得る。
コンピューターシステム900の構成およびタイプに応じて、システムメモリー910は、揮発性(ランダムアクセスメモリー(RAM)など)および/または不揮発性(読み取り専用メモリー(ROM)、フラッシュメモリーなど)であり得る。RAMは、処理ユニット904に直ちにアクセス可能であり、かつ/または処理ユニット904によって現在動作され実行されているデータおよび/またはプログラムモジュールを典型的に含む。一部の実施において、システムメモリー910は、スタティックランダムアクセスメモリー(SRAM)またはダイナミックランダムアクセスメモリー(DRAM)などの複数の異なるタイプのメモリーを含み得る。一部の実施において、起動中などにコンピューターシステム900内の要素間で情報を転送するのを支援する基本的なルーチンを含んでいる基本入力/出力システム(BIOS)は、典型的にROMに記憶され得る。例として、限定ではないが、システムメモリー910は、アプリケーションプログラム912も例示する。アプリケーションプログラム912は、クライアントアプリケーション、ウェブブラウザー、ミッドティアアプリケーション、リレーショナルデータベース管理システム(RDBMS)等、プログラムデータ914、およびオペレーティングシステム916を含み得る。例として、オペレーティングシステム916は、Microsoft Windows(登録商標)、Apple Macintosh(登録商標)および/またはLinuxオペレーティングシステムの様々なバージョン、様々な商業的に利用可能なUNIX(登録商標)もしくはUNIXのようなオペレーティングシステム(限定はしないが様々なGNU/Linuxオペレーティングシステム、Google Chrome(登録商標)OS等を含む)、および/またはiOS、Windows(登録商標)フォン、Android(登録商標)OS、BlackBerry(登録商標)9 OSおよびPalm(登録商標)OSオペレーティングシステムなどのモバイルオペレーティングシステムを含み得る。
記憶サブシステム918は、一部の実施形態の機能性を提供する基本的なプログラミングおよびデータ構造体を記憶するための有形のコンピューター読取可能記憶媒体も提供し得る。プロセッサーによって実行されると上記した機能性を提供するソフトウェア(プログラム、コードモジュール、命令)は、記憶サブシステム918に記憶され得る。これらのソフトウェアモジュールまたは命令は、処理ユニット904によって実行され得る。記憶サブシステム918は、本開示に従って用いられるデータを記憶するためのリポジトリを提供し得る。
記憶サブシステム900は、コンピューター読取可能記憶媒体922にさらに接続することができるコンピューター読取可能記憶媒体リーダー920も含み得る。これらは合わせて、および、選択的には、システムメモリー910と組み合わせて包括的に、遠隔、ローカル、固定、および/またはリムーバブル記憶デバイスと、コンピューター読取可能情報を一時的および/またはより永続的に含み、記憶し、送信し、かつ取り出すための記憶媒体とを加えたものを表わす。
コードもしくはコードの一部を含むコンピューター読み取り可能記憶媒体922は、当該技術において知られる、もしくは使用される任意の適切な媒体も含むことができ、この媒体には、情報の記憶および/または伝達のための任意の方法および技術において実施される揮発性および不揮発性(非一時的)のリムーバブルおよび非リムーバブル媒体などの記憶媒体および通信媒体が含まれる。これは、RAM、ROM、電気的消去可能プログラム可能なROM(EEPROM)、フラッシュメモリー、もしくは他のメモリー技術、CD−ROM、デジタルバーサタイルディスク(DVD)、もしくは他の光学記憶部、磁気カセット、磁気テープ、磁気ディスク記憶部、もしくは他の磁気記憶デバイス、または他の有形のコンピューター読取可能媒体が含むことができる。これは、データ信号、データ伝送、または所望の情報を送信するために用いることができ、コンピューティングシステム900によってアクセスすることができる任意の他の媒体などの非有形のコンピューター読取可能媒体も含むことができる。
例として、コンピューター読取可能記憶媒体922は、非リムーバブルで不揮発性の磁気媒体から読出すかまたはそこに書込むハードディスクドライブ、リムーバブルで不揮発性の磁気ディスクから読出すかまたはそこに書込む磁気ディスクドライブ、およびCD ROM、DVD、およびBlu-Ray(登録商標)ディスクなどのリムーバブルで不揮発性の光ディスクから読出すかまたはそこに書込む光ディスクドライブ、または他の光媒体を含み得る。コンピューター読取可能記憶媒体922は、限定はしないが、Zip(登録商標)ドライブ、フラッシュメモリーカード、ユニバーサルシリアルバス(USB)フラッシュドライブ、セキュアデジタル(SD)カード、DVDディスク、デジタルビデオテープなどを含み得る。コンピューター読取可能記憶媒体922は、フラッシュメモリーベースのSSD、企業フラッシュドライブ、ソリッドステートROM等といった不揮発性メモリーベースのソリッドステートドライブ(SSD)、ソリッドステートRAM、ダイナミックRAM、スタティックRAM、DRAMベースのSSD、磁気抵抗RAM(MRAM)SSD、ならびにDRAMおよびフラッシュメモリーベースのSSDの組み合せを用いるハイブリッドSSDなどの揮発性メモリーベースのSSDも含み得る。ディスクドライブおよびそれらの関連付けられたコンピューター読取可能媒体は、コンピューター読取可能命令、データ構造、プログラムモジュール、および他のデータの不揮発性記憶装置をコンピューターシステム900に提供し得る。
通信サブシステム924は、他のコンピューターシステムおよびネットワークへのインターフェイスを提供する。通信サブシステム924は、データを受信し、コンピューターシステム900から他のシステムにデータを送信するためのインターフェイスとして機能する。たとえば、通信サブシステム924は、コンピューターシステム900がインターネットを介して1つ以上の装置に接続することを可能にし得る。一部の実施形態において、通信サブシステム924は、(たとえば携帯電話技術、3G、4GまたはEDGE(enhanced data rates for global evolution)などの高度データネットワーク技術、WiFi(IEEE 1402.11系列基準、もしくは他の移動通信技術、またはそれらの任意の組み合せを用いて)無線音声および/またはデータネットワークにアクセスするための無線周波数(RF)トランシーバーコンポーネント、全地球測位システム(GPS)レシーバーコンポーネント、ならびに/または他のコンポーネントを含むことができる。一部の実施形態において、通信サブシステム924は、無線インターフェイスに加えて、またはその代わりに、有線ネットワークコネクティビティ(たとえばイーサネット(登録商標))を提供することができる。
一部の実施形態において、通信サブシステム924は、コンピューターシステム900を使用し得る一人以上のユーザーのために、構造化されたおよび/または構造化されていないデータフィード926、イベントストリーム928、イベント更新930などの形態の入力通信も受信し得る。
例として、通信サブシステム924は、Twitter(登録商標)フィード、Facebook(登録商標)更新、Rich Site Summary(RSS)フィードなどのウェブフィード、および/または1つ以上の第三者情報源からのリアルタイム更新などのソーシャルネットワークおよび/または他の通信サービスのユーザーからリアルタイムにデータフィード926を受信するように構成され得る。
加えて、通信サブシステム924は、明示的な終わりのない本質的に連続的または無限であり得るリアルタイムイベントのイベントストリーム928および/またはイベント更新930を含み得る連続的なデータストリームの形態でデータを受信するようにも構成され得る。連続的なデータを生成するアプリケーションの例は、たとえば、センサーデータアプリケーション、株式相場表示装置、ネットワーク性能測定ツール(たとえば、ネットワーク監視およびトラフィック管理アプリケーション)、クリックストリーム分析ツール、自動車トラフィック監視などを含み得る。
通信サブシステム924は、構造化されたデータおよび/または構造化されていないデータフィード926、イベントストリーム928、イベント更新930等を、コンピューターシステム900に結合された1つ以上のストリーミングデータソースコンピューターと通信し得る1つ以上のデータベースに出力するように構成され得る。
コンピューターシステム900は、ハンドヘルドポータブルデバイス(たとえばiPhone(登録商標)携帯電話、iPad(登録商標)コンピューティングタブレット、PDA)、ウェアラブルデバイス(たとえばGoogle Glass(登録商標)ヘッドマウンテッドディスプレイ)、PC、ワークステーション、メインフレーム、キオスク、サーバーラック、または任意の他のデータ処理システムを含む様々な種類のうちの1つであり得る。
コンピューターおよびネットワークの常に変化する性質により、図に示されるコンピューターシステム900の説明は具体的な一例としてのみ意図される。図に示されるシステムよりも多いかまたは少ないコンポーネントを有する他の多くの構造が可能である。たとえば、カスタマイズされるハードウェアも使用され得る、および/または特定の要素がハードウェア、ファームウェア、ソフトウェア(アプレットを含む)、または組み合せで実施され得る。さらに、ネットワーク入力/出力デバイスなどの他のコンピューティングデバイスへの接続も採用され得る。本明細書において提供される開示および教示に基づいて、当該分野の当業者は、様々な実施形態を実施する他のやり方および/または方法を認識するであろう。
図10は、実施形態に従うシステム1000のブロック図である。システム1000のブロックは、本発明の原則を実行するために、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合せによって実施され得る。当業者は、図10に記載されるブロックが組み合わされ得る、またはサブブロックに分離され得て、上記の本発明の原則が実施されることを理解する。たとえば、第1の受信ユニット1002および第2の受信ユニット1003は、1つの受信ユニットに統合することができる。このため、本願明細書における記載は、可能性のある組み合せもしくは分離、または本願明細書に記載される機能ブロックのさらなる定義を支持し得る。
図10に示されるように、システム1000は、識別ユニット1001、第1の受信ユニット1002、第2の受信ユニット1003、関連付けユニット1004、構成ユニット1005、パーティションユニット1006、第1の提供ユニット1007、および第2の提供ユニット1008を含む。識別ユニット1001は、ユーザーに関連付けられるデータストリームを識別することができる。第1の受信ユニット1002は、識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信することができる。第2の受信ユニット1003は、識別されたデータストリームの属性を識別するコードをユーザーから受信することができる。コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能である。関連付けユニット1004は、コードをクエリに関連付けることができる。構成ユニット1005は、コードがクエリに関連付けられた後、属性に少なくとも部分的に基づいてデータストリームをパーティションするようにクエリを構成することができる。パーティションユニット1006は、属性に少なくとも部分的に基づいてデータストリームを複数の部分にパーティションすることができる。第1の提供ユニット1007は、複数の部分のうち少なくとも1つのためのサブストリームをクエリに提供することができる。第2の提供ユニット1008は、提供されたサブストリームに少なくとも部分的に基づいてクエリの結果を提供することができる。
発明の実施形態によれば、コードは、ユーザーに提供されるコントラクトに少なくとも部分的に基づくオブジェクト指向のクラスを含み、構成ユニットは、オブジェクト指向のクラスにクエリを結び付けることができる結び付けユニットを含む。
発明の実施形態によれば、システム1000はさらに、第3の受信ユニット1009、第3の提供ユニット1010、および第4の受信ユニット1011を含むことができる。第3の受信ユニット1009は、クエリに少なくとも部分的に基づいてデータストリームのイベントを受信することができる。第3の提供ユニット1010は、イベントをオブジェクト指向のクラスに提供することができる。第4の受信ユニットは、オブジェクト指向のクラスからの出力を受信することができる。
発明の実施形態によれば、データストリームは、オブジェクト指向のクラスからの出力に少なくとも部分的に基づいてパーティションされる。
発明の実施形態によれば、属性は、ユーザーのカスタマーのコンピューティングデバイスの第1の識別子、ユーザーに関連付けられる項目の第2の識別子、または当該項目に関連付けられる項目属性の第3の識別子のうち少なくとも1つを含む。
発明の実施形態によれば、カスタマーのコンピューティングデバイスの識別子は、カスタマーのコンピューティングデバイスのインターネットプロトコルアドレス、またはカスタマーのコンピューティングデバイスが位置する地理的領域を示す。
図11は、実施形態に従うシステム1100のブロック図である。システム1100のブロックは、本発明の原則を実行するために、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合せによって実施され得る。当業者は、上記の本発明の原則を実行するために図11のブロックが結合され得る、またはサブブロックに分離され得ることを理解する。たとえば、第2の受信ユニット1105および第3の受信ユニット1108は、1つの受信ユニットに統合することができる。このため、本願明細書における記載は、可能性のある組み合せもしくは分離、または本願明細書に記載の機能ブロックのさらなる定義を支持し得る。
図11に示されるように、システム1100は、識別ユニット1101、第1の受信ユニット1102、構成ユニット1103、処理ユニット1104、第2の受信ユニット1105、提供ユニット1106、実施ユニット1107、および第3の受信ユニット1108を含む。識別ユニット1101は、ユーザーに関連付けられるデータストリームの少なくとも一部分を処理するためのクエリを識別することができる。第1の受信ユニット1102は、識別されたデータストリームの属性を識別するコードをユーザーから受信することができる。コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能である。構成ユニット1103は、属性に少なくとも部分的に基づいてデータストリームの1つ以上のサブストリームを処理するようにクエリを構成することができる。
発明の実施形態によれば、システムはさらに並列処理ユニット1104を含むことができる。処理ユニット1104は、1つ以上のサブストリームの複数を並行して処理することができる。
発明の実施形態によれば、コードは、ユーザーに提供されるjavaコントラクトに少なくとも部分的に基づくjavaクラスを含むことができる。
発明の実施形態によれば、システムはさらに、第3の受信ユニット1105、提供ユニット1106、実施ユニット1107、および第3の受信ユニット1108を含むことができる。
発明の実施形態によれば、javaクラスからの出力は、1つ以上のサブストリームのうちの少なくとも1つである。
発明の実施形態によれば、属性は、コードの受信に先立ってユーザーによって特定される。
発明の実施形態によれば、1つ以上のサブストリームのうち少なくとも1つのサブストリームは、データストリームの少なくとも一部分に対して実行されるハッシュ関数に少なくとも部分的に基づいて生成される。
図12は、実施形態に従うコンピューター実装システム1200のブロック図である。システム1200のブロックは、本発明の原則を実行するために、ハードウェア、ソフトウェア、またはハードウェアとソフトウェアの組み合せによって実施され得る。当業者は、上記の本発明の原則を実行するために図12のブロックが結合され得る、またはサブブロックに分離され得ることを理解する。たとえば、第1の受信ユニット1202および第2の受信ユニット1203は、1つの受信ユニットに統合することができる。このため、本願明細書における記載は、可能性のある組み合せもしくは分離、または本願明細書に記載の機能ブロックのさらなる定義を支持し得る。
図12に示されるように、コンピューター実装システム1200は、識別ユニット1201、第1の受信ユニット1202、第2の受信ユニット1203、構成ユニット1204、および処理ユニット1205を含む。識別ユニット1201は、ユーザーに関連付けられるデータストリームを識別することができる。第1の受信ユニット1202は、識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信することができる。第2の受信ユニット1203は、識別されたデータストリームの属性を識別するコードをユーザーから受信することができる。コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能である。構成ユニット1204は、属性に少なくとも部分的に基づいてデータストリームを少なくとも1つのサブストリームにパーティションするようにコードを構成することができる。処理ユニット1205は、受信されたクエリを用いて、少なくとも1つのサブストリームを処理することができる。
発明の実施形態によれば、コンピューター実装システムはさらに、コードをクエリに関連付けることができる関連付けユニット1206を含むことができる。
発明の実施形態によれば、少なくとも1つのサブストリームは、コードから出力として受信された少なくとも第2のサブストリームと並行して、受信されたクエリを用いて処理されることができる。
発明の実施形態によれば、コンピューター実装システムはさらに、第3の受信ユニット1207、提供ユニット1208、実施ユニット1209、および第4の受信ユニット1210を含むことができる。第3の受信ユニット1207は、クエリに少なくとも部分的に基づいてデータストリームのイベントを受信することができる。提供ユニット1208は、受信されたコードに対応するjavaクラスにイベントを提供することができる。実施ユニット1209は、属性に少なくとも部分的に基づいてイベントを処理するためにjavaクラスを実施することができる。第4の受信ユニット1210は、少なくとも1つのサブストリームを識別するjavaクラスからの出力を受信することができる。
発明の実施形態によれば、データストリームは、javaクラスに少なくとも部分的に基づいてパーティションされることができる。
発明の実施形態によれば、サブストリームは、複数の部分のうち少なくとも1つに対して行なわれるハッシュ関数に少なくとも部分的に基づいて生成されることができる。
発明の実施形態によれば、属性は、ユーザーのカスタマーに関連付けられるインターネットプロトコルアドレスまたはユーザーのカスタマーに関連付けられる地理的領域のうち少なくとも一方を含むことができる。
項目1。システムであって、
ユーザーに関連付けられるデータストリームを識別するように構成される識別ユニットと、
識別されたストリームの少なくとも一部分を処理するためのクエリを受信するように構成される第1の受信ユニットと、
識別されたデータストリームの属性を識別するコードをユーザーから受信するように構成される第2の受信ユニットとを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
コードをクエリに関連付けるように構成される関連付けユニットと、
コードがクエリに関連付けられた後、属性に少なくとも部分的に基づいてデータストリームをパーティションするようにクエリを構成するように構成される構成ユニットと、
属性に少なくとも部分的に基づいてデータストリームを複数の部分にパーティションするように構成されるパーティションユニットと、
複数の部分のうち少なくとも1つのためのサブストリームをクエリに提供するように構成される第1の提供ユニットと、
提供されたサブストリームに少なくとも部分的に基づいてクエリの結果を提供するように構成される第2の提供ユニットとを含む。
項目2。項目1のシステムであって、コードは、ユーザーに提供されるコントラクトに少なくとも部分的に基づくオブジェクト指向のクラスを含み、構成ユニットは、クエリをオブジェクト指向のクラスに結び付けるように構成される結び付けユニットを含む。
項目3。項目2のシステムであって、システムはさらに、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信するように構成される第3の受信ユニットと、
イベントをオブジェクト指向のクラスに提供するように構成される第3の提供ユニットと、
オブジェクト指向のクラスからの出力を受信するように構成される第4の受信ユニットとを含む。
項目4。項目3のシステムであって、データストリームは、オブジェクト指向のクラスからの出力に少なくとも部分的に基づいてパーティションされる。
項目5。項目1のシステムであって、属性は、ユーザーのカスタマーのコンピューティングデバイスの第1の識別子、ユーザーに関連付けられる項目の第2の識別子、または項目に関連付けられる項目属性の第3の識別子のうち少なくとも1つを含む。
項目6。項目5のシステムであって、カスタマーのコンピューティングデバイスの識別子は、カスタマーのコンピューティングデバイスのインターネットプロトコルアドレス、またはカスタマーのコンピューティングデバイスが位置する地理的領域を示す。
項目7。方法であって、
ユーザーに関連付けられるデータを識別することと、
識別されたストリームの少なくとも一部分を処理するためのクエリを受信することと、
識別されたデータストリームの属性を識別するコードをユーザーから受信することとを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
コンピューターシステムによって、コードをクエリに関連付けることと、
コードがクエリに関連付けられた後、属性に少なくとも部分的に基づいてデータストリームをパーティションするようにクエリを構成することと、
属性に少なくとも部分的に基づいてデータストリームを複数の部分にパーティションすることと、
複数の部分のうち少なくとも1つのためのサブストリームをクエリに提供することと、
提供されたサブストリームに少なくとも部分的に基づいてクエリの結果を提供することとを含む。
項目8。項目7の方法であって、コードは、ユーザーに提供されるコントラクトに少なくとも部分的に基づくオブジェクト指向のクラスを含み、クエリを構成することは、オブジェクト指向のクラスにクエリを結び付けるように構成される結び付けユニットを含む。
項目9。項目8の方法であって、方法はさらに、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信することと、
イベントをオブジェクト指向のクラスに提供することと、
オブジェクト指向のクラスからの出力を受信することとを含む。
項目10。項目9の方法であって、データストリームは、オブジェクト指向のクラスからの出力に少なくとも部分的に基づいてパーティションされる。
項目11。項目7の方法であって、属性は、ユーザーのカスタマーのコンピューティングデバイスの第1の識別子、ユーザーに関連付けられる項目の第2の識別子、または項目に関連付けられる項目属性の第3の識別子のうち少なくとも1つを含む。
項目12。項目11の方法であって、カスタマーのコンピューティングデバイスの識別子は、カスタマーのコンピューティングデバイスのインターネットプロトコルアドレス、またはカスタマーのコンピューティングデバイスが位置する地理的領域を示す。
項目13。システムであって、
ユーザーに関連付けられるデータストリームを識別するための手段と、
識別されたストリームの少なくとも一部分を処理するためのクエリを受信するための手段と、
識別されたデータストリームの属性を識別するコードをユーザーから受信するための手段とを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
コードをクエリに関連付けるための手段と、
コードがクエリに関連付けられた後、属性に少なくとも部分的に基づいてデータストリームをパーティションするようにクエリを構成するための手段と、
属性に少なくとも部分的に基づいてデータストリームを複数の部分にパーティションするための手段と、
複数の部分のうち少なくとも1つのためのサブストリームをクエリに提供するための手段と、
提供されたサブストリームに少なくとも部分的に基づいてクエリの結果を提供するための手段とを含む。
項目14。項目13のシステムであって、コードは、ユーザーに提供されるコントラクトに少なくとも部分的に基づくオブジェクト指向のクラスを含み、構成するための手段は、クエリをオブジェクト指向のクラスに結び付けるための手段を含む。
項目15。項目14のシステムであって、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信するための手段と、
イベントをオブジェクト指向のクラスに提供するための手段と、
オブジェクト指向のクラスからの出力を受信するための手段とをさらに含む。
項目16。項目15のシステムであって、データストリームは、オブジェクト指向のクラスからの出力に少なくとも部分的に基づいてパーティションされる。
項目17。項目13のシステムであって、属性は、ユーザーのカスタマーのコンピューティングデバイスの第1の識別子、ユーザーに関連付けられる項目の第2の識別子、または項目に関連付けられる項目属性の第3の識別子のうち少なくとも1つを含む。
項目18。項目17のシステムであって、カスタマーのコンピューティングデバイスの識別子は、カスタマーのコンピューティングデバイスのインターネットプロトコルアドレス、またはカスタマーのコンピューティングデバイスが位置する地理的領域を示す。
項目19。システムであって、
ユーザーに関連付けられるデータストリームの少なくとも一部分を処理するためのクエリを識別するように構成される識別ユニットと、
識別されたデータストリームの属性を識別するコードをユーザーから受信するように構成される第1の受信ユニットとを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
属性に少なくとも部分的に基づいてデータストリームの1つ以上のサブストリームを処理するようにクエリを構成するように構成される構成ユニットとを含む。
項目20。項目19のシステムであって、1つ以上のサブストリームの複数を並行して処理するように構成される処理ユニットをさらに含む。
項目21。項目19のシステムであって、コードは、ユーザーに提供されるjavaコントラクトに少なくとも部分的に基づくjavaクラスを含む。
項目22。項目21のシステムはさらに、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信するように構成される第2の受信ユニットと、
イベントをjavaクラスに提供するように構成される提供ユニットと、
属性に少なくとも部分的に基づいてイベントを処理するためにjavaクラスを実施するように構成される実施ユニットと、
javaクラスからの出力を受信するように構成される第3の受信ユニットとを含む。
項目23。項目22のシステムにおいて、javaクラスからの出力は、1つ以上のサブストリームのうちの少なくとも1つである。
項目24。項目19のシステムにおいて、属性は、コードの受信に先立ってユーザーによって特定される。
項目25。項目19のシステムにおいて、1つ以上のサブストリームのうち少なくとも1つのサブストリームは、データストリームの少なくとも一部分に対して実行されるハッシュ関数に少なくとも部分的に基づいて生成される。
項目26。システムであって、
ユーザーに関連付けられるデータストリームの少なくとも一部分を処理するためのクエリを識別するための手段と、
識別されたデータストリームの属性を識別するコードをユーザーから受信するための手段とを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
属性に少なくとも部分的に基づいてデータストリームの1つ以上のサブストリームを処理するための手段とを含む。
項目27。項目26のシステムであって、1つ以上のサブストリームの複数を並行して処理するための手段をさらに含む。
項目28。項目26のシステムであって、コードは、ユーザーに提供されるjavaコントラクトに少なくとも部分的に基づくjavaクラスを含む。
項目29。項目28のシステムであって、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信するための手段と、
イベントをjavaクラスに提供するための手段と、
属性に少なくとも部分的に基づいてイベントを処理するためにjavaクラスを実施するための手段と、
javaクラスからの出力を受信するための手段とをさらに含む。
項目30。項目29のシステムであって、javaクラスからの出力は、1つ以上のサブストリームのうちの少なくとも1つである。
項目31。項目26のシステムであって、属性は、コードの受信に先立ってユーザーによって特定される。
項目32。項目26のシステムであって、1つ以上のサブストリームのうち少なくとも1つのサブストリームは、データストリームの少なくとも一部分に対して実行されるハッシュ関数に少なくとも部分的に基づいて生成される。
項目33。方法であって、
ユーザーに関連付けられるデータストリームの少なくとも一部分を処理するためのクエリを識別することと、
識別されたデータストリームの属性を識別するコードをユーザーから受信することとを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
属性に少なくとも部分的に基づいてデータストリームの1つ以上のサブストリームを処理するようにクエリを構成することとを含む。
項目34。項目33の方法であって、1つ以上のサブストリームの複数を並行して処理することをさらに含む。
項目35。項目33の方法であって、コードは、ユーザーに提供されるjavaコントラクトに少なくとも部分的に基づくjavaクラスを含む。
項目36。項目35の方法であって、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信することと、
イベントをjavaクラスに提供することと、
属性に少なくとも部分的に基づいてイベントを処理するためにjavaクラスを実施することと、
javaクラスからの出力を受信することとを含む。
項目37。項目36の方法であって、javaクラスからの出力は、1つ以上のサブストリームのうちの少なくとも1つである。
項目38。項目33の方法であって、属性は、コードの受信に先立ってユーザーによって特定される。
項目39。項目33の方法であって、1つ以上のサブストリームのうち少なくとも1つのサブストリームは、データストリームの少なくとも一部分に対して実行されるハッシュ関数に少なくとも部分的に基づいて生成される。
項目40。コンピューターにより実行される方法であって、
ユーザーに関連付けられるデータストリームを識別するための手段と、
識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信するための手段と、
識別されたデータストリームの属性を識別するコードをユーザーから受信するための手段とを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
属性に少なくとも部分的に基づいてデータストリームを少なくとも1つのサブストリームにパーティションするようにコードを構成するための手段と、
受信されたクエリを用いて少なくとも1つのサブストリームを処理するための手段とを含む。
項目41。項目40のコンピューターにより実行される方法であって、コードをクエリに関連付けるための手段をさらに含む。
項目42。項目41のコンピューターにより実行される方法であって、少なくとも1つのサブストリームは、コードからの出力として受信された少なくとも第2のサブストリームと並行して、受信されたクエリを用いて処理される。
項目43。項目42のコンピューターにより実行される方法であって、クエリに少なくとも部分的に基づいてデータストリームのイベントを受信するための手段と、
受信されたコードに対応するjavaクラスにイベントを提供するための手段と、
属性に少なくとも部分的に基づいてイベントを処理するようにjavaクラスを実施するための手段と、
少なくとも1つのサブストリームを識別するjavaクラスからの出力を受信するための手段とをさらに含む。
項目44。項目43のコンピューターにより実行される方法であって、データストリームは、javaクラスに少なくとも部分的に基づいてパーティションされる。
項目45。項目40のコンピューターにより実行される方法であって、サブストリームは、複数の部分のうち少なくとも1つに対して行なわれるハッシュ関数に少なくとも部分的に基づいて生成される。
項目46。項目40のコンピューターにより実行される方法であって、属性は、ユーザーのカスタマーに関連付けられるインターネットプロトコルアドレス、またはユーザーのカスタマーに関連付けられる地理的領域のうち少なくとも一方を含む。
項目47。コンピューター実装システムであって、
ユーザーに関連付けられるデータストリームを識別するように構成される識別ユニットと、
識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信するように構成される第1の受信ユニットと、
識別されたデータストリームの属性を識別するコードをユーザーから受信するように構成される第2の受信ユニットとを含み、コードは、属性に少なくとも部分的に基づいてクエリを構成することが可能であり、さらに、
属性に少なくとも部分的に基づいてデータストリームを少なくとも1つ以上のサブストリームをパーティションするようにコードを構成するように構成される構成ユニットと、
受信されたクエリを用いて少なくとも1つ以上のサブストリームを処理するように構成される処理ユニットとを含む。
項目48。項目47のコンピューター実装システムであって、コードをクエリに関連付けるように構成される関連付けユニットをさらに含む。
項目49。項目48のコンピューター実装システムであって、少なくとも1つのサブストリームは、コードからの出力として受信された少なくとも第2のサブストリームと並行して、受信されたクエリを用いて処理される。
項目50。項目49のコンピューター実装システムであって、
クエリに少なくとも部分的に基づいてデータストリームのイベントを受信するように構成される第3の受信ユニットと、
イベントを受信されたコードに対応するjavaクラスに提供するように構成される提供ユニットと、
属性に少なくとも部分的に基づいてイベントを処理するためにjavaクラスを実施するように構成される実施ユニットと、
少なくとも1つのサブストリームを識別するjavaクラスからの出力を受信するように構成される第4の受信ユニットとをさらに含む。
項目51。項目50のコンピューター実装システムであって、データストリームは、javaクラスに少なくとも部分的に基づいてパーティションされる。
項目52。項目47のコンピューター実装システムであって、サブストリームは、複数の部分のうち少なくとも一つに対して実行されるハッシュ関数に少なくとも部分的に基づいて生成される。
項目53。項目47のコンピューター実装システムであって、属性は、ユーザーのカスタマーに関連付けられるインターネットプロトコルアドレス、またはユーザーのカスタマーに関連付けられる地理的領域のうち少なくとも一方を含む。
前述の明細書において、開示の局面はその具体的な実施形態に関して説明されているが、当業者は、開示がそれに限定されないことを認識する。上記開示の様々な特徴および局面は、個々にまたは共に用いられ得る。さらに、実施形態は、明細書のより広い精神および範囲から逸脱することなく、本明細書において記載されるものを超える任意の数の環境およびアプリケーションにおいて利用され得る。明細書および図面はしたがって、限定的ではなく例示的なものと見なされるべきである。

Claims (20)

  1. システムであって、
    コンピューター実行可能命令を記憶するメモリーと、
    プロセッサーとを備え、前記プロセッサーは、前記メモリーにアクセスし、かつ前記コンピューター実行可能命令を実行して、少なくとも、
    ユーザーに関連付けられるデータストリームを識別し、
    前記識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信し、
    前記識別されたデータストリームの属性を識別するコードを前記ユーザーから受信し、前記コードは、前記属性に少なくとも部分的に基づいて前記クエリを構成することが可能であり、さらに、
    コンピューターシステムによって前記コードを前記クエリに関連付け、
    前記コードが前記クエリに関連付けられた後、前記属性に少なくとも部分的に基づいて前記データストリームをパーティションするように前記クエリを構成し、
    前記属性に少なくとも部分的に基づいて前記データストリームを複数の部分にパーティションし、
    前記複数の部分のうち少なくとも1つのためのサブストリームを前記クエリに提供し、
    前記提供されたサブストリームに少なくとも部分的に基づいて前記クエリの結果を提供する、ように構成される、システム。
  2. 前記コードは、前記ユーザーに提供されるコントラクトに少なくとも部分的に基づくオブジェクト指向のクラスを含み、
    前記クエリを構成することは、前記クエリを前記オブジェクト指向のクラスに結び付けることを含む、請求項1に記載のシステム。
  3. 前記プロセッサーは、前記コンピューター実行可能命令を実行して、少なくとも、
    前記クエリに少なくとも部分的に基づいて前記データストリームのイベントを受信し、
    前記イベントを前記オブジェクト指向のクラスに提供し、
    前記オブジェクト指向のクラスからの出力を受信する、ようにさらに構成される、請求項1または2に記載のシステム。
  4. 前記データストリームは、前記オブジェクト指向のクラスからの出力に少なくとも部分的に基づいてパーティションされる、請求項3に記載のシステム。
  5. 前記属性は、前記ユーザーのカスタマーのコンピューティングデバイスの第1の識別子、前記ユーザーに関連付けられる項目の第2の識別子、または前記項目に関連付けられる項目属性の第3の識別子のうち少なくとも1つを含む、先行する請求項のいずれか1項に記載のシステム。
  6. 前記カスタマーの前記コンピューティングデバイスの前記識別子は、前記カスタマーの前記コンピューティングデバイスのインターネットプロトコルアドレスを示す、または、前記カスタマーの前記コンピューティングデバイスが位置する地理的領域を示す、請求項5に記載のシステム。
  7. 1つ以上のプロセッサーによって実行可能な複数の命令を記憶する非一時的コンピューター読取可能記憶メモリーであって、前記複数の命令は、
    ユーザーに関連付けられるデータストリームの少なくとも一部分を処理するためのクエリを前記1つ以上のプロセッサーに識別させる命令と、
    前記識別されたデータストリームの属性を識別するコードを前記ユーザーから前記1つ以上のプロセッサーに受信させる命令とを含み、前記コードは、前記属性に少なくとも部分的に基づいて前記クエリを構成することが可能であり、さらに、
    前記属性に少なくとも部分的に基づいて前記データストリームの1つ以上のサブストリームを処理するように前記クエリを前記1つ以上のプロセッサーに構成させる命令を含む、非一時的コンピューター読取可能記憶メモリー。
  8. 前記複数の命令はさらに、前記1つ以上のサブストリームの複数を並行して前記1つ以上のプロセッサーに処理させる命令を含む、請求項7に記載の非一時的コンピューター読取可能記憶メモリー。
  9. 前記コードは、前記ユーザーに提供されるjavaコントラクトに少なくとも部分的に基づくjavaクラスを含む、請求項7または8に記載の非一時的コンピューター読取可能記憶メモリー。
  10. 前記複数の命令はさらに、
    前記クエリに少なくとも部分的に基づいて前記データストリームのイベントを前記1つ以上のプロセッサーに受信させる命令と、
    前記1つ以上のプロセッサーに前記イベントを前記javaクラスに提供させる命令と、
    前記属性に少なくとも部分的に基づいて前記イベントを処理するために前記javaクラスを前記1つ以上のプロセッサーに実施させる命令と、
    前記javaクラスからの出力を前記1つ以上のプロセッサーに受信させる命令とを含む、請求項9に記載の非一時的コンピューター読取可能記憶メモリー。
  11. 前記javaクラスからの出力は、前記1つ以上のサブストリームのうちの少なくとも1つである、請求項10に記載の非一時的コンピューター読取可能記憶メモリー。
  12. 前記属性は、前記コードの受信に先立って前記ユーザーによって特定される、請求項7〜11のいずれか1項に記載の非一時的コンピューター読取可能記憶メモリー。
  13. 前記1つ以上のサブストリームのうち少なくとも1つのサブストリームは、前記データストリームの少なくとも一部分に対して実行されるハッシュ関数に少なくとも部分的に基づいて生成される、請求項7〜12のいずれか1項に記載の非一時的コンピューター読取可能記憶メモリー。
  14. コンピューターにより実行される方法であって、
    ユーザーに関連付けられるデータストリームをコンピューティングシステムによって識別することと、
    前記識別されたデータストリームの少なくとも一部分を処理するためのクエリを受信することと、
    前記識別されたデータストリームの属性を識別するコードを前記ユーザーから受信することとを含み、前記コードは、前記属性に少なくとも部分的に基づいて前記クエリを構成することが可能であり、さらに、
    前記属性に少なくとも部分的に基づいて前記データストリームを少なくとも1つのサブストリームにパーティションするように前記コードを構成することと、
    前記受信されたクエリを用いて前記少なくとも1つのサブストリームを処理することとを含む、コンピューターにより実行される方法。
  15. 前記コードを前記クエリに関連付けることをさらに含む、請求項14に記載のコンピューターにより実行される方法。
  16. 前記少なくとも1つのサブストリームは、前記コードからの出力として受信された少なくとも第2のサブストリームと並行して、前記受信されたクエリを用いて処理される、請求項15に記載のコンピューターにより実行される方法。
  17. 前記クエリに少なくとも部分的に基づいて前記データストリームのイベントを受信することと、
    前記受信されたコードに対応するjavaクラスに前記イベントを提供することと、
    前記属性に少なくとも部分的に基づいて前記イベントを処理するように前記javaクラスを実施することと、
    前記少なくとも1つのサブストリームを識別する前記javaクラスからの出力を受信することとをさらに含む、請求項16に記載のコンピューターにより実行される方法。
  18. 前記データストリームは、前記javaクラスに少なくとも部分的に基づいてパーティションされる、請求項17に記載のコンピューターにより実行される方法。
  19. 前記サブストリームは、前記複数の部分のうち少なくとも1つに対して行なわれるハッシュ関数に少なくとも部分的に基づいて生成される、請求項14〜18のいずれか1項に記載のコンピューターにより実行される方法。
  20. 前記属性は、前記ユーザーのカスタマーに関連付けられるインターネットプロトコルアドレス、または前記ユーザーの前記カスタマーに関連付けられる地理的領域のうち少なくとも一方を含む、請求項14〜19のいずれか1項に記載のコンピューターにより実行される方法。
JP2016521684A 2014-06-11 2015-02-18 データストリームのカスタムパーティション Active JP6539647B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/302,031 US9244978B2 (en) 2014-06-11 2014-06-11 Custom partitioning of a data stream
US14/302,031 2014-06-11
PCT/US2015/016346 WO2015191120A1 (en) 2014-06-11 2015-02-18 Custom partitioning of a data stream

Publications (3)

Publication Number Publication Date
JP2017517775A true JP2017517775A (ja) 2017-06-29
JP2017517775A5 JP2017517775A5 (ja) 2018-03-01
JP6539647B2 JP6539647B2 (ja) 2019-07-03

Family

ID=52633628

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016521684A Active JP6539647B2 (ja) 2014-06-11 2015-02-18 データストリームのカスタムパーティション

Country Status (5)

Country Link
US (1) US9244978B2 (ja)
EP (1) EP3155537B1 (ja)
JP (1) JP6539647B2 (ja)
CN (1) CN105593854B (ja)
WO (1) WO2015191120A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11226993B2 (en) 2017-05-31 2022-01-18 Advanced New Technologies Co., Ltd. Method and apparatus for clustering data stream
US11989096B2 (en) 2015-12-21 2024-05-21 Ab Initio Technology Llc Search and retrieval data processing system for computing near real-time data aggregations

Families Citing this family (91)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9892009B2 (en) 2008-06-04 2018-02-13 Oracle International Corporation System and method for supporting a sliding window for testing an event processing system
US10102091B2 (en) 2008-06-04 2018-10-16 Oracle International Corporation System and method for supporting a testing framework for an event processing system using multiple input event streams
US9430494B2 (en) 2009-12-28 2016-08-30 Oracle International Corporation Spatial data cartridge for event processing systems
US9189280B2 (en) 2010-11-18 2015-11-17 Oracle International Corporation Tracking large numbers of moving objects in an event processing system
US8990416B2 (en) 2011-05-06 2015-03-24 Oracle International Corporation Support for a new insert stream (ISTREAM) operation in complex event processing (CEP)
US9262479B2 (en) 2012-09-28 2016-02-16 Oracle International Corporation Join operations for continuous queries over archived views
US9563663B2 (en) 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
US10956422B2 (en) 2012-12-05 2021-03-23 Oracle International Corporation Integrating event processing with map-reduce
US10298444B2 (en) 2013-01-15 2019-05-21 Oracle International Corporation Variable duration windows on continuous data streams
US10469306B1 (en) 2017-10-25 2019-11-05 HCA Holdings, Inc. Assessing completion of events
US10628180B1 (en) 2018-08-20 2020-04-21 C/Hca, Inc. Disparate data aggregation for user interface customization
US9390135B2 (en) 2013-02-19 2016-07-12 Oracle International Corporation Executing continuous event processing (CEP) queries in parallel
US9418113B2 (en) 2013-05-30 2016-08-16 Oracle International Corporation Value based windows on relations in continuous data streams
US9934279B2 (en) 2013-12-05 2018-04-03 Oracle International Corporation Pattern matching across multiple input data streams
US10360196B2 (en) 2014-04-15 2019-07-23 Splunk Inc. Grouping and managing event streams generated from captured network data
US10693742B2 (en) 2014-04-15 2020-06-23 Splunk Inc. Inline visualizations of metrics related to captured network data
US11281643B2 (en) 2014-04-15 2022-03-22 Splunk Inc. Generating event streams including aggregated values from monitored network data
US10523521B2 (en) 2014-04-15 2019-12-31 Splunk Inc. Managing ephemeral event streams generated from captured network data
US9923767B2 (en) * 2014-04-15 2018-03-20 Splunk Inc. Dynamic configuration of remote capture agents for network data capture
US11086897B2 (en) 2014-04-15 2021-08-10 Splunk Inc. Linking event streams across applications of a data intake and query system
US9762443B2 (en) 2014-04-15 2017-09-12 Splunk Inc. Transformation of network data at remote capture agents
US10700950B2 (en) 2014-04-15 2020-06-30 Splunk Inc. Adjusting network data storage based on event stream statistics
US12028208B1 (en) 2014-05-09 2024-07-02 Splunk Inc. Selective event stream data storage based on network traffic volume
US10462004B2 (en) 2014-04-15 2019-10-29 Splunk Inc. Visualizations of statistics associated with captured network data
US10366101B2 (en) 2014-04-15 2019-07-30 Splunk Inc. Bidirectional linking of ephemeral event streams to creators of the ephemeral event streams
US10127273B2 (en) 2014-04-15 2018-11-13 Splunk Inc. Distributed processing of network data using remote capture agents
US9838512B2 (en) 2014-10-30 2017-12-05 Splunk Inc. Protocol-based capture of network data using remote capture agents
US9712645B2 (en) 2014-06-26 2017-07-18 Oracle International Corporation Embedded event processing
US9870410B2 (en) * 2014-09-15 2018-01-16 Microsoft Technology Licensing, Llc Constructed data stream for enhanced event processing
US10120907B2 (en) 2014-09-24 2018-11-06 Oracle International Corporation Scaling event processing using distributed flows and map-reduce operations
US9886486B2 (en) 2014-09-24 2018-02-06 Oracle International Corporation Enriching events with dynamically typed big data for event processing
US10505826B2 (en) 2014-09-26 2019-12-10 Oracle International Corporation Statistical pattern correlation of events in cloud deployments using codebook approach
US9596253B2 (en) 2014-10-30 2017-03-14 Splunk Inc. Capture triggers for capturing network data
US9760353B2 (en) * 2014-12-19 2017-09-12 Signalfx, Inc. Dynamically changing input data streams processed by data stream language programs
US10334085B2 (en) 2015-01-29 2019-06-25 Splunk Inc. Facilitating custom content extraction from network packets
WO2017018901A1 (en) 2015-07-24 2017-02-02 Oracle International Corporation Visually exploring and analyzing event streams
US10063451B2 (en) * 2015-09-28 2018-08-28 Juniper Networks, Inc. Providing application metadata using export protocols in computer networks
US11038960B1 (en) * 2015-10-20 2021-06-15 Amazon Technologies, Inc. Stream-based shared storage system
US9672082B2 (en) 2015-10-21 2017-06-06 Oracle International Corporation Guaranteeing the event order for multi-stage processing in distributed systems
US10178421B2 (en) 2015-10-30 2019-01-08 Rovi Guides, Inc. Methods and systems for monitoring content subscription usage
US20170154080A1 (en) * 2015-12-01 2017-06-01 Microsoft Technology Licensing, Llc Phasing of multi-output query operators
US10657136B2 (en) 2015-12-02 2020-05-19 International Business Machines Corporation Searching data on a synchronization data stream
CN108140047B (zh) * 2016-01-05 2021-06-29 华为技术有限公司 数据处理装置和方法以及数据容器结构
WO2017143405A1 (en) * 2016-02-26 2017-08-31 Cryspintel Pty Ltd A data source system agnostic fact category partitioned information repository and methods for the insertion and retrieval of data using the information repository
CN107302488B (zh) 2016-04-14 2021-07-09 创新先进技术有限公司 虚拟物品的分配方法、系统及服务器
US10963634B2 (en) * 2016-08-04 2021-03-30 Servicenow, Inc. Cross-platform classification of machine-generated textual data
US10248523B1 (en) * 2016-08-05 2019-04-02 Veritas Technologies Llc Systems and methods for provisioning distributed datasets
US11657056B2 (en) 2016-09-15 2023-05-23 Oracle International Corporation Data serialization in a distributed event processing system
WO2018053338A1 (en) 2016-09-15 2018-03-22 Oracle International Corporation Complex event processing for micro-batch streaming
US10514952B2 (en) 2016-09-15 2019-12-24 Oracle International Corporation Processing timestamps and heartbeat events for automatic time progression
WO2018086131A1 (en) * 2016-11-14 2018-05-17 SZ DJI Technology Co., Ltd. Data flow scheduling between processors
KR101856454B1 (ko) * 2017-03-06 2018-05-10 주식회사 티맥스데이터 분산처리를 위한 컴퓨팅 장치
WO2018169430A1 (en) 2017-03-17 2018-09-20 Oracle International Corporation Integrating logic in micro batch based event processing systems
WO2018169429A1 (en) 2017-03-17 2018-09-20 Oracle International Corporation Framework for the deployment of event-based applications
US10922319B2 (en) 2017-04-19 2021-02-16 Ebay Inc. Consistency mitigation techniques for real-time streams
US10902000B2 (en) 2017-09-29 2021-01-26 Oracle International Corporation Heartbeat propagation in a distributed stream processing system
US11200258B2 (en) 2017-12-20 2021-12-14 Acer Cloud Technology (Us), Inc. Systems and methods for fast and effective grouping of stream of information into cloud storage files
US10691485B2 (en) 2018-02-13 2020-06-23 Ebay Inc. Availability oriented durability technique for distributed server systems
US11908573B1 (en) 2020-02-18 2024-02-20 C/Hca, Inc. Predictive resource management
US10757140B2 (en) 2018-08-30 2020-08-25 Nec Corporation Monitoring event streams in parallel through data slicing
US10901797B2 (en) * 2018-11-06 2021-01-26 International Business Machines Corporation Resource allocation
US11113270B2 (en) 2019-01-24 2021-09-07 EMC IP Holding Company LLC Storing a non-ordered associative array of pairs using an append-only storage medium
CN111817978B (zh) 2019-04-12 2022-10-04 华为技术有限公司 一种流分类方法及装置
CN111414386B (zh) * 2020-03-18 2021-06-18 威讯柏睿数据科技(北京)有限公司 一种基于分布式架构对流数据进行查询的方法和设备
US11604759B2 (en) 2020-05-01 2023-03-14 EMC IP Holding Company LLC Retention management for data streams
US11599546B2 (en) * 2020-05-01 2023-03-07 EMC IP Holding Company LLC Stream browser for data streams
US11340834B2 (en) 2020-05-22 2022-05-24 EMC IP Holding Company LLC Scaling of an ordered event stream
US11360992B2 (en) 2020-06-29 2022-06-14 EMC IP Holding Company LLC Watermarking of events of an ordered event stream
US11340792B2 (en) 2020-07-30 2022-05-24 EMC IP Holding Company LLC Ordered event stream merging
US11599420B2 (en) 2020-07-30 2023-03-07 EMC IP Holding Company LLC Ordered event stream event retention
CN112019442B (zh) * 2020-08-13 2023-09-26 上海哔哩哔哩科技有限公司 基于有界一致性Hash算法的数据分发方法、系统、设备及介质
US11354444B2 (en) 2020-09-30 2022-06-07 EMC IP Holding Company LLC Access control for an ordered event stream storage system
US11513871B2 (en) 2020-09-30 2022-11-29 EMC IP Holding Company LLC Employing triggered retention in an ordered event stream storage system
US11755555B2 (en) 2020-10-06 2023-09-12 EMC IP Holding Company LLC Storing an ordered associative array of pairs using an append-only storage medium
US11599293B2 (en) 2020-10-14 2023-03-07 EMC IP Holding Company LLC Consistent data stream replication and reconstruction in a streaming data storage platform
US11354054B2 (en) 2020-10-28 2022-06-07 EMC IP Holding Company LLC Compaction via an event reference in an ordered event stream storage system
US11347568B1 (en) 2020-12-18 2022-05-31 EMC IP Holding Company LLC Conditional appends in an ordered event stream storage system
CN112612814A (zh) * 2020-12-22 2021-04-06 中国再保险(集团)股份有限公司 数据流查询方法、装置、计算机设备和存储介质
US11816065B2 (en) 2021-01-11 2023-11-14 EMC IP Holding Company LLC Event level retention management for data streams
US12099513B2 (en) 2021-01-19 2024-09-24 EMC IP Holding Company LLC Ordered event stream event annulment in an ordered event stream storage system
US11526297B2 (en) 2021-01-19 2022-12-13 EMC IP Holding Company LLC Framed event access in an ordered event stream storage system
CN113297151B (zh) * 2021-02-10 2025-01-03 阿里巴巴集团控股有限公司 数据处理方法以及装置
US11740828B2 (en) 2021-04-06 2023-08-29 EMC IP Holding Company LLC Data expiration for stream storages
US12001881B2 (en) 2021-04-12 2024-06-04 EMC IP Holding Company LLC Event prioritization for an ordered event stream
US11513714B2 (en) 2021-04-22 2022-11-29 EMC IP Holding Company LLC Migration of legacy data into an ordered event stream
US11954537B2 (en) 2021-04-22 2024-04-09 EMC IP Holding Company LLC Information-unit based scaling of an ordered event stream
US11681460B2 (en) 2021-06-03 2023-06-20 EMC IP Holding Company LLC Scaling of an ordered event stream based on a writer group characteristic
US11735282B2 (en) 2021-07-22 2023-08-22 EMC IP Holding Company LLC Test data verification for an ordered event stream storage system
US11971850B2 (en) 2021-10-15 2024-04-30 EMC IP Holding Company LLC Demoted data retention via a tiered ordered event stream data storage system
US20250077241A1 (en) * 2023-09-06 2025-03-06 Dell Products L.P. Generating executable tasks from non-executable text files
US12536232B1 (en) 2025-01-31 2026-01-27 Servicenow, Inc. Dynamic projection for time series data

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007513426A (ja) * 2003-12-02 2007-05-24 オラクル・インターナショナル・コーポレイション 異種コンピュータシステムにわたる複雑計算
US20090106190A1 (en) * 2007-10-18 2009-04-23 Oracle International Corporation Support For User Defined Functions In A Data Stream Management System
JP2011059967A (ja) * 2009-09-10 2011-03-24 Hitachi Ltd ストリームデータ生成方法、ストリームデータ生成装置及びストリームデータ生成プログラム
US20120078951A1 (en) * 2010-09-23 2012-03-29 Hewlett-Packard Development Company, L.P. System and method for data stream processing
US8195648B2 (en) * 2009-10-21 2012-06-05 Microsoft Corporation Partitioned query execution in event processing systems

Family Cites Families (374)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5051947A (en) 1985-12-10 1991-09-24 Trw Inc. High-speed single-pass textual search processor for locating exact and inexact matches of a search pattern in a textual stream
US4996687A (en) 1988-10-11 1991-02-26 Honeywell Inc. Fault recovery mechanism, transparent to digital system function
US5339392A (en) 1989-07-27 1994-08-16 Risberg Jeffrey S Apparatus and method for creation of a user definable video displayed document showing changes in real time data
US5761493A (en) 1990-04-30 1998-06-02 Texas Instruments Incorporated Apparatus and method for adding an associative query capability to a programming language
US5495600A (en) 1992-06-03 1996-02-27 Xerox Corporation Conversion of queries to monotonically increasing incremental form to continuously query a append only database
US5918225A (en) 1993-04-16 1999-06-29 Sybase, Inc. SQL-based database system with improved indexing methodology
US5664172A (en) 1994-07-19 1997-09-02 Oracle Corporation Range-based query optimizer
EP0702294A3 (en) 1994-09-13 1997-05-02 Sun Microsystems Inc Method and device for diagnosing lexical errors
US6397262B1 (en) 1994-10-14 2002-05-28 Qnx Software Systems, Ltd. Window kernel
US5706494A (en) 1995-02-10 1998-01-06 International Business Machines Corporation System and method for constraint checking bulk data in a database
US5829006A (en) 1995-06-06 1998-10-27 International Business Machines Corporation System and method for efficient relational query generation and tuple-to-object translation in an object-relational gateway supporting class inheritance
US6158045A (en) 1995-11-13 2000-12-05 Object Technology Licensing Corporation Portable debugging services utilizing a client debugger object and a server debugger object with flexible addressing support
US5913214A (en) 1996-05-30 1999-06-15 Massachusetts Inst Technology Data extraction from world wide web pages
US5802523A (en) 1996-06-21 1998-09-01 Oracle Corporation Method and apparatus for reducing the memory required to store bind variable descriptors in a database
US5893104A (en) 1996-07-09 1999-04-06 Oracle Corporation Method and system for processing queries in a database system using index structures that are not native to the database system
US5920716A (en) 1996-11-26 1999-07-06 Hewlett-Packard Company Compiling a predicated code with direct analysis of the predicated code
US5937401A (en) 1996-11-27 1999-08-10 Sybase, Inc. Database system with improved methods for filtering duplicates from a tuple stream
US5937195A (en) 1996-11-27 1999-08-10 Hewlett-Packard Co Global control flow treatment of predicated code
US5857182A (en) 1997-01-21 1999-01-05 International Business Machines Corporation Database management system, method and program for supporting the mutation of a composite object without read/write and write/write conflicts
US6108666A (en) 1997-06-12 2000-08-22 International Business Machines Corporation Method and apparatus for pattern discovery in 1-dimensional event streams
US6041344A (en) 1997-06-23 2000-03-21 Oracle Corporation Apparatus and method for passing statements to foreign databases by using a virtual package
US6081801A (en) 1997-06-30 2000-06-27 International Business Machines Corporation Shared nothing parallel execution of procedural constructs in SQL
US5822750A (en) 1997-06-30 1998-10-13 International Business Machines Corporation Optimization of correlated SQL queries in a relational database management system
US6112198A (en) 1997-06-30 2000-08-29 International Business Machines Corporation Optimization of data repartitioning during parallel query optimization
US6278994B1 (en) 1997-07-10 2001-08-21 International Business Machines Corporation Fully integrated architecture for user-defined search
US6006220A (en) 1997-09-30 1999-12-21 International Business Machines Corporation Determining the optimal access path for a query at execution time using an actual value for each variable in a query for estimating a filter factor
US6006235A (en) 1997-11-26 1999-12-21 International Business Machines Corporation Method and apparatus for invoking a stored procedure or a user defined interpreted language function in a database management system
US6389436B1 (en) 1997-12-15 2002-05-14 International Business Machines Corporation Enhanced hypertext categorization using hyperlinks
US6092065A (en) 1998-02-13 2000-07-18 International Business Machines Corporation Method and apparatus for discovery, clustering and classification of patterns in 1-dimensional event streams
US6341281B1 (en) 1998-04-14 2002-01-22 Sybase, Inc. Database system with methods for optimizing performance of correlated subqueries by reusing invariant results of operator tree
US6011916A (en) 1998-05-12 2000-01-04 International Business Machines Corp. Java I/O toolkit for applications and applets
GB9812635D0 (en) 1998-06-11 1998-08-12 Olivetti Telemedia Spa Location system
US6477571B1 (en) 1998-08-11 2002-11-05 Computer Associates Think, Inc. Transaction recognition and prediction using regular expressions
US6263332B1 (en) 1998-08-14 2001-07-17 Vignette Corporation System and method for query processing of structured documents
US6367034B1 (en) 1998-09-21 2002-04-02 Microsoft Corporation Using query language for event filtering and aggregation
US6988271B2 (en) 1998-10-02 2006-01-17 Microsoft Corporation Heavyweight and lightweight instrumentation
US6546381B1 (en) 1998-11-02 2003-04-08 International Business Machines Corporation Query optimization system and method
WO2010030978A2 (en) 2008-09-15 2010-03-18 Aman James A Session automated recording together with rules based indexing, analysis and expression of content
US6763353B2 (en) 1998-12-07 2004-07-13 Vitria Technology, Inc. Real time business process analysis method and apparatus
US6108659A (en) 1998-12-22 2000-08-22 Computer Associates Think, Inc. Method and apparatus for executing stored code objects in a database
US6370537B1 (en) 1999-01-14 2002-04-09 Altoweb, Inc. System and method for the manipulation and display of structured data
US6427123B1 (en) 1999-02-18 2002-07-30 Oracle Corporation Hierarchical indexing for accessing hierarchically organized information in a relational system
US6438559B1 (en) 1999-04-02 2002-08-20 Sybase, Inc. System and method for improved serialization of Java objects
US7080062B1 (en) 1999-05-18 2006-07-18 International Business Machines Corporation Optimizing database queries using query execution plans derived from automatic summary table determining cost based queries
US6339772B1 (en) 1999-07-06 2002-01-15 Compaq Computer Corporation System and method for performing database operations on a continuous stream of tuples
US6453314B1 (en) 1999-07-30 2002-09-17 International Business Machines Corporation System and method for selective incremental deferred constraint processing after bulk loading data
JP2001060161A (ja) 1999-08-24 2001-03-06 Nec Ic Microcomput Syst Ltd デバッグ装置、方法及び記録媒体
WO2001018712A1 (en) 1999-09-10 2001-03-15 Rodgers William C Web-based system to facilitate purchase, pick-up, and delivery of, and escrow and payment for, merchandise
US7457279B1 (en) 1999-09-10 2008-11-25 Vertical Communications Acquisition Corp. Method, system, and computer program product for managing routing servers and services
US6766330B1 (en) 1999-10-19 2004-07-20 International Business Machines Corporation Universal output constructor for XML queries universal output constructor for XML queries
US6721727B2 (en) 1999-12-02 2004-04-13 International Business Machines Corporation XML documents stored as column data
US20020116371A1 (en) 1999-12-06 2002-08-22 David Dodds System and method for the storage, indexing and retrieval of XML documents using relation databases
US6418448B1 (en) 1999-12-06 2002-07-09 Shyam Sundar Sarkar Method and apparatus for processing markup language specifications for data and metadata used inside multiple related internet documents to navigate, query and manipulate information from a plurality of object relational databases over the web
JP3937380B2 (ja) 1999-12-14 2007-06-27 富士通株式会社 パスサーチ回路
US6615203B1 (en) 1999-12-17 2003-09-02 International Business Machines Corporation Method, computer program product, and system for pushdown analysis during query plan generation
US6594651B2 (en) 1999-12-22 2003-07-15 Ncr Corporation Method and apparatus for parallel execution of SQL-from within user defined functions
US6507834B1 (en) 1999-12-22 2003-01-14 Ncr Corporation Method and apparatus for parallel execution of SQL from stored procedures
US6353821B1 (en) 1999-12-23 2002-03-05 Bull Hn Information Systems Inc. Method and data processing system for detecting patterns in SQL to allow optimized use of multi-column indexes
WO2001052090A2 (en) 2000-01-14 2001-07-19 Saba Software, Inc. Method and apparatus for a web content platform
AU2001236998A1 (en) 2000-02-11 2001-08-20 Acta Technologies, Inc. Nested relational data model
US6996557B1 (en) 2000-02-15 2006-02-07 International Business Machines Corporation Method of optimizing SQL queries where a predicate matches nullable operands
US7072896B2 (en) 2000-02-16 2006-07-04 Verizon Laboratories Inc. System and method for automatic loading of an XML document defined by a document-type definition into a relational database including the generation of a relational schema therefor
WO2001065418A1 (en) 2000-02-28 2001-09-07 Fibercycle Networks, Inc. System and method for high speed string matching
US20020029207A1 (en) 2000-02-28 2002-03-07 Hyperroll, Inc. Data aggregation server for managing a multi-dimensional database and database management system having data aggregation server integrated therein
US6449620B1 (en) 2000-03-02 2002-09-10 Nimble Technology, Inc. Method and apparatus for generating information pages using semi-structured data stored in a structured manner
US7823066B1 (en) 2000-03-03 2010-10-26 Tibco Software Inc. Intelligent console for content-based interactivity
US6751619B1 (en) 2000-03-15 2004-06-15 Microsoft Corporation Methods and apparatus for tuple management in data processing system
US6523102B1 (en) 2000-04-14 2003-02-18 Interactive Silicon, Inc. Parallel compression/decompression system and method for implementation of in-memory compressed cache improving storage density and access speed for industry standard memory subsystems and in-line memory modules
US7020696B1 (en) 2000-05-20 2006-03-28 Ciena Corp. Distributed user management information in telecommunications networks
US7076647B2 (en) 2000-06-09 2006-07-11 Hewlett-Packard Development Company, L.P. Dynamic kernel tunables
US6578032B1 (en) 2000-06-28 2003-06-10 Microsoft Corporation Method and system for performing phrase/word clustering and cluster merging
US7958025B2 (en) 2000-08-04 2011-06-07 Goldman Sachs & Co. Method and system for processing raw financial data streams to produce and distribute structured and validated product offering objects
US7139844B2 (en) * 2000-08-04 2006-11-21 Goldman Sachs & Co. Method and system for processing financial data objects carried on broadcast data streams and delivering information to subscribing clients
US6708186B1 (en) 2000-08-14 2004-03-16 Oracle International Corporation Aggregating and manipulating dictionary metadata in a database system
US7095744B2 (en) 2000-11-22 2006-08-22 Dune Networks Method and system for switching variable sized packets
US20040003132A1 (en) 2000-12-06 2004-01-01 Biosentients, Inc. Data pool architecture, system, and method for intelligent object data in heterogeneous data environments
US7062749B2 (en) 2000-12-15 2006-06-13 Promenix, Inc. Measuring, monitoring and tracking enterprise communications and processes
JP4259864B2 (ja) 2000-12-15 2009-04-30 ブリティッシュ・テレコミュニケーションズ・パブリック・リミテッド・カンパニー エンティテイを検索する方法
US7185232B1 (en) 2001-02-28 2007-02-27 Cenzic, Inc. Fault injection methods and apparatus
US6542911B2 (en) 2001-03-01 2003-04-01 Sun Microsystems, Inc. Method and apparatus for freeing memory from an extensible markup language document object model tree active in an application cache
US20040117359A1 (en) 2001-03-01 2004-06-17 Snodgrass Richard Thomas Adaptable query optimization and evaluation in temporal middleware
GB2377038A (en) 2001-04-10 2002-12-31 I2 Ltd Method for identifying patterns in sequential event streams
US6748386B1 (en) 2001-04-24 2004-06-08 Nec Corporation System and method for automated construction of URL, cookie, and database query mapping
US6785677B1 (en) 2001-05-02 2004-08-31 Unisys Corporation Method for execution of query to search strings of characters that match pattern with a target string utilizing bit vector
US6850925B2 (en) 2001-05-15 2005-02-01 Microsoft Corporation Query optimization by sub-plan memoization
US7540011B2 (en) 2001-06-11 2009-05-26 Arrowsight, Inc. Caching graphical interface for displaying video and ancillary data from a saved video
US7757225B2 (en) 2001-06-29 2010-07-13 Microsoft Corporation Linktime recognition of alternative implementations of programmed functionality
EP1436936A4 (en) 2001-09-12 2006-08-02 Safenet Inc RECOGNITION OF FORMS OF HIGH-SPEED DATA FLOW
US7203927B2 (en) 2001-09-20 2007-04-10 International Business Machines Corporation SQL debugging using XML dataflows
AU2002334721B2 (en) 2001-09-28 2008-10-23 Oracle International Corporation An index structure to access hierarchical data in a relational database system
US20030065655A1 (en) 2001-09-28 2003-04-03 International Business Machines Corporation Method and apparatus for detecting query-driven topical events using textual phrases on foils as indication of topic
US6915290B2 (en) 2001-12-11 2005-07-05 International Business Machines Corporation Database query optimization apparatus and method that represents queries as graphs
US7475058B2 (en) 2001-12-14 2009-01-06 Microsoft Corporation Method and system for providing a distributed querying and filtering system
US20030135304A1 (en) 2002-01-11 2003-07-17 Brian Sroub System and method for managing transportation assets
US7117200B2 (en) 2002-01-11 2006-10-03 International Business Machines Corporation Synthesizing information-bearing content from multiple channels
CA2473446A1 (en) 2002-01-14 2003-07-24 Speedtrack, Inc. Identifier vocabulary data access method and system
US7225188B1 (en) 2002-02-13 2007-05-29 Cisco Technology, Inc. System and method for performing regular expression matching with high parallelism
US6985904B1 (en) 2002-02-28 2006-01-10 Oracle International Corporation Systems and methods for sharing of execution plans for similar database statements
CA2374271A1 (en) 2002-03-01 2003-09-01 Ibm Canada Limited-Ibm Canada Limitee Redundant join elimination and sub-query elimination using subsumption
US7567953B2 (en) 2002-03-01 2009-07-28 Business Objects Americas System and method for retrieving and organizing information from disparate computer network information sources
US7107285B2 (en) 2002-03-16 2006-09-12 Questerra Corporation Method, system, and program for an improved enterprise spatial system
US20080010241A1 (en) 2002-04-02 2008-01-10 Mcgoveran David O Computer-implemented method for managing through symbolic abstraction of a membership expression multiple logical representations and storage structures
US20040024773A1 (en) 2002-04-29 2004-02-05 Kilian Stoffel Sequence miner
EP1361526A1 (en) 2002-05-08 2003-11-12 Accenture Global Services GmbH Electronic data processing system and method of using an electronic processing system for automatically determining a risk indicator value
US20030236766A1 (en) 2002-05-14 2003-12-25 Zenon Fortuna Identifying occurrences of selected events in a system
US7093023B2 (en) 2002-05-21 2006-08-15 Washington University Methods, systems, and devices using reprogrammable hardware for high-speed processing of streaming data to find a redefinable pattern and respond thereto
AU2003274345A1 (en) 2002-06-05 2003-12-22 Sap Aktiengesellschaft Apparatus and method for integrating variable subsidiary information with main office information in an enterprise system
AU2003263987A1 (en) 2002-08-05 2004-02-23 John Campbell System of finite state machines
US7451143B2 (en) 2002-08-28 2008-11-11 Cisco Technology, Inc. Programmable rule processing apparatus for conducting high speed contextual searches and characterizations of patterns in data
US8165993B2 (en) 2002-09-06 2012-04-24 Oracle International Corporation Business intelligence system with interface that provides for immediate user action
US7120645B2 (en) 2002-09-27 2006-10-10 Oracle International Corporation Techniques for rewriting XML queries directed to relational database constructs
US7043476B2 (en) 2002-10-11 2006-05-09 International Business Machines Corporation Method and apparatus for data mining to discover associations and covariances associated with data
FR2846181B1 (fr) 2002-10-16 2005-09-02 Canon Kk Procede et dispositif de selection de donnees dans un reseau de communication
US7213040B1 (en) 2002-10-29 2007-05-01 Novell, Inc. Apparatus for policy based storage of file data and meta-data changes over time
US7653645B1 (en) 2002-10-29 2010-01-26 Novell, Inc. Multi-epoch method for saving and exporting file system events
US20040088404A1 (en) 2002-11-01 2004-05-06 Vikas Aggarwal Administering users in a fault and performance monitoring system using distributed data gathering and storage
US7134143B2 (en) 2003-02-04 2006-11-07 Stellenberg Gerald S Method and apparatus for data packet pattern matching
GB0228447D0 (en) 2002-12-06 2003-01-08 Nicholls Charles M System for detecting and interpreting transactions events or changes in computer systems
US7051034B1 (en) 2002-12-18 2006-05-23 Oracle International Corporation Dynamic optimization for processing a restartable sub-tree of a query execution plan
US20050096124A1 (en) 2003-01-21 2005-05-05 Asip Holdings, Inc. Parimutuel wagering system with opaque transactions
US7804852B1 (en) 2003-01-24 2010-09-28 Douglas Durham Systems and methods for definition and use of a common time base in multi-protocol environments
US7437675B2 (en) 2003-02-03 2008-10-14 Hewlett-Packard Development Company, L.P. System and method for monitoring event based systems
US7634501B2 (en) 2003-02-05 2009-12-15 Next Generation Software Method and apparatus for mediated cooperation
WO2004072797A2 (en) 2003-02-07 2004-08-26 Safenet, Inc. System and method for determining the start of a match of a regular expression
US7062507B2 (en) 2003-02-24 2006-06-13 The Boeing Company Indexing profile for efficient and scalable XML based publish and subscribe system
US7185315B2 (en) 2003-02-25 2007-02-27 Sheet Dynamics, Ltd. Graphical feedback of disparities in target designs in graphical development environment
US7693810B2 (en) 2003-03-04 2010-04-06 Mantas, Inc. Method and system for advanced scenario based alert generation and processing
US7324108B2 (en) 2003-03-12 2008-01-29 International Business Machines Corporation Monitoring events in a computer network
CA2427209A1 (en) 2003-04-30 2004-10-30 Ibm Canada Limited - Ibm Canada Limitee Optimization of queries on views defined by conditional expressions having mutually exclusive conditions
US7386568B2 (en) 2003-05-01 2008-06-10 Oracle International Corporation Techniques for partial rewrite of XPath queries in a relational database
US7103611B2 (en) 2003-05-01 2006-09-05 Oracle International Corporation Techniques for retaining hierarchical information in mapping between XML documents and relational data
US6836778B2 (en) 2003-05-01 2004-12-28 Oracle International Corporation Techniques for changing XML content in a relational database
US7222123B2 (en) 2003-05-28 2007-05-22 Oracle International Corporation Technique for using a current lookup for performing multiple merge operations using source data that is modified in between the merge operations
US7546284B1 (en) * 2003-06-11 2009-06-09 Blue Titan Software, Inc. Virtual message persistence service
US7146352B2 (en) 2003-06-23 2006-12-05 Microsoft Corporation Query optimizer system and method
US7519577B2 (en) 2003-06-23 2009-04-14 Microsoft Corporation Query intermediate language method and system
CA2433750A1 (en) 2003-06-27 2004-12-27 Ibm Canada Limited - Ibm Canada Limitee Automatic collection of trace detail and history data
US20050010896A1 (en) 2003-07-07 2005-01-13 International Business Machines Corporation Universal format transformation between relational database management systems and extensible markup language using XML relational transformation
US7433863B2 (en) 2003-07-07 2008-10-07 Netezza Corporation SQL code generation for heterogeneous environment
US20060242180A1 (en) 2003-07-23 2006-10-26 Graf James A Extracting data from semi-structured text documents
US20080077780A1 (en) 2003-07-25 2008-03-27 Zingher Arthur R System and Method for Software Debugging
US7873645B2 (en) 2003-09-05 2011-01-18 Oracle International Corporation Method and mechanism for handling arbitrarily-sized XML in SQL operator tree
US20050097128A1 (en) 2003-10-31 2005-05-05 Ryan Joseph D. Method for scalable, fast normalization of XML documents for insertion of data into a relational database
US7167848B2 (en) 2003-11-07 2007-01-23 Microsoft Corporation Generating a hierarchical plain-text execution plan from a database query
GB0327589D0 (en) 2003-11-27 2003-12-31 Ibm Searching in a computer network
US9116929B2 (en) 2003-12-08 2015-08-25 Teradata Us, Inc. Workload priority influenced data temperature
US7508985B2 (en) 2003-12-10 2009-03-24 International Business Machines Corporation Pattern-matching system
US7308561B2 (en) 2003-12-12 2007-12-11 Alcatel Lucent Fast, scalable pattern-matching engine
US7672964B1 (en) 2003-12-31 2010-03-02 International Business Machines Corporation Method and system for dynamically initializing a view for a streaming data base system
US8775412B2 (en) 2004-01-08 2014-07-08 International Business Machines Corporation Method and system for a self-healing query access plan
US7376656B2 (en) 2004-02-10 2008-05-20 Microsoft Corporation System and method for providing user defined aggregates in a database system
US7194451B2 (en) 2004-02-26 2007-03-20 Microsoft Corporation Database monitoring system
US20050204340A1 (en) 2004-03-10 2005-09-15 Ruminer Michael D. Attribute-based automated business rule identifier and methods of implementing same
US7398265B2 (en) 2004-04-09 2008-07-08 Oracle International Corporation Efficient query processing of XML data using XML index
US20050273352A1 (en) 2004-05-07 2005-12-08 Lombardi Software, Inc. Business method for continuous process improvement
US20050273450A1 (en) 2004-05-21 2005-12-08 Mcmillen Robert J Regular expression acceleration engine and processing model
US7552365B1 (en) 2004-05-26 2009-06-23 Amazon Technologies, Inc. Web site system with automated processes for detecting failure events and for selecting failure events for which to request user feedback
US7516121B2 (en) 2004-06-23 2009-04-07 Oracle International Corporation Efficient evaluation of queries using translation
US7599924B2 (en) 2004-06-25 2009-10-06 International Business Machines Corporation Relationship management in a data abstraction model
US7370273B2 (en) 2004-06-30 2008-05-06 International Business Machines Corporation System and method for creating dynamic folder hierarchies
US20060007308A1 (en) 2004-07-12 2006-01-12 Ide Curtis E Environmentally aware, intelligent surveillance device
US7668806B2 (en) 2004-08-05 2010-02-23 Oracle International Corporation Processing queries against one or more markup language sources
US20060047696A1 (en) 2004-08-24 2006-03-02 Microsoft Corporation Partially materialized views
GB0420097D0 (en) 2004-09-10 2004-10-13 Cotares Ltd Apparatus for and method of providing data to an external application
US7668856B2 (en) 2004-09-30 2010-02-23 Alcatel-Lucent Usa Inc. Method for distinct count estimation over joins of continuous update stream
US7310638B1 (en) 2004-10-06 2007-12-18 Metra Tech Method and apparatus for efficiently processing queries in a streaming transaction processing system
US7519962B2 (en) 2004-10-07 2009-04-14 Thomson Financial Llc Command script parsing using local and extended storage for command lookup
US20080077570A1 (en) 2004-10-25 2008-03-27 Infovell, Inc. Full Text Query and Search Systems and Method of Use
US20060212441A1 (en) 2004-10-25 2006-09-21 Yuanhua Tang Full text query and search systems and methods of use
US7403945B2 (en) 2004-11-01 2008-07-22 Sybase, Inc. Distributed database system providing data and space management methodology
US7533087B2 (en) 2004-11-05 2009-05-12 International Business Machines Corporation Method, system, and program for executing a query having a union all operator and data modifying operations
US20060100969A1 (en) 2004-11-08 2006-05-11 Min Wang Learning-based method for estimating cost and statistics of complex operators in continuous queries
US7493304B2 (en) 2004-11-12 2009-02-17 International Business Machines Corporation Adjusting an amount of data logged for a query based on a change to an access plan
US7526461B2 (en) 2004-11-17 2009-04-28 Gm Global Technology Operations, Inc. System and method for temporal data mining
JP2006155404A (ja) 2004-11-30 2006-06-15 Toshiba Corp 時間情報抽出装置、時間情報抽出方法、及び時間情報抽出プログラム
US7383253B1 (en) 2004-12-17 2008-06-03 Coral 8, Inc. Publish and subscribe capable continuous query processor for real-time data streams
US20060155719A1 (en) 2005-01-10 2006-07-13 International Business Machines Corporation Complex event discovery in event databases
EP1684192A1 (en) 2005-01-25 2006-07-26 Ontoprise GmbH Integration platform for heterogeneous information sources
WO2006089411A1 (en) 2005-02-22 2006-08-31 Connectif Solutions Inc. Distributed asset management system and method
KR100690787B1 (ko) 2005-02-25 2007-03-09 엘지전자 주식회사 무선통신 시스템에서 이벤트 통지방법
AU2006221023A1 (en) 2005-03-03 2006-09-14 Washington University Method and apparatus for performing biosequence similarity searching
US8463801B2 (en) 2005-04-04 2013-06-11 Oracle International Corporation Effectively and efficiently supporting XML sequence type and XQuery sequence natively in a SQL system
US7428555B2 (en) 2005-04-07 2008-09-23 Google Inc. Real-time, computer-generated modifications to an online advertising program
US7685150B2 (en) 2005-04-19 2010-03-23 Oracle International Corporation Optimization of queries over XML views that are based on union all operators
JP4687253B2 (ja) 2005-06-03 2011-05-25 株式会社日立製作所 ストリームデータ処理システムのクエリ処理方法
US20060294095A1 (en) 2005-06-09 2006-12-28 Mantas, Inc. Runtime thresholds for behavior detection
US9792351B2 (en) 2005-06-10 2017-10-17 International Business Machines Corporation Tolerant and extensible discovery of relationships in data using structural information and data analysis
US9747560B2 (en) 2005-07-13 2017-08-29 Sap Se Method and system for combination of independent demand data streams
US7818313B1 (en) 2005-07-18 2010-10-19 Sybase, Inc. Method for distributing processing of queries over a cluster of servers in a continuous processing system
JP4723301B2 (ja) 2005-07-21 2011-07-13 株式会社日立製作所 ストリームデータ処理システムおよびストリームデータ処理方法
US7962616B2 (en) 2005-08-11 2011-06-14 Micro Focus (Us), Inc. Real-time activity monitoring and reporting
WO2007022560A1 (en) 2005-08-23 2007-03-01 Position Networks Pty Ltd A stream-oriented database machine and method
US7990646B2 (en) 2005-09-30 2011-08-02 Seagate Technology Llc Data pattern detection using adaptive search windows
US7937257B2 (en) 2005-10-10 2011-05-03 Oracle International Corporation Estimating performance of application based on automatic resizing of shared memory for messaging
KR100813000B1 (ko) 2005-12-01 2008-03-13 한국전자통신연구원 데이터 중복 처리 방지 기능을 가지는 스트림 데이터 처리시스템 및 그 방법
US7702629B2 (en) 2005-12-02 2010-04-20 Exegy Incorporated Method and device for high performance regular expression pattern matching
US20070136254A1 (en) 2005-12-08 2007-06-14 Hyun-Hwa Choi System and method for processing integrated queries against input data stream and data stored in database using trigger
US7730023B2 (en) 2005-12-22 2010-06-01 Business Objects Sotware Ltd. Apparatus and method for strategy map validation and visualization
US7502889B2 (en) 2005-12-30 2009-03-10 Intel Corporation Home node aware replacement policy for caches in a multiprocessor system
US7814111B2 (en) 2006-01-03 2010-10-12 Microsoft International Holdings B.V. Detection of patterns in data records
US7844829B2 (en) 2006-01-18 2010-11-30 Sybase, Inc. Secured database system with built-in antivirus protection
US20070192301A1 (en) 2006-02-15 2007-08-16 Encirq Corporation Systems and methods for indexing and searching data records based on distance metrics
US20070198479A1 (en) 2006-02-16 2007-08-23 International Business Machines Corporation Streaming XPath algorithm for XPath expressions with predicates
US7446352B2 (en) 2006-03-09 2008-11-04 Tela Innovations, Inc. Dynamic array architecture
US7689582B2 (en) 2006-03-10 2010-03-30 International Business Machines Corporation Data flow system and method for heterogeneous data integration environments
US7536396B2 (en) 2006-03-21 2009-05-19 At&T Intellectual Property Ii, L.P. Query-aware sampling of data streams
US7877381B2 (en) 2006-03-24 2011-01-25 International Business Machines Corporation Progressive refinement of a federated query plan during query execution
US20070226188A1 (en) 2006-03-27 2007-09-27 Theodore Johnson Method and apparatus for data stream sampling
US7644066B2 (en) 2006-03-31 2010-01-05 Oracle International Corporation Techniques of efficient XML meta-data query using XML table index
EP2002334A1 (en) 2006-03-31 2008-12-17 British Telecommunications Public Limited Company Xml-based transfer and a local storage of java objects
WO2007122347A1 (fr) 2006-04-20 2007-11-01 France Telecom Procede d'optimisation de la collecte d'evenements, procede de supervision, produits programmes d'ordinateur et dispositifs correspondants
US7636703B2 (en) 2006-05-02 2009-12-22 Exegy Incorporated Method and apparatus for approximate pattern matching
US7548937B2 (en) 2006-05-04 2009-06-16 International Business Machines Corporation System and method for scalable processing of multi-way data stream correlations
US8131696B2 (en) 2006-05-19 2012-03-06 Oracle International Corporation Sequence event processing using append-only tables
US7613848B2 (en) 2006-06-13 2009-11-03 International Business Machines Corporation Dynamic stabilization for a stream processing system
US20070294217A1 (en) 2006-06-14 2007-12-20 Nec Laboratories America, Inc. Safety guarantee of continuous join queries over punctuated data streams
US7921046B2 (en) 2006-06-19 2011-04-05 Exegy Incorporated High speed processing of financial information using FPGA devices
US20080010093A1 (en) 2006-06-30 2008-01-10 Laplante Pierre System and Method for Processing Health Information
US7499909B2 (en) 2006-07-03 2009-03-03 Oracle International Corporation Techniques of using a relational caching framework for efficiently handling XML queries in the mid-tier data caching
US20080016095A1 (en) 2006-07-13 2008-01-17 Nec Laboratories America, Inc. Multi-Query Optimization of Window-Based Stream Queries
US7496683B2 (en) 2006-07-27 2009-02-24 International Business Machines Corporation Maximization of sustained throughput of distributed continuous queries
US8671091B2 (en) 2006-08-02 2014-03-11 Hewlett-Packard Development Company, L.P. Optimizing snowflake schema queries
US20080034427A1 (en) 2006-08-02 2008-02-07 Nec Laboratories America, Inc. Fast and scalable process for regular expression search
WO2008018080A2 (en) 2006-08-11 2008-02-14 Bizwheel Ltd. Smart integration engine and metadata-oriented architecture for automatic eii and business integration
US8099400B2 (en) 2006-08-18 2012-01-17 National Instruments Corporation Intelligent storing and retrieving in an enterprise data system
KR100778314B1 (ko) 2006-08-21 2007-11-22 한국전자통신연구원 사용자 정의 공유 트리거를 이용한 데이터 스트림과 저장데이터에 대한 통합 연속 질의 처리 시스템 및 그 방법
US8260910B2 (en) 2006-09-19 2012-09-04 Oracle America, Inc. Method and apparatus for monitoring a data stream to detect a pattern of data elements using bloom filters
US20080082484A1 (en) 2006-09-28 2008-04-03 Ramot At Tel-Aviv University Ltd. Fast processing of an XML data stream
US20080098359A1 (en) 2006-09-29 2008-04-24 Ventsislav Ivanov Manipulation of trace sessions based on address parameters
US20080082514A1 (en) 2006-09-29 2008-04-03 International Business Machines Corporation Method and apparatus for integrating relational and hierarchical data
US8645176B2 (en) 2006-10-05 2014-02-04 Trimble Navigation Limited Utilizing historical data in an asset management environment
US7988817B2 (en) 2006-11-10 2011-08-02 Adp Engineering Co., Ltd. Lift pin driving device and a flat panel display manufacturing apparatus having same
JP4933222B2 (ja) 2006-11-15 2012-05-16 株式会社日立製作所 インデックス処理方法及び計算機システム
US20080120283A1 (en) 2006-11-17 2008-05-22 Oracle International Corporation Processing XML data stream(s) using continuous queries in a data stream management system
US9436779B2 (en) 2006-11-17 2016-09-06 Oracle International Corporation Techniques of efficient XML query using combination of XML table index and path/value index
US7831606B2 (en) 2006-12-08 2010-11-09 Pandya Ashish A Signature search architecture for programmable intelligent search memory
US7716210B2 (en) 2006-12-20 2010-05-11 International Business Machines Corporation Method and apparatus for XML query evaluation using early-outs and multiple passes
US7895187B2 (en) 2006-12-21 2011-02-22 Sybase, Inc. Hybrid evaluation of expressions in DBMS
US20080195577A1 (en) 2007-02-09 2008-08-14 Wei Fan Automatically and adaptively determining execution plans for queries with parameter markers
US7630982B2 (en) 2007-02-24 2009-12-08 Trend Micro Incorporated Fast identification of complex strings in a data stream
US20090327102A1 (en) 2007-03-23 2009-12-31 Jatin Maniar System and method for providing real time asset visibility
US7827146B1 (en) 2007-03-30 2010-11-02 Symantec Operating Corporation Storage system
US8065319B2 (en) 2007-04-01 2011-11-22 Nec Laboratories America, Inc. Runtime semantic query optimization for event stream processing
US8098248B2 (en) 2007-04-02 2012-01-17 International Business Machines Corporation Method for semantic modeling of stream processing components to enable automatic application composition
US8370812B2 (en) 2007-04-02 2013-02-05 International Business Machines Corporation Method and system for automatically assembling processing graphs in information processing systems
US7818292B2 (en) 2007-04-05 2010-10-19 Anil Kumar Nori SQL change tracking layer
JP2008262046A (ja) 2007-04-12 2008-10-30 Hitachi Ltd 会議可視化システム、会議可視化方法、及び集計処理サーバ
US8156247B2 (en) 2007-04-30 2012-04-10 Lsi Corportion Systems and methods for reducing network performance degradation
US7945540B2 (en) 2007-05-04 2011-05-17 Oracle International Corporation Method to create a partition-by time/tuple-based window in an event processing service
US7912853B2 (en) 2007-05-07 2011-03-22 International Business Machines Corporation Query processing client-server database system
US7953728B2 (en) 2007-05-18 2011-05-31 Oracle International Corp. Queries with soft time constraints
US8122006B2 (en) 2007-05-29 2012-02-21 Oracle International Corporation Event processing query language including retain clause
US7975109B2 (en) 2007-05-30 2011-07-05 Schooner Information Technology, Inc. System including a fine-grained memory and a less-fine-grained memory
US7933894B2 (en) 2007-06-15 2011-04-26 Microsoft Corporation Parameter-sensitive plans for structural scenarios
US7689622B2 (en) 2007-06-28 2010-03-30 Microsoft Corporation Identification of events of search queries
US8832073B2 (en) 2007-06-29 2014-09-09 Alcatel Lucent Method and apparatus for efficient aggregate computation over data streams
US7676461B2 (en) 2007-07-18 2010-03-09 Microsoft Corporation Implementation of stream algebra over class instances
US8055653B2 (en) 2007-08-09 2011-11-08 International Business Machines Corporation Processing overlapping continuous queries
US8543534B2 (en) 2007-09-11 2013-09-24 Oracle International Corporation Concurrency in event processing networks for event server
US7827299B2 (en) 2007-09-11 2010-11-02 International Business Machines Corporation Transitioning between historical and real time data streams in the processing of data change messages
US20090076899A1 (en) 2007-09-14 2009-03-19 Gbodimowo Gbeminiyi A Method for analyzing, searching for, and trading targeted advertisement spaces
US7979420B2 (en) 2007-10-16 2011-07-12 Oracle International Corporation Handling silent relations in a data stream management system
US7996388B2 (en) 2007-10-17 2011-08-09 Oracle International Corporation Adding new continuous queries to a data stream management system operating on existing queries
US8600977B2 (en) 2007-10-17 2013-12-03 Oracle International Corporation Automatic recognition and capture of SQL execution plans
US8296316B2 (en) 2007-10-17 2012-10-23 Oracle International Corporation Dynamically sharing a subtree of operators in a data stream management system operating on existing queries
US7739265B2 (en) 2007-10-18 2010-06-15 Oracle International Corporation Deleting a continuous query from a data stream management system continuing to operate on other queries
US7673065B2 (en) 2007-10-20 2010-03-02 Oracle International Corporation Support for sharing computation between aggregations in a data stream management system
US7991766B2 (en) 2007-10-20 2011-08-02 Oracle International Corporation Support for user defined aggregations in a data stream management system
US8521867B2 (en) 2007-10-20 2013-08-27 Oracle International Corporation Support for incrementally processing user defined aggregations in a data stream management system
US8335782B2 (en) 2007-10-29 2012-12-18 Hitachi, Ltd. Ranking query processing method for stream data and stream data processing system having ranking query processing mechanism
US8019747B2 (en) 2007-10-30 2011-09-13 Oracle International Corporation Facilitating flexible windows in data stream management systems
US8103655B2 (en) 2007-10-30 2012-01-24 Oracle International Corporation Specifying a family of logics defining windows in data stream management systems
US8315990B2 (en) 2007-11-08 2012-11-20 Microsoft Corporation Consistency sensitive streaming operators
US20090125550A1 (en) 2007-11-08 2009-05-14 Microsoft Corporation Temporal event stream model
US9275353B2 (en) * 2007-11-09 2016-03-01 Oracle America, Inc. Event-processing operators
US8156134B2 (en) 2007-11-15 2012-04-10 International Business Machines Corporation Using different groups of query graph transform modules to generate execution plans for queries for different database types
US8191074B2 (en) 2007-11-15 2012-05-29 Ericsson Ab Method and apparatus for automatic debugging technique
US8429601B2 (en) 2007-11-29 2013-04-23 Red Hat, Inc. Code completion for object relational mapping query language (OQL) queries
US7870124B2 (en) 2007-12-13 2011-01-11 Oracle International Corporation Rewriting node reference-based XQuery using SQL/SML
WO2009082653A1 (en) 2007-12-20 2009-07-02 Hsbc Technologies Inc. Automated methods and systems for developing and deploying projects in parallel
US7882087B2 (en) 2008-01-15 2011-02-01 At&T Intellectual Property I, L.P. Complex dependencies for efficient data warehouse updates
US9489495B2 (en) 2008-02-25 2016-11-08 Georgetown University System and method for detecting, collecting, analyzing, and communicating event-related information
US8903802B2 (en) 2008-03-06 2014-12-02 Cisco Technology, Inc. Systems and methods for managing queries
US8055649B2 (en) 2008-03-06 2011-11-08 Microsoft Corporation Scaled management system
US8805879B2 (en) 2008-03-11 2014-08-12 Virtualagility Inc. Techniques for integrating parameterized information request into a system for collaborative work
US7958114B2 (en) 2008-04-04 2011-06-07 Microsoft Corporation Detecting estimation errors in dictinct page counts
US7872948B2 (en) 2008-04-14 2011-01-18 The Boeing Company Acoustic wide area air surveillance system
US8122050B2 (en) 2008-04-16 2012-02-21 International Business Machines Corporation Query processing visualization system and method of visualizing query processing
JP5198929B2 (ja) 2008-04-25 2013-05-15 株式会社日立製作所 ストリームデータ処理方法及び計算機システム
US8155880B2 (en) 2008-05-09 2012-04-10 Locomatix Inc. Location tracking optimizations
US8886637B2 (en) 2008-05-12 2014-11-11 Enpulz, L.L.C. Web browser accessible search engine which adapts based on user interaction
US8850409B2 (en) 2008-05-21 2014-09-30 Optumsoft, Inc. Notification-based constraint set translation to imperative execution
US7930322B2 (en) 2008-05-27 2011-04-19 Microsoft Corporation Text based schema discovery and information extraction
US8291006B2 (en) 2008-05-30 2012-10-16 International Business Machines Corporation Method for generating a distributed stream processing application
US8918507B2 (en) 2008-05-30 2014-12-23 Red Hat, Inc. Dynamic grouping of enterprise assets
US8112378B2 (en) 2008-06-17 2012-02-07 Hitachi, Ltd. Methods and systems for performing root cause analysis
US20090319501A1 (en) 2008-06-24 2009-12-24 Microsoft Corporation Translation of streaming queries into sql queries
US8316012B2 (en) 2008-06-27 2012-11-20 SAP France S.A. Apparatus and method for facilitating continuous querying of multi-dimensional data streams
CN102077236A (zh) 2008-07-03 2011-05-25 松下电器产业株式会社 印象度提取装置和印象度提取方法
US8086644B2 (en) 2008-07-10 2011-12-27 International Business Machines Corporation Simplifying complex data stream problems involving feature extraction from noisy data
US8447739B2 (en) 2008-07-16 2013-05-21 SAP France S.A. Systems and methods to create continuous queries via a semantic layer
US9135583B2 (en) 2008-07-16 2015-09-15 Business Objects S.A. Systems and methods to create continuous queries associated with push-type and pull-type data
US8037040B2 (en) 2008-08-08 2011-10-11 Oracle International Corporation Generating continuous query notifications
US8185508B2 (en) 2008-08-08 2012-05-22 Oracle International Corporation Adaptive filter index for determining queries affected by a DML operation
US8335793B2 (en) 2008-08-22 2012-12-18 Disney Enterprises, Inc. System and method for optimized filtered data feeds to capture data and send to multiple destinations
US9305238B2 (en) 2008-08-29 2016-04-05 Oracle International Corporation Framework for supporting regular expression-based pattern matching in data streams
US8032544B2 (en) 2008-09-24 2011-10-04 The Boeing Company Methods and apparatus for generating dynamic program files based on input queries that facilitate use of persistent query services
US20100094838A1 (en) 2008-10-10 2010-04-15 Ants Software Inc. Compatibility Server for Database Rehosting
JP5465413B2 (ja) 2008-10-29 2014-04-09 株式会社日立製作所 ストリームデータ処理方法、及びそのシステム
US8538981B2 (en) 2008-11-20 2013-09-17 Sap Ag Stream sharing for event data within an enterprise network
US8392402B2 (en) 2008-12-03 2013-03-05 International Business Machines Corporation Hybrid push/pull execution of continuous SQL queries
US8145621B2 (en) 2008-12-19 2012-03-27 Ianywhere Solutions, Inc. Graphical representation of query optimizer search space in a database management system
US8935293B2 (en) 2009-03-02 2015-01-13 Oracle International Corporation Framework for dynamically generating tuple and page classes
US8145859B2 (en) 2009-03-02 2012-03-27 Oracle International Corporation Method and system for spilling from a queue to a persistent store
US8352517B2 (en) 2009-03-02 2013-01-08 Oracle International Corporation Infrastructure for spilling pages to a persistent store
US8285709B2 (en) 2009-05-12 2012-10-09 Teradata Us, Inc. High-concurrency query operator and method
US8161035B2 (en) 2009-06-04 2012-04-17 Oracle International Corporation Query optimization by specifying path-based predicate evaluation in a path-based query operator
US8868725B2 (en) 2009-06-12 2014-10-21 Kent State University Apparatus and methods for real-time multimedia network traffic management and control in wireless networks
US8612439B2 (en) 2009-06-30 2013-12-17 Commvault Systems, Inc. Performing data storage operations in a cloud storage environment, including searching, encryption and indexing
US8572589B2 (en) 2009-06-30 2013-10-29 Agilent Technologies, Inc. Programming language translator and enabling translation of machine-centric commands for controlling instrument
US8180801B2 (en) 2009-07-16 2012-05-15 Sap Ag Unified window support for event stream data management
US8387076B2 (en) 2009-07-21 2013-02-26 Oracle International Corporation Standardized database connectivity support for an event processing server
US8321450B2 (en) 2009-07-21 2012-11-27 Oracle International Corporation Standardized database connectivity support for an event processing server in an embedded context
US8386466B2 (en) 2009-08-03 2013-02-26 Oracle International Corporation Log visualization tool for a data stream processing server
US8527458B2 (en) 2009-08-03 2013-09-03 Oracle International Corporation Logging framework for a data stream processing server
CA2712576C (en) 2009-08-11 2012-04-10 Certusview Technologies, Llc Systems and methods for complex event processing of vehicle-related information
JP5395565B2 (ja) * 2009-08-12 2014-01-22 株式会社日立製作所 ストリームデータ処理方法及び装置
JP4925143B2 (ja) 2009-08-12 2012-04-25 株式会社日立製作所 ストリームデータ処理システム、ストリームデータ処理方法及びストリームデータ処理プログラム
US8204873B2 (en) 2009-08-26 2012-06-19 Hewlett-Packard Development Company, L.P. System and method for query expression optimization
US9305057B2 (en) 2009-12-28 2016-04-05 Oracle International Corporation Extensible indexing framework using data cartridges
US9430494B2 (en) 2009-12-28 2016-08-30 Oracle International Corporation Spatial data cartridge for event processing systems
US8959106B2 (en) 2009-12-28 2015-02-17 Oracle International Corporation Class loading using java data cartridges
US9307038B2 (en) 2009-12-29 2016-04-05 Motorola Solutions, Inc. Method for presence notification based on a sequence of events
US8423576B2 (en) 2010-01-11 2013-04-16 International Business Machines Corporation System and method for querying data streams
EP2348416A1 (en) 2010-01-21 2011-07-27 Software AG Analysis system and method for analyzing continuous queries for data streams
US8484243B2 (en) 2010-05-05 2013-07-09 Cisco Technology, Inc. Order-independent stream query processing
US8595234B2 (en) * 2010-05-17 2013-11-26 Wal-Mart Stores, Inc. Processing data feeds
US8762297B2 (en) 2010-05-17 2014-06-24 Microsoft Corporation Dynamic pattern matching over ordered and disordered data streams
US8442863B2 (en) 2010-06-17 2013-05-14 Microsoft Corporation Real-time-ready behavioral targeting in a large-scale advertisement system
US20110314019A1 (en) 2010-06-18 2011-12-22 Universidad Politecnica De Madrid Parallel processing of continuous queries on data streams
US8627329B2 (en) 2010-06-24 2014-01-07 International Business Machines Corporation Multithreaded physics engine with predictive load balancing
US8713049B2 (en) 2010-09-17 2014-04-29 Oracle International Corporation Support for a parameterized query/view in complex event processing
CN103154935B (zh) 2010-10-11 2016-08-24 惠普发展公司,有限责任合伙企业 用于查询数据流的系统和方法
EP2628094A4 (en) 2010-10-14 2015-01-28 Hewlett Packard Development Co CONTINUOUS INQUIRY OF A DATA STREAM
US9189280B2 (en) 2010-11-18 2015-11-17 Oracle International Corporation Tracking large numbers of moving objects in an event processing system
US20120130963A1 (en) 2010-11-24 2012-05-24 Teradata Us, Inc. User defined function database processing
EP2469420B1 (en) 2010-12-22 2019-11-27 Software AG CEP engine and method for processing CEP queries
US8478743B2 (en) 2010-12-23 2013-07-02 Microsoft Corporation Asynchronous transfer of state information between continuous query plans
US8788484B2 (en) 2010-12-27 2014-07-22 Software Ag Systems and/or methods for user feedback driven dynamic query rewriting in complex event processing environments
US9350567B2 (en) 2011-01-25 2016-05-24 International Business Machines Corporation Network resource configurations
US8799271B2 (en) 2011-01-25 2014-08-05 Hewlett-Packard Development Company, L.P. Range predicate canonization for translating a query
US8655825B2 (en) 2011-03-10 2014-02-18 Sap Ag Efficient management of data quality for streaming event data
US8751639B2 (en) 2011-04-27 2014-06-10 Rackspace Us, Inc. Event queuing and distribution system
US8990416B2 (en) 2011-05-06 2015-03-24 Oracle International Corporation Support for a new insert stream (ISTREAM) operation in complex event processing (CEP)
WO2012152315A1 (en) 2011-05-10 2012-11-15 Telefonaktiebolaget L M Ericsson (Publ) Optimised data stream management system
US9965520B2 (en) 2011-06-17 2018-05-08 Microsoft Corporation Efficient logical merging over physically divergent streams
US9329975B2 (en) 2011-07-07 2016-05-03 Oracle International Corporation Continuous query language (CQL) debugger in complex event processing (CEP)
US20130031567A1 (en) 2011-07-25 2013-01-31 Microsoft Corporation Local event processing
US9286354B2 (en) 2011-08-15 2016-03-15 Software Ag Systems and/or methods for forecasting future behavior of event streams in complex event processing (CEP) environments
US8635208B2 (en) 2011-11-03 2014-01-21 Sap Ag Multi-state query migration in data stream management
US9424150B2 (en) 2011-12-06 2016-08-23 Sap Se Fault tolerance based query execution
US10055483B2 (en) 2012-03-08 2018-08-21 Telefonaktiebolaget Lm Ericsson (Publ) Data stream management systems
US20130332240A1 (en) 2012-06-08 2013-12-12 University Of Southern California System for integrating event-driven information in the oil and gas fields
US9563663B2 (en) 2012-09-28 2017-02-07 Oracle International Corporation Fast path evaluation of Boolean predicates
US9262479B2 (en) 2012-09-28 2016-02-16 Oracle International Corporation Join operations for continuous queries over archived views
US10956422B2 (en) 2012-12-05 2021-03-23 Oracle International Corporation Integrating event processing with map-reduce
US9053210B2 (en) 2012-12-14 2015-06-09 Microsoft Technology Licensing, Llc Graph query processing using plurality of engines
US20140172506A1 (en) * 2012-12-17 2014-06-19 Microsoft Corporation Customer segmentation
US9098587B2 (en) 2013-01-15 2015-08-04 Oracle International Corporation Variable duration non-event pattern matching
US10298444B2 (en) 2013-01-15 2019-05-21 Oracle International Corporation Variable duration windows on continuous data streams
US9047249B2 (en) 2013-02-19 2015-06-02 Oracle International Corporation Handling faults in a continuous event processing (CEP) system
US9390135B2 (en) 2013-02-19 2016-07-12 Oracle International Corporation Executing continuous event processing (CEP) queries in parallel
US9418113B2 (en) 2013-05-30 2016-08-16 Oracle International Corporation Value based windows on relations in continuous data streams
US9934279B2 (en) 2013-12-05 2018-04-03 Oracle International Corporation Pattern matching across multiple input data streams

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007513426A (ja) * 2003-12-02 2007-05-24 オラクル・インターナショナル・コーポレイション 異種コンピュータシステムにわたる複雑計算
US20090106190A1 (en) * 2007-10-18 2009-04-23 Oracle International Corporation Support For User Defined Functions In A Data Stream Management System
JP2011059967A (ja) * 2009-09-10 2011-03-24 Hitachi Ltd ストリームデータ生成方法、ストリームデータ生成装置及びストリームデータ生成プログラム
US8195648B2 (en) * 2009-10-21 2012-06-05 Microsoft Corporation Partitioned query execution in event processing systems
US20120078951A1 (en) * 2010-09-23 2012-03-29 Hewlett-Packard Development Company, L.P. System and method for data stream processing

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11989096B2 (en) 2015-12-21 2024-05-21 Ab Initio Technology Llc Search and retrieval data processing system for computing near real-time data aggregations
US11226993B2 (en) 2017-05-31 2022-01-18 Advanced New Technologies Co., Ltd. Method and apparatus for clustering data stream

Also Published As

Publication number Publication date
JP6539647B2 (ja) 2019-07-03
EP3155537B1 (en) 2021-09-29
EP3155537A1 (en) 2017-04-19
US20150363464A1 (en) 2015-12-17
CN105593854A (zh) 2016-05-18
US9244978B2 (en) 2016-01-26
WO2015191120A1 (en) 2015-12-17
CN105593854B (zh) 2019-11-05

Similar Documents

Publication Publication Date Title
JP6539647B2 (ja) データストリームのカスタムパーティション
US9712645B2 (en) Embedded event processing
KR102313789B1 (ko) 이종 전자 디바이스들에 대한 애플리케이션 배포물의 구분
US9672082B2 (en) Guaranteeing the event order for multi-stage processing in distributed systems
CN105993011B (zh) 跨多个输入数据流的样式匹配的方法、系统和设备
US10171437B2 (en) Techniques for security artifacts management
US10135940B2 (en) Subscribing to event notifications using object instances
US10685024B2 (en) Tuple extraction using dynamically generated extractor classes
US11609804B2 (en) Flexible event ingestion framework in an event processing system
EP3177995A1 (en) Placement policy-based allocation of computing resources

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180116

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180116

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20181227

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190122

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190417

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20190514

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20190610

R150 Certificate of patent or registration of utility model

Ref document number: 6539647

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250