JPH10143483A - ミグラトリ・データ・アクセス・パターンを検出し、効果的に提供するように構成されたマルチプロセスシステム - Google Patents
ミグラトリ・データ・アクセス・パターンを検出し、効果的に提供するように構成されたマルチプロセスシステムInfo
- Publication number
- JPH10143483A JPH10143483A JP9208225A JP20822597A JPH10143483A JP H10143483 A JPH10143483 A JP H10143483A JP 9208225 A JP9208225 A JP 9208225A JP 20822597 A JP20822597 A JP 20822597A JP H10143483 A JPH10143483 A JP H10143483A
- Authority
- JP
- Japan
- Prior art keywords
- coherency
- state
- read
- request
- node
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0806—Multiuser, multiprocessor or multiprocessing cache systems
- G06F12/0815—Cache consistency protocols
- G06F12/0817—Cache consistency protocols using directory methods
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F12/00—Accessing, addressing or allocating within memory systems or architectures
- G06F12/02—Addressing or allocation; Relocation
- G06F12/08—Addressing or allocation; Relocation in hierarchically structured memory systems, e.g. virtual memory systems
- G06F12/0802—Addressing of a memory level in which the access to the desired data or data block requires associative addressing means, e.g. caches
- G06F12/0806—Multiuser, multiprocessor or multiprocessing cache systems
- G06F12/0813—Multiuser, multiprocessor or multiprocessing cache systems with a network or matrix configuration
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2212/00—Indexing scheme relating to accessing, addressing or allocation within memory systems or architectures
- G06F2212/27—Using a specific cache architecture
- G06F2212/272—Cache only memory architecture [COMA]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Memory System Of A Hierarchy Structure (AREA)
- Storage Device Security (AREA)
- Multi Processors (AREA)
Abstract
(57)【要約】
【課題】 移行データ・アクセス・パターンおよび非移
行データ・アクセス・パターンを検出し、データに、そ
のデータに関して観測されたアクセス・パターンに基づ
いて適当な読取り/書込み許可を与える機構を分散共用
メモリ・システムに提供する。 【解決手段】 コンピュータ・システムは、各ノード
に、そのノードがホーム・ノードであるコヒーレンシ単
位に関するコヒーレンシ情報を記憶するディレクトリを
含む。そのディレクトリは、そのコヒーレンシ単位に関
して観測されたデータ・アクセス・パターンを示す、各
コヒーレンシ単位に対応するデータ・アクセス状態を記
憶する。
行データ・アクセス・パターンを検出し、データに、そ
のデータに関して観測されたアクセス・パターンに基づ
いて適当な読取り/書込み許可を与える機構を分散共用
メモリ・システムに提供する。 【解決手段】 コンピュータ・システムは、各ノード
に、そのノードがホーム・ノードであるコヒーレンシ単
位に関するコヒーレンシ情報を記憶するディレクトリを
含む。そのディレクトリは、そのコヒーレンシ単位に関
して観測されたデータ・アクセス・パターンを示す、各
コヒーレンシ単位に対応するデータ・アクセス状態を記
憶する。
Description
【0001】関連特許出願の相互参照 本特許出願は、開示が引用によって本明細書に組み込ま
れた、下記の関連特許出願に関係するものである。 1.本出願と同時出願されたHagersten等の
「ExtendingThe Coherence D
omain Beyond A Computer S
ystem Bus」(参照番号P990)。 2.本出願と同時出願されたHagerstenの「M
ethod AndApparatus Optimi
zing Global Data Replies
In A Computer System」(参照番
号P991)。 3.本出願と同時出願されたHagersten等の
「Method AndApparatus Prov
iding Short Latency Round
−Robin Arbitration For Ac
cess ToA Shared Resource」
(参照番号P992)。 4.本出願と同時出願されたSinghal等の「Im
plementingSnooping On A S
plit−Transaction Computer
System Bus」(参照番号P993)。 5.本出願と同時出願されたSinghal等の「Sp
lit Transaction Snooping
Bus Protocol」(参照番号P989)。 6.本出願と同時出願されたHeller等の「Int
erconnection Subsystem Fo
r A Multiprocessor Comput
er System With A Small Nu
mber OfProcessors Using A
Switching Arrangement Of
Limited Degree」(参照番号P160
9)。 7.本出願と同時出願されたWade等の「Syste
m And Method For Performi
ng Deadlock Free Message
Transfer In Cyclic Multi−
Hop Digital Computer Netw
ork」(参照番号P1572)。 8.本出願と同時出願されたCassiday等の「S
ynchronization System And
Method For Plesiochronou
s Signaling」(参照符号P1593)。 9.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r A Coherence Transformer
For Connecting Computer
System Coherence Domains」
(参照番号P1519)。 10.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r A Coherence Transformer
With Limited Memory For
Connecting Computer Syste
m Coherence Domains」(参照番号
P1530)。 11.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r Sharing Data Objects In
A Computer System」(参照番号P
1463)。 12.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r A Directory−Less Memory
Access Protocol In A Dis
tributed Shared Memory Co
mputer System」(参照番号P153
1)。 13.本出願と同時出願されたHagersten等の
「Hybrid Memory Access Pro
tocol In A Distributed Sh
ared Memory Computer Syst
em」(参照番号P1550)。 14.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r Substantially Memory−Le
ss Coherence Transformer
For Connecting Computer S
ystem」(参照番号P1529)。 15.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Including An EnhancedBlo
cking Mechanism For Read
To Share Transactions In
A NUMA Mode」(参照番号P 1786)。16.本出願と同時出願されたGuzov
skiy等の「EncodingMethod For
Directory State In Cache
Coherent Distributed Shar
ed Memory System」(参照番号P15
20)。 17.本出願と同時出願されたNesheim等の「S
oftware Use Of Address Tr
anslation Mechanism」(参照番号
P1560)。 18.本出願と同時出願されたLowenstein等
の「Directory−Based,Shared−
Memory,Scaleable Multipro
cessor Computer System Ha
ving Deadlock−free Transa
ction Flow Sans Flow Cont
rol Protocol」(参照番号P1561)。 19.本出願と同時出願されたNesheimの「Ma
intainingA Sequential Sto
red Order (SSO) In ANon−S
SO Machine」(参照番号P1562)。 20.本出願と同時出願されたWong−Chanの
「Node To Node Interrupt M
echanism In A Multiproces
sor System」(参照番号P1587)。 21.1996年4月8日に出願された、「Deter
ministic Distributed Mult
icache Coherence Protoco
l」と題するHagersten等の出願第08/63
0703号。 22.1995年12月22日に出願された、「A H
ybrid NUMAComa Cashing Sy
stem And Methods ForSelec
ting Between The Caching
Modes」と題するHagersten等の出願第0
8/577283号。 23.1995年12月22日に出願された、「A H
ybrid NUMAComa Cashing Sy
stem And Methods ForSelec
ting Between The Caching
Modes」と題するWood等の出願第08/575
787号。 24.本出願と同時出願されたHagersten等の
「Flusing Of Cache Memory
In A Computer System」(参照番
号P1416)。 25.本出願と同時出願されたHagersten等の
「EfficientAllocation Of C
ache Memory Space InA Com
puter System」(参照番号P1576)。 26.本出願と同時出願されたHagersten等の
「EfficientSelection Of Me
mory Storage Modes In A C
omputer System」(参照番号P172
6)。 27.本出願と同時出願されたHagersten等の
「Skip−level Write−through
In A Multi−level Memory
Of A Computer System」(参照番
号P1736)。 28.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Configured to PerformEff
icient Write Operations」
(参照番号P1500)。 29.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Configured to PerformEff
icient Block Copy Operati
ons」(参照番号P1515)。 30.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Including An Apparatus F
or Optimizing Spin−Lock O
perations」(参照番号P1525)。 31.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Configured to Store Cohe
rency State within Multip
le Subnodes of a Processi
ng Node」(参照番号P1527)。 32.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Configured to Perform Pr
efetching Operations」(参照番
号P1571)。 33.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Configured to Perform Sy
nchronization Operations」
(参照番号P1551)。 34.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Having Coherency−Related
Error Logging Capabiliti
es」(参照番号P1719)。 35.本出願と同時出願されたHagerstenの
「Multiprocessing System E
mploying A Three−Hop Comm
unication Protocol」(参照番号P
1785)。 36.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Configured to Perform So
ftware Initiated Prefetch
Operations」(参照番号P1787)。 37.本出願と同時出願されたHagersten等の
「A Multiprocessing Comput
er System Employing Local
and Global Spaces and Mu
ltipleAccee Modes」(参照番号P1
784)。 38.本出願と同時出願されたHagersten等の
「Multiprocessing System E
mploying A CoherencyProto
col Including A Reply Cou
nt」(参照番号P1570)。
れた、下記の関連特許出願に関係するものである。 1.本出願と同時出願されたHagersten等の
「ExtendingThe Coherence D
omain Beyond A Computer S
ystem Bus」(参照番号P990)。 2.本出願と同時出願されたHagerstenの「M
ethod AndApparatus Optimi
zing Global Data Replies
In A Computer System」(参照番
号P991)。 3.本出願と同時出願されたHagersten等の
「Method AndApparatus Prov
iding Short Latency Round
−Robin Arbitration For Ac
cess ToA Shared Resource」
(参照番号P992)。 4.本出願と同時出願されたSinghal等の「Im
plementingSnooping On A S
plit−Transaction Computer
System Bus」(参照番号P993)。 5.本出願と同時出願されたSinghal等の「Sp
lit Transaction Snooping
Bus Protocol」(参照番号P989)。 6.本出願と同時出願されたHeller等の「Int
erconnection Subsystem Fo
r A Multiprocessor Comput
er System With A Small Nu
mber OfProcessors Using A
Switching Arrangement Of
Limited Degree」(参照番号P160
9)。 7.本出願と同時出願されたWade等の「Syste
m And Method For Performi
ng Deadlock Free Message
Transfer In Cyclic Multi−
Hop Digital Computer Netw
ork」(参照番号P1572)。 8.本出願と同時出願されたCassiday等の「S
ynchronization System And
Method For Plesiochronou
s Signaling」(参照符号P1593)。 9.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r A Coherence Transformer
For Connecting Computer
System Coherence Domains」
(参照番号P1519)。 10.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r A Coherence Transformer
With Limited Memory For
Connecting Computer Syste
m Coherence Domains」(参照番号
P1530)。 11.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r Sharing Data Objects In
A Computer System」(参照番号P
1463)。 12.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r A Directory−Less Memory
Access Protocol In A Dis
tributed Shared Memory Co
mputer System」(参照番号P153
1)。 13.本出願と同時出願されたHagersten等の
「Hybrid Memory Access Pro
tocol In A Distributed Sh
ared Memory Computer Syst
em」(参照番号P1550)。 14.本出願と同時出願されたHagersten等の
「Methods And Apparatus Fo
r Substantially Memory−Le
ss Coherence Transformer
For Connecting Computer S
ystem」(参照番号P1529)。 15.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Including An EnhancedBlo
cking Mechanism For Read
To Share Transactions In
A NUMA Mode」(参照番号P 1786)。16.本出願と同時出願されたGuzov
skiy等の「EncodingMethod For
Directory State In Cache
Coherent Distributed Shar
ed Memory System」(参照番号P15
20)。 17.本出願と同時出願されたNesheim等の「S
oftware Use Of Address Tr
anslation Mechanism」(参照番号
P1560)。 18.本出願と同時出願されたLowenstein等
の「Directory−Based,Shared−
Memory,Scaleable Multipro
cessor Computer System Ha
ving Deadlock−free Transa
ction Flow Sans Flow Cont
rol Protocol」(参照番号P1561)。 19.本出願と同時出願されたNesheimの「Ma
intainingA Sequential Sto
red Order (SSO) In ANon−S
SO Machine」(参照番号P1562)。 20.本出願と同時出願されたWong−Chanの
「Node To Node Interrupt M
echanism In A Multiproces
sor System」(参照番号P1587)。 21.1996年4月8日に出願された、「Deter
ministic Distributed Mult
icache Coherence Protoco
l」と題するHagersten等の出願第08/63
0703号。 22.1995年12月22日に出願された、「A H
ybrid NUMAComa Cashing Sy
stem And Methods ForSelec
ting Between The Caching
Modes」と題するHagersten等の出願第0
8/577283号。 23.1995年12月22日に出願された、「A H
ybrid NUMAComa Cashing Sy
stem And Methods ForSelec
ting Between The Caching
Modes」と題するWood等の出願第08/575
787号。 24.本出願と同時出願されたHagersten等の
「Flusing Of Cache Memory
In A Computer System」(参照番
号P1416)。 25.本出願と同時出願されたHagersten等の
「EfficientAllocation Of C
ache Memory Space InA Com
puter System」(参照番号P1576)。 26.本出願と同時出願されたHagersten等の
「EfficientSelection Of Me
mory Storage Modes In A C
omputer System」(参照番号P172
6)。 27.本出願と同時出願されたHagersten等の
「Skip−level Write−through
In A Multi−level Memory
Of A Computer System」(参照番
号P1736)。 28.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Configured to PerformEff
icient Write Operations」
(参照番号P1500)。 29.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Configured to PerformEff
icient Block Copy Operati
ons」(参照番号P1515)。 30.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Including An Apparatus F
or Optimizing Spin−Lock O
perations」(参照番号P1525)。 31.本出願と同時出願されたHagerstenの
「A Multiprocessing System
Configured to Store Cohe
rency State within Multip
le Subnodes of a Processi
ng Node」(参照番号P1527)。 32.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Configured to Perform Pr
efetching Operations」(参照番
号P1571)。 33.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Configured to Perform Sy
nchronization Operations」
(参照番号P1551)。 34.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Having Coherency−Related
Error Logging Capabiliti
es」(参照番号P1719)。 35.本出願と同時出願されたHagerstenの
「Multiprocessing System E
mploying A Three−Hop Comm
unication Protocol」(参照番号P
1785)。 36.本出願と同時出願されたHagersten等の
「A Multiprocessing System
Configured to Perform So
ftware Initiated Prefetch
Operations」(参照番号P1787)。 37.本出願と同時出願されたHagersten等の
「A Multiprocessing Comput
er System Employing Local
and Global Spaces and Mu
ltipleAccee Modes」(参照番号P1
784)。 38.本出願と同時出願されたHagersten等の
「Multiprocessing System E
mploying A CoherencyProto
col Including A Reply Cou
nt」(参照番号P1570)。
【0002】
【発明の属する技術分野】本発明は、マルチプロセッサ
・コンピュータ・システムに関し、詳細には、マルチプ
ロセッサ・コンピュータ・システム内の移行データ・ア
クセス・パターンの検出および処理に関する。
・コンピュータ・システムに関し、詳細には、マルチプ
ロセッサ・コンピュータ・システム内の移行データ・ア
クセス・パターンの検出および処理に関する。
【0003】
【従来の技術】多重処理コンピュータ・システムは、コ
ンピューティング・タスクを実行するために使用できる
2つ以上のプロセッサを含む。1つのプロセッサ上で特
定のコンピューティング・タスクを実行し、同時に他の
プロセッサが、関係のないコンピューティング・タスク
を実行することができる。別法として、特定のコンピュ
ーティング・タスクの構成要素を複数のプロセッサ間で
分散し、コンピューティング・タスク全体を実行するの
に必要な時間を短縮することができる。一般的に言え
ば、プロセッサは、1つまたは複数のオペランドに対す
る演算を実行して結果を生成するように構成された装置
である。演算は、プロセッサによって実行される命令に
応答して実行される。
ンピューティング・タスクを実行するために使用できる
2つ以上のプロセッサを含む。1つのプロセッサ上で特
定のコンピューティング・タスクを実行し、同時に他の
プロセッサが、関係のないコンピューティング・タスク
を実行することができる。別法として、特定のコンピュ
ーティング・タスクの構成要素を複数のプロセッサ間で
分散し、コンピューティング・タスク全体を実行するの
に必要な時間を短縮することができる。一般的に言え
ば、プロセッサは、1つまたは複数のオペランドに対す
る演算を実行して結果を生成するように構成された装置
である。演算は、プロセッサによって実行される命令に
応答して実行される。
【0004】市販の多重処理コンピュータ・システムで
広く使用されているアーキテクチャは、対称型マルチプ
ロセッサ(SMP)アーキテクチャである。通常、SM
Pコンピュータ・システムは、キャッシュ階層を通じて
共用バスに接続された複数のプロセッサを備える。共用
バスにはメモリも接続され、メモリはシステム内のプロ
セッサ間で共用される。メモリ内の特定のメモリ位置へ
のアクセスは、他の特定のメモリ位置へのアクセスと同
様な時間で行われる。メモリ内の各位置に一様にアクセ
スできるので、この構造はしばしば、一様なメモリ・ア
ーキテクチャ(UMA)と呼ばれる。
広く使用されているアーキテクチャは、対称型マルチプ
ロセッサ(SMP)アーキテクチャである。通常、SM
Pコンピュータ・システムは、キャッシュ階層を通じて
共用バスに接続された複数のプロセッサを備える。共用
バスにはメモリも接続され、メモリはシステム内のプロ
セッサ間で共用される。メモリ内の特定のメモリ位置へ
のアクセスは、他の特定のメモリ位置へのアクセスと同
様な時間で行われる。メモリ内の各位置に一様にアクセ
スできるので、この構造はしばしば、一様なメモリ・ア
ーキテクチャ(UMA)と呼ばれる。
【0005】プロセッサは多くの場合、内部キャッシュ
と共に構成され、SMPコンピュータ・システム内のプ
ロセッサと共用バスとの間のキャッシュ階層には通常、
1つまたは複数のキャッシュが含まれる。特定のメイン
・メモリ・アドレスに存在するデータの複数のコピーを
これらのキャッシュに記憶することができる。特定のア
ドレスが所与の時間に1つのデータ値しか記憶しない共
用メモリ・モデルを維持するために、共用バス・コンピ
ュータ・システムはキャッシュ・コヒーレンシを使用す
る。一般的に言えば、特定のメモリ・アドレスに記憶さ
れているデータに対する演算の効果がキャッシュ階層内
のデータの各コピーに反映される場合、その演算はコヒ
ーレントである。たとえば、特定のメモリ・アドレスに
記憶されているデータを更新したときには、前のデータ
のコピーを記憶しているキャッシュにその更新を供給す
ることができる。別法として、特定のメモリ・アドレス
へのその後のアクセスによって、更新済みコピーがメイ
ン・メモリから転送されるように、前のデータのコピー
をキャッシュ内で無効化することができる。共用バス・
システムの場合、通常、スヌープ・バス・プロトコルが
使用される。共用バス上で実行される各コヒーレント・
トランザクションは、キャッシュ内のデータと突き合わ
せて調べられる(あるいは「スヌープ」される)。影響
を受けるデータのコピーが見つかった場合、コヒーレン
ト・トランザクションに応答して、そのデータを含むキ
ャッシュ・ラインの状態を更新することができる。
と共に構成され、SMPコンピュータ・システム内のプ
ロセッサと共用バスとの間のキャッシュ階層には通常、
1つまたは複数のキャッシュが含まれる。特定のメイン
・メモリ・アドレスに存在するデータの複数のコピーを
これらのキャッシュに記憶することができる。特定のア
ドレスが所与の時間に1つのデータ値しか記憶しない共
用メモリ・モデルを維持するために、共用バス・コンピ
ュータ・システムはキャッシュ・コヒーレンシを使用す
る。一般的に言えば、特定のメモリ・アドレスに記憶さ
れているデータに対する演算の効果がキャッシュ階層内
のデータの各コピーに反映される場合、その演算はコヒ
ーレントである。たとえば、特定のメモリ・アドレスに
記憶されているデータを更新したときには、前のデータ
のコピーを記憶しているキャッシュにその更新を供給す
ることができる。別法として、特定のメモリ・アドレス
へのその後のアクセスによって、更新済みコピーがメイ
ン・メモリから転送されるように、前のデータのコピー
をキャッシュ内で無効化することができる。共用バス・
システムの場合、通常、スヌープ・バス・プロトコルが
使用される。共用バス上で実行される各コヒーレント・
トランザクションは、キャッシュ内のデータと突き合わ
せて調べられる(あるいは「スヌープ」される)。影響
を受けるデータのコピーが見つかった場合、コヒーレン
ト・トランザクションに応答して、そのデータを含むキ
ャッシュ・ラインの状態を更新することができる。
【0006】残念なことに、共用バス・アーキテクチャ
は、多重処理コンピュータ・システムの有用性を制限す
るいくつかの欠点を有する。バスはピーク帯域幅を与え
ることができる(たとえば、バスを介して転送できるバ
イト数/秒)。バスに追加プロセッサを取り付けると、
プロセッサにデータおよび命令を供給するのに必要な帯
域幅がピーク・バス帯域幅を超えることがある。いくつ
かのプロセッサが使用可能なバス帯域幅を待たなければ
ならないので、プロセッサの帯域幅要件が使用可能なバ
ス帯域幅を超えるとコンピュータ・システムの性能が影
響を受ける。
は、多重処理コンピュータ・システムの有用性を制限す
るいくつかの欠点を有する。バスはピーク帯域幅を与え
ることができる(たとえば、バスを介して転送できるバ
イト数/秒)。バスに追加プロセッサを取り付けると、
プロセッサにデータおよび命令を供給するのに必要な帯
域幅がピーク・バス帯域幅を超えることがある。いくつ
かのプロセッサが使用可能なバス帯域幅を待たなければ
ならないので、プロセッサの帯域幅要件が使用可能なバ
ス帯域幅を超えるとコンピュータ・システムの性能が影
響を受ける。
【0007】また、共用バスにより多くのプロセッサを
追加するとバスに対する容量負荷が増大し、場合によっ
てはバスの物理長が増加する。容量負荷が増大しバス長
が延びると、バスを横切って信号が伝搬する際の遅延が
長くなる。伝搬遅延が長くなるので、トランザクション
の実行時間が長くなる。したがって、より多くのプロセ
ッサを追加するほど、バスのピーク帯域幅が減少する。
追加するとバスに対する容量負荷が増大し、場合によっ
てはバスの物理長が増加する。容量負荷が増大しバス長
が延びると、バスを横切って信号が伝搬する際の遅延が
長くなる。伝搬遅延が長くなるので、トランザクション
の実行時間が長くなる。したがって、より多くのプロセ
ッサを追加するほど、バスのピーク帯域幅が減少する。
【0008】これらの問題は、プロセッサの動作周波数
および性能が引き続き向上していることによってさらに
深刻化する。より高い周波数およびより高度なプロセッ
サ・マイクロアーキテクチャによって性能が向上するの
で、帯域幅要件は、プロセッサの数が同じであっても前
のプロセッサ世代より高くなる。したがって、前に多重
処理コンピュータ・システムに十分な帯域幅を与えたバ
スが、より高性能のプロセッサを使用する同様なコンピ
ュータ・システムには不十分であることがある。
および性能が引き続き向上していることによってさらに
深刻化する。より高い周波数およびより高度なプロセッ
サ・マイクロアーキテクチャによって性能が向上するの
で、帯域幅要件は、プロセッサの数が同じであっても前
のプロセッサ世代より高くなる。したがって、前に多重
処理コンピュータ・システムに十分な帯域幅を与えたバ
スが、より高性能のプロセッサを使用する同様なコンピ
ュータ・システムには不十分であることがある。
【0009】多重処理コンピュータ・システム用の他の
構造は、分散共用メモリ・アーキテクチャである。分散
共用メモリ・アーキテクチャは、内部にプロセッサおよ
びメモリが存在する複数のノードを含む。複数のノード
は、その間の結合されたネットワークを介して通信す
る。全体的に考えると、複数のノード内に含まれるメモ
リは、コンピュータ・システムの共用メモリを形成す
る。通常、ディレクトリを使用して、どのノードが特定
のアドレスに対応するデータのキャッシュ・コピーを有
するかが識別される。ディレクトリを調べることによっ
てコヒーレンシ活動を生成することができる。
構造は、分散共用メモリ・アーキテクチャである。分散
共用メモリ・アーキテクチャは、内部にプロセッサおよ
びメモリが存在する複数のノードを含む。複数のノード
は、その間の結合されたネットワークを介して通信す
る。全体的に考えると、複数のノード内に含まれるメモ
リは、コンピュータ・システムの共用メモリを形成す
る。通常、ディレクトリを使用して、どのノードが特定
のアドレスに対応するデータのキャッシュ・コピーを有
するかが識別される。ディレクトリを調べることによっ
てコヒーレンシ活動を生成することができる。
【0010】分散共用メモリ・システムは、スケーリン
グ可能であり、共用バス・アーキテクチャの制限を解消
する。多くのプロセッサ・アクセスはノード内で完了す
るので、通常、ノードがネットワーク上で有する帯域幅
要件は、共用バス・アーキテクチャが共用バス上で与え
なければならない帯域幅要件よりもずっと低い。ノード
は、高いクロック周波数および帯域幅で動作し、必要に
応じてネットワークにアクセスすることができる。ノー
ドのローカル帯域幅に影響を与えずにネットワークに追
加ノードを追加することができる。その代わり、ネット
ワーク帯域幅のみが影響を受ける。
グ可能であり、共用バス・アーキテクチャの制限を解消
する。多くのプロセッサ・アクセスはノード内で完了す
るので、通常、ノードがネットワーク上で有する帯域幅
要件は、共用バス・アーキテクチャが共用バス上で与え
なければならない帯域幅要件よりもずっと低い。ノード
は、高いクロック周波数および帯域幅で動作し、必要に
応じてネットワークにアクセスすることができる。ノー
ドのローカル帯域幅に影響を与えずにネットワークに追
加ノードを追加することができる。その代わり、ネット
ワーク帯域幅のみが影響を受ける。
【0011】残念なことに、分散共用メモリ・システム
では特に、移行データ・アクセス・パターンを示すプロ
グラムを実行する際に性能が低下する。移行データ・ア
クセス・パターンとは、第1のプロセッサがデータを読
み取り、それに続いてそのデータを更新し、それに続い
て第2のプロセッサがそのデータを読み取り更新し、以
下同様な動作が実行されるデータ・アクセス・パターン
である。それによって、データはプロセッサ間を「移
行」する。たとえば、第2のプロセッサがデータを読み
取るとき、(前にそのデータを更新した)第1のプロセ
ッサからそのデータのコピーが与えられる。第2のプロ
セッサは、データを更新する際、第1のプロセッサにそ
のコピーを無効化させる。したがって、データは第1の
プロセッサから第2のプロセッサへ移行している。第2
のプロセッサがデータを読み取り(それによって、第1
のプロセッサと共用するコピーを得て)、それに続いて
そのデータを更新する(それによって、第1のプロセッ
サによって維持されているコピーを無効化する)プロセ
スをデータ移行と呼ぶ。上記では一例としてプロセッサ
を使用したが、分散共用メモリ・システム内のノード間
でも同様なプロセスが行われる。データ移行の語は、プ
ロセッサ間の移行とノード間の移行のどちらかを指すた
めに使用される。
では特に、移行データ・アクセス・パターンを示すプロ
グラムを実行する際に性能が低下する。移行データ・ア
クセス・パターンとは、第1のプロセッサがデータを読
み取り、それに続いてそのデータを更新し、それに続い
て第2のプロセッサがそのデータを読み取り更新し、以
下同様な動作が実行されるデータ・アクセス・パターン
である。それによって、データはプロセッサ間を「移
行」する。たとえば、第2のプロセッサがデータを読み
取るとき、(前にそのデータを更新した)第1のプロセ
ッサからそのデータのコピーが与えられる。第2のプロ
セッサは、データを更新する際、第1のプロセッサにそ
のコピーを無効化させる。したがって、データは第1の
プロセッサから第2のプロセッサへ移行している。第2
のプロセッサがデータを読み取り(それによって、第1
のプロセッサと共用するコピーを得て)、それに続いて
そのデータを更新する(それによって、第1のプロセッ
サによって維持されているコピーを無効化する)プロセ
スをデータ移行と呼ぶ。上記では一例としてプロセッサ
を使用したが、分散共用メモリ・システム内のノード間
でも同様なプロセスが行われる。データ移行の語は、プ
ロセッサ間の移行とノード間の移行のどちらかを指すた
めに使用される。
【0012】
【発明が解決しようとする課題】通常の分散共用メモリ
・システムは、読取り要求に応答してデータの読取り専
用コピーを与える。それに続いて移行データ・アクセス
・パターンの対応する書込み要求を実行すると、他の1
組のコヒーレンシ活動を介してデータへの書込み許可が
与えられ、プロセッサは更新を実行する。移行データ・
アクセス・パターンでは、データが最初に読み取られる
ときにそのデータへの書込み許可を与えた方法が効率的
である。このように、プロセッサの内部で書込みを完了
することができるので、書込み要求に対応するネットワ
ーク・トラフィックをなくすことができる。残念なこと
に、読取り時に書込み許可を与えると、複数のプロセッ
サが1回または複数回にわたってデータを読み取りデー
タがめったに更新されない他のデータ・アクセス・パタ
ーンは悪影響を受ける。書込み許可を与えると一般に、
他のプロセッサ内のデータの共用コピーが無効化され
る。したがって、通常のデータ・アクセス・パターンで
は、複数の共用者が、共用データを読み取る際に互いに
コピーを連続的に無効化する。したがって、移行データ
・アクセス・パターンおよび非移行データ・アクセス・
パターンを検出し、データに、そのデータに関して観測
されたアクセス・パターンに基づいて適当な読取り/書
込み許可を与える機構を分散共用メモリ・システムに提
供すると有利である。
・システムは、読取り要求に応答してデータの読取り専
用コピーを与える。それに続いて移行データ・アクセス
・パターンの対応する書込み要求を実行すると、他の1
組のコヒーレンシ活動を介してデータへの書込み許可が
与えられ、プロセッサは更新を実行する。移行データ・
アクセス・パターンでは、データが最初に読み取られる
ときにそのデータへの書込み許可を与えた方法が効率的
である。このように、プロセッサの内部で書込みを完了
することができるので、書込み要求に対応するネットワ
ーク・トラフィックをなくすことができる。残念なこと
に、読取り時に書込み許可を与えると、複数のプロセッ
サが1回または複数回にわたってデータを読み取りデー
タがめったに更新されない他のデータ・アクセス・パタ
ーンは悪影響を受ける。書込み許可を与えると一般に、
他のプロセッサ内のデータの共用コピーが無効化され
る。したがって、通常のデータ・アクセス・パターンで
は、複数の共用者が、共用データを読み取る際に互いに
コピーを連続的に無効化する。したがって、移行データ
・アクセス・パターンおよび非移行データ・アクセス・
パターンを検出し、データに、そのデータに関して観測
されたアクセス・パターンに基づいて適当な読取り/書
込み許可を与える機構を分散共用メモリ・システムに提
供すると有利である。
【0013】
【課題を解決するための手段】上記で概略的に説明した
問題は主として、本発明によるコンピュータ・システム
によって解決される。このコンピュータ・システムは、
各ノードに属するコヒーレンシ単位(すなわち、そのノ
ードがホーム・ノードであるコヒーレンシ単位)に関す
るコヒーレンシ情報を記憶するディレクトリをそのノー
ドに含む。また、ディレクトリは、そのコヒーレンシ単
位に関して観測されたデータ・アクセス・パターンを示
す、各コヒーレンシ単位に対応するデータ・アクセス状
態を記憶する。データ・アクセス状態は、観測された移
行データ・アクセス・パターンまたは観測された非移行
(すなわち、通常)データ・アクセス・パターンを示す
ことができる。ホーム・ノードは、影響を受けるコヒー
レンシ単位の観測されたデータ・アクセス・パターンに
応じて、結果的に要求側ノードに読取り専用権利と読取
り/書込みアクセス権のどちらかを与えるコヒーレンシ
・デマンドを用いてコヒーレンシ読取り要求に応答す
る。コヒーレンシ単位が移行データ・アクセス・パター
ンを有することが観測された場合、読取り/書込みアク
セス権が与えられる。逆に、コヒーレンシ単位が非移行
データ・アクセス・パターンを有することが観測された
場合、読取りアクセス権が与えられる。移行データ・ア
クセス・パターンと非移行データ・アクセス・パターン
が共に効率的に処理されるので有利である。移行データ
・アクセス・パターンがより効率的に処理され、しかも
非移行データ・アクセス・パターンが効率的に処理され
ることによって性能を向上させることができる。
問題は主として、本発明によるコンピュータ・システム
によって解決される。このコンピュータ・システムは、
各ノードに属するコヒーレンシ単位(すなわち、そのノ
ードがホーム・ノードであるコヒーレンシ単位)に関す
るコヒーレンシ情報を記憶するディレクトリをそのノー
ドに含む。また、ディレクトリは、そのコヒーレンシ単
位に関して観測されたデータ・アクセス・パターンを示
す、各コヒーレンシ単位に対応するデータ・アクセス状
態を記憶する。データ・アクセス状態は、観測された移
行データ・アクセス・パターンまたは観測された非移行
(すなわち、通常)データ・アクセス・パターンを示す
ことができる。ホーム・ノードは、影響を受けるコヒー
レンシ単位の観測されたデータ・アクセス・パターンに
応じて、結果的に要求側ノードに読取り専用権利と読取
り/書込みアクセス権のどちらかを与えるコヒーレンシ
・デマンドを用いてコヒーレンシ読取り要求に応答す
る。コヒーレンシ単位が移行データ・アクセス・パター
ンを有することが観測された場合、読取り/書込みアク
セス権が与えられる。逆に、コヒーレンシ単位が非移行
データ・アクセス・パターンを有することが観測された
場合、読取りアクセス権が与えられる。移行データ・ア
クセス・パターンと非移行データ・アクセス・パターン
が共に効率的に処理されるので有利である。移行データ
・アクセス・パターンがより効率的に処理され、しかも
非移行データ・アクセス・パターンが効率的に処理され
ることによって性能を向上させることができる。
【0014】ホーム・ノードはさらに、移行データ・ア
クセス・パターンおよび非移行データ・アクセス・パタ
ーンを検出し、影響を受けるコヒーレンシ単位にアクセ
スするノード内のキャッシュ階層とは独立に移行データ
・アクセス状態と非移行データ・アクセス状態との間の
遷移を選択する。一実施態様では、各コヒーレンシ単位
ごとに一対のカウンタが使用される。一方のカウンタ
は、コヒーレンシ単位が移行データ・アクセス状態で、
データ移行が検出されたときに増分される。他方のカウ
ンタは、コヒーレンシ単位が非移行データ・アクセス状
態で、データ移行が検出されたときに増分される。一方
のカウンタがオーバフローすると、ホーム・ノードはコ
ヒーレンシ単位のデータ・アクセス状態を代替データ・
アクセス状態に遷移させる。ノード内のキャッシュ階層
を変更しなくても複数のデータ・アクセス・パターンが
サポートされるので有利である。キャッシュおよびキャ
ッシュ階層は多数の異なる部分を必要とし、それらの部
分をタイムリーにかつ費用有効に修正することは困難で
ある。移行データ・アクセス・パターンおよび非移行デ
ータ・アクセス・パターンを検出するサポート機能を集
中制御することによって、結果として得られるハードウ
ェアを簡略化することができる。
クセス・パターンおよび非移行データ・アクセス・パタ
ーンを検出し、影響を受けるコヒーレンシ単位にアクセ
スするノード内のキャッシュ階層とは独立に移行データ
・アクセス状態と非移行データ・アクセス状態との間の
遷移を選択する。一実施態様では、各コヒーレンシ単位
ごとに一対のカウンタが使用される。一方のカウンタ
は、コヒーレンシ単位が移行データ・アクセス状態で、
データ移行が検出されたときに増分される。他方のカウ
ンタは、コヒーレンシ単位が非移行データ・アクセス状
態で、データ移行が検出されたときに増分される。一方
のカウンタがオーバフローすると、ホーム・ノードはコ
ヒーレンシ単位のデータ・アクセス状態を代替データ・
アクセス状態に遷移させる。ノード内のキャッシュ階層
を変更しなくても複数のデータ・アクセス・パターンが
サポートされるので有利である。キャッシュおよびキャ
ッシュ階層は多数の異なる部分を必要とし、それらの部
分をタイムリーにかつ費用有効に修正することは困難で
ある。移行データ・アクセス・パターンおよび非移行デ
ータ・アクセス・パターンを検出するサポート機能を集
中制御することによって、結果として得られるハードウ
ェアを簡略化することができる。
【0015】概して、本発明は、多重処理コンピュータ
・システムにおいて処理ノードにコヒーレンシ単位を与
える方法を企図するものである。コヒーレンシ単位に対
応する状態は、コヒーレンシ単位のホーム・ノードにあ
るディレクトリ内に記憶される。この状態は、それが第
1の値を維持している場合には移行データ・アクセス・
パターンを示す。また、この状態は、それが第2の値を
維持している場合には非移行データ・アクセス・パター
ンを示す。コヒーレンシ単位は、状態が第1の値を維持
している場合、処理ノードからのコヒーレンシ読取り要
求に応答して読取り/書込みアクセス権と共に処理ノー
ドに与えられる。読取り/書込みアクセス権には、移行
データ・アクセス・パターンおよび非移行データ・アク
セス・パターンの表示は含まれない。
・システムにおいて処理ノードにコヒーレンシ単位を与
える方法を企図するものである。コヒーレンシ単位に対
応する状態は、コヒーレンシ単位のホーム・ノードにあ
るディレクトリ内に記憶される。この状態は、それが第
1の値を維持している場合には移行データ・アクセス・
パターンを示す。また、この状態は、それが第2の値を
維持している場合には非移行データ・アクセス・パター
ンを示す。コヒーレンシ単位は、状態が第1の値を維持
している場合、処理ノードからのコヒーレンシ読取り要
求に応答して読取り/書込みアクセス権と共に処理ノー
ドに与えられる。読取り/書込みアクセス権には、移行
データ・アクセス・パターンおよび非移行データ・アク
セス・パターンの表示は含まれない。
【0016】本発明はさらに、処理ノードにコヒーレン
シ単位を与える方法を企図するものである。コヒーレン
シ単位に対応する状態は、コヒーレンシのホーム・ノー
ドにあるディレクトリ内に記憶される。この状態は、そ
れが第1の値を維持している場合には移行データ・アク
セス・パターンを示す。また、この状態は、それが第2
の値を維持している場合には非移行データ・アクセス・
パターンを示す。コヒーレンシ単位は、状態が第1の値
を維持している場合、処理ノードからのコヒーレンシ読
取り要求に応答して読取り/書込みアクセス権と共に処
理ノードに与えられる。この状態が記憶されるのはディ
レクトリ内だけである。
シ単位を与える方法を企図するものである。コヒーレン
シ単位に対応する状態は、コヒーレンシのホーム・ノー
ドにあるディレクトリ内に記憶される。この状態は、そ
れが第1の値を維持している場合には移行データ・アク
セス・パターンを示す。また、この状態は、それが第2
の値を維持している場合には非移行データ・アクセス・
パターンを示す。コヒーレンシ単位は、状態が第1の値
を維持している場合、処理ノードからのコヒーレンシ読
取り要求に応答して読取り/書込みアクセス権と共に処
理ノードに与えられる。この状態が記憶されるのはディ
レクトリ内だけである。
【0017】本発明はさらに、ディレクトリとホーム・
エージェントとを備える、コヒーレンシ単位を与える装
置を企図するものである。このディレクトリは、コヒー
レンシ単位に関するアクセス・パターン状態を記憶する
ように構成される。アクセス・パターン状態は、コヒー
レンシ単位に関して移行データ・アクセス・パターンが
検出された場合は第1の値を維持する。また、アクセス
・パターン状態は、コヒーレンシ単位に関して非移行デ
ータ・アクセス・パターンが検出された場合は第2の値
を維持する。ホーム・エージェントは、ディレクトリに
結合され、コヒーレンシ読取り要求を受け取り、アクセ
ス・パターン状態が第1の値を維持している場合に、第
1のコヒーレンシ・デマンドを生成するように結合され
る。第1のコヒーレンシ・デマンドによって、コヒーレ
ンシ読取り要求の発送側は、コヒーレンシ単位に対する
読取り/書込みアクセス権を受け取る。また、ホーム・
エージェントは、アクセス・パターン状態が第2の値を
維持している場合に、第2のコヒーレンシ・デマンドを
生成するように構成される。第2のコヒーレンシ・デマ
ンドによって、発送側はコヒーレンシ単位への読取り専
用アクセス権を受け取る。
エージェントとを備える、コヒーレンシ単位を与える装
置を企図するものである。このディレクトリは、コヒー
レンシ単位に関するアクセス・パターン状態を記憶する
ように構成される。アクセス・パターン状態は、コヒー
レンシ単位に関して移行データ・アクセス・パターンが
検出された場合は第1の値を維持する。また、アクセス
・パターン状態は、コヒーレンシ単位に関して非移行デ
ータ・アクセス・パターンが検出された場合は第2の値
を維持する。ホーム・エージェントは、ディレクトリに
結合され、コヒーレンシ読取り要求を受け取り、アクセ
ス・パターン状態が第1の値を維持している場合に、第
1のコヒーレンシ・デマンドを生成するように結合され
る。第1のコヒーレンシ・デマンドによって、コヒーレ
ンシ読取り要求の発送側は、コヒーレンシ単位に対する
読取り/書込みアクセス権を受け取る。また、ホーム・
エージェントは、アクセス・パターン状態が第2の値を
維持している場合に、第2のコヒーレンシ・デマンドを
生成するように構成される。第2のコヒーレンシ・デマ
ンドによって、発送側はコヒーレンシ単位への読取り専
用アクセス権を受け取る。
【0018】また、本発明は、第1の処理ノードと、第
2の処理ノードと、第3処理ノードとを備えるコンピュ
ータ・システムを企図するものである。第1の処理ノー
ドは、コヒーレンシ読取り要求を搬送するように構成さ
れる。第2の処理ノードは、第1の処理ノードからコヒ
ーレンシ読取り要求を受け取るように結合され、ディレ
クトリを備える。そのディレクトリは、コヒーレンシ読
取り要求の影響を受けるコヒーレンシ単位に対応するデ
ータ・アクセス・パターン状態を記憶するように構成さ
れる。また、第2の処理ノードは、コヒーレンシ読取り
要求およびデータ・アクセス・パターン状態に応答して
コヒーレンシ・デマンドを発行するように構成される。
第3の処理ノードは、第2の処理ノードからコヒーレン
シ・デマンドを受け取るように結合される。第3の処理
ノードは、第1の処理ノードへコヒーレンシ単位を搬送
し、第1の処理ノードにコヒーレンシ単位へのアクセス
権の表示を与えるように結合される。
2の処理ノードと、第3処理ノードとを備えるコンピュ
ータ・システムを企図するものである。第1の処理ノー
ドは、コヒーレンシ読取り要求を搬送するように構成さ
れる。第2の処理ノードは、第1の処理ノードからコヒ
ーレンシ読取り要求を受け取るように結合され、ディレ
クトリを備える。そのディレクトリは、コヒーレンシ読
取り要求の影響を受けるコヒーレンシ単位に対応するデ
ータ・アクセス・パターン状態を記憶するように構成さ
れる。また、第2の処理ノードは、コヒーレンシ読取り
要求およびデータ・アクセス・パターン状態に応答して
コヒーレンシ・デマンドを発行するように構成される。
第3の処理ノードは、第2の処理ノードからコヒーレン
シ・デマンドを受け取るように結合される。第3の処理
ノードは、第1の処理ノードへコヒーレンシ単位を搬送
し、第1の処理ノードにコヒーレンシ単位へのアクセス
権の表示を与えるように結合される。
【0019】本発明の他の目的および利点は、下記の詳
細な説明を読み添付の図面を参照したときに明らかにな
ろう。
細な説明を読み添付の図面を参照したときに明らかにな
ろう。
【0020】
【発明の実施の形態】本発明では様々な修正形態および
変更形態が可能であるが、本発明の特定の実施形態が、
一例として図示され、本明細書に詳しく記載されてい
る。しかし、図面および詳細な説明が、開示した特定の
形態に本発明を制限するものではなく、本発明が、添付
の特許請求の範囲で定義した本発明の趣旨および範囲内
のすべての修正形態、等価物、変更形態をカバーするも
のであることを理解されたい。
変更形態が可能であるが、本発明の特定の実施形態が、
一例として図示され、本明細書に詳しく記載されてい
る。しかし、図面および詳細な説明が、開示した特定の
形態に本発明を制限するものではなく、本発明が、添付
の特許請求の範囲で定義した本発明の趣旨および範囲内
のすべての修正形態、等価物、変更形態をカバーするも
のであることを理解されたい。
【0021】次に、図1を参照すると、多重処理コンピ
ュータ・システム10の一実施形態のブロック図が示さ
れている。コンピュータ・システム10は、ポイント・
ツー・ポイント・ネットワーク14によって相互接続さ
れた複数のSMPノード12Aないし12Dを含む。本
明細書で特定の参照符号とその後に続く文字で参照され
た要素は、集合的に参照符号のみで参照する。たとえ
ば、SMPノード12Aないし12Dを集合的にSMP
ノード12と呼ぶ。図の実施形態では、各SMPノード
12は、複数のプロセッサと、外部キャッシュと、SM
Pバスと、メモリと、システム・インタフェースとを含
む。たとえば、SMPノード12Aは、プロセッサ16
Aないし16Bを含む複数のプロセッサと共に構成され
る。プロセッサ16は外部キャッシュ18に接続され、
外部キャッシュ18はさらにSMPバス20に結合され
る。また、メモリ22およびシステム・インタフェース
24はSMPバス20に結合される。さらに、SMPバ
ス20に1つまたは複数の入出力(I/O)インタフェ
ース26を結合することができる。入出力インタフェー
ス26は、シリアル・ポートおよびパラレル・ポート、
ディスク・ドライブ、モデム、プリンタなどの周辺装置
とのインタフェースをとるために使用される。他のSM
Pノード12Bないし12Dを同様に構成することがで
きる。
ュータ・システム10の一実施形態のブロック図が示さ
れている。コンピュータ・システム10は、ポイント・
ツー・ポイント・ネットワーク14によって相互接続さ
れた複数のSMPノード12Aないし12Dを含む。本
明細書で特定の参照符号とその後に続く文字で参照され
た要素は、集合的に参照符号のみで参照する。たとえ
ば、SMPノード12Aないし12Dを集合的にSMP
ノード12と呼ぶ。図の実施形態では、各SMPノード
12は、複数のプロセッサと、外部キャッシュと、SM
Pバスと、メモリと、システム・インタフェースとを含
む。たとえば、SMPノード12Aは、プロセッサ16
Aないし16Bを含む複数のプロセッサと共に構成され
る。プロセッサ16は外部キャッシュ18に接続され、
外部キャッシュ18はさらにSMPバス20に結合され
る。また、メモリ22およびシステム・インタフェース
24はSMPバス20に結合される。さらに、SMPバ
ス20に1つまたは複数の入出力(I/O)インタフェ
ース26を結合することができる。入出力インタフェー
ス26は、シリアル・ポートおよびパラレル・ポート、
ディスク・ドライブ、モデム、プリンタなどの周辺装置
とのインタフェースをとるために使用される。他のSM
Pノード12Bないし12Dを同様に構成することがで
きる。
【0022】一般的に言えば、システム・インタフェー
ス24は、対応するSMPノード12Aないし12Dが
ホーム・ノードである各コヒーレンシ単位に関する情報
を記憶するディレクトリと共に構成される。具体的に
は、このディレクトリは、対応するコヒーレンシ単位に
関してシステム・インタフェース24によって観測され
たデータ・アクセス・パターンを示すデータ・アクセス
状態を記憶する。データ・アクセス状態は、移行状態ま
たは非移行状態を示すことができる。ホーム・ノードに
よってコヒーレンシ読取り要求が受け取られた場合、結
果的に要求側ノードに与えられるアクセス権はデータ・
アクセス状態に依存する。読取り/書込みアクセス権
(または許可)は、データ・アクセス状態が移行状態を
示す場合に与えられる。逆に、データ・アクセス状態が
非移行状態を示す場合、読取りアクセス権が与えられ
る。移行データ・アクセス・パターンと非移行データ・
アクセス・パターンの両方を効率的に検出し、処理する
ことができるので有利である。さらに、データ・アクセ
ス状態に関する情報はディレクトリに記憶される。した
がって、SMPノード12内のキャッシュを変更しなく
てもデータ・アクセス・パターン情報が記憶される。S
MPノード12内(プロセッサ16の内部とSMPノー
ド12に含まれるキャッシュ階層内の両方)には多数の
キャッシュを含めることができるので、この状態をディ
レクトリに記憶すると、データ・アクセス・パターンの
検出および処理専用の記憶域の全体的な量を低減させる
ことができる。データ・アクセス・パターン検出・処理
ロジックをホーム・ノードおよびディレクトリで集中制
御することによって、状態を複数のキャッシュに記憶す
る分散システムよりも機構を簡単にすることができる。
他の利点は、このアルゴリズムでは、移行モードから非
移行モードへの変換を検出する際に、プロセッサや関連
するキャッシュからのサポートが必要とされないことで
ある。
ス24は、対応するSMPノード12Aないし12Dが
ホーム・ノードである各コヒーレンシ単位に関する情報
を記憶するディレクトリと共に構成される。具体的に
は、このディレクトリは、対応するコヒーレンシ単位に
関してシステム・インタフェース24によって観測され
たデータ・アクセス・パターンを示すデータ・アクセス
状態を記憶する。データ・アクセス状態は、移行状態ま
たは非移行状態を示すことができる。ホーム・ノードに
よってコヒーレンシ読取り要求が受け取られた場合、結
果的に要求側ノードに与えられるアクセス権はデータ・
アクセス状態に依存する。読取り/書込みアクセス権
(または許可)は、データ・アクセス状態が移行状態を
示す場合に与えられる。逆に、データ・アクセス状態が
非移行状態を示す場合、読取りアクセス権が与えられ
る。移行データ・アクセス・パターンと非移行データ・
アクセス・パターンの両方を効率的に検出し、処理する
ことができるので有利である。さらに、データ・アクセ
ス状態に関する情報はディレクトリに記憶される。した
がって、SMPノード12内のキャッシュを変更しなく
てもデータ・アクセス・パターン情報が記憶される。S
MPノード12内(プロセッサ16の内部とSMPノー
ド12に含まれるキャッシュ階層内の両方)には多数の
キャッシュを含めることができるので、この状態をディ
レクトリに記憶すると、データ・アクセス・パターンの
検出および処理専用の記憶域の全体的な量を低減させる
ことができる。データ・アクセス・パターン検出・処理
ロジックをホーム・ノードおよびディレクトリで集中制
御することによって、状態を複数のキャッシュに記憶す
る分散システムよりも機構を簡単にすることができる。
他の利点は、このアルゴリズムでは、移行モードから非
移行モードへの変換を検出する際に、プロセッサや関連
するキャッシュからのサポートが必要とされないことで
ある。
【0023】一実施形態では、コンピュータ・システム
10は、各コヒーレンシ単位ごとに一対のカウンタを使
用する。サスペクト・カウンタは、非移行データ・アク
セス状態から移行データ・アクセス状態への遷移が可能
なときにそれを検出するために使用される。コヒーレン
シ単位のデータ・アクセス状態が非移行状態である間に
データの移行が検出される(すなわち、他の1つのSM
Pノード12Aないし12Dのみと共にコヒーレンシ単
位の共用コピーを維持するSMP12Aないし12Dか
らのリード・ツー・オウン要求)たびに、コヒーレンシ
単位に対応するサスペクト・カウンタが増分される。サ
スペクト・カウンタがオーバフローすると、データ・ア
クセス状態は移行状態に変更される。同様に、データ・
アクセス状態が移行状態であるコヒーレンシ単位に関し
てデータの移行が検出されると、移行カウントが増分す
る。移行カウンタがオーバフローすると、データ・アク
セス状態は非移行状態に変更される。
10は、各コヒーレンシ単位ごとに一対のカウンタを使
用する。サスペクト・カウンタは、非移行データ・アク
セス状態から移行データ・アクセス状態への遷移が可能
なときにそれを検出するために使用される。コヒーレン
シ単位のデータ・アクセス状態が非移行状態である間に
データの移行が検出される(すなわち、他の1つのSM
Pノード12Aないし12Dのみと共にコヒーレンシ単
位の共用コピーを維持するSMP12Aないし12Dか
らのリード・ツー・オウン要求)たびに、コヒーレンシ
単位に対応するサスペクト・カウンタが増分される。サ
スペクト・カウンタがオーバフローすると、データ・ア
クセス状態は移行状態に変更される。同様に、データ・
アクセス状態が移行状態であるコヒーレンシ単位に関し
てデータの移行が検出されると、移行カウントが増分す
る。移行カウンタがオーバフローすると、データ・アク
セス状態は非移行状態に変更される。
【0024】一般的に言えば、メモリ動作とは、データ
を発送元から宛先へ転送させる動作である。発送元また
は宛先、あるいはその両方は、開始側内の記憶位置で
も、あるいはメモリ内の記憶位置でもよい。発送元また
は宛先は、メモリ内の記憶位置であるとき、メモリ動作
と共に搬送されるアドレスを介して指定される。メモリ
動作は、読取り動作でも、あるいは書込み動作でもよ
い。読取り動作では、データが開始側の外側の発送元か
ら開始側内の宛先へ転送される。逆に、書込み動作で
は、データが開始側内の発送元から開始側の外側の宛先
へ転送される。図1に示したコンピュータ・システムで
は、メモリ動作は、SMPバス20上の1つまたは複数
のトランザクションと、ネットワーク14上の1つまた
は複数のコヒーレンシ動作を含むことができる。
を発送元から宛先へ転送させる動作である。発送元また
は宛先、あるいはその両方は、開始側内の記憶位置で
も、あるいはメモリ内の記憶位置でもよい。発送元また
は宛先は、メモリ内の記憶位置であるとき、メモリ動作
と共に搬送されるアドレスを介して指定される。メモリ
動作は、読取り動作でも、あるいは書込み動作でもよ
い。読取り動作では、データが開始側の外側の発送元か
ら開始側内の宛先へ転送される。逆に、書込み動作で
は、データが開始側内の発送元から開始側の外側の宛先
へ転送される。図1に示したコンピュータ・システムで
は、メモリ動作は、SMPバス20上の1つまたは複数
のトランザクションと、ネットワーク14上の1つまた
は複数のコヒーレンシ動作を含むことができる。
【0025】アーキテクチャの概要 各SMPノード12は基本的に、メモリ22を共用メモ
リとして有するSMPシステムである。プロセッサ16
は、高性能プロセッサである。一実施形態では、各プロ
セッサ16は、SPARCプロセッサ・アーキテクチャ
のバージョン9に適合するSPARCプロセッサであ
る。しかし、プロセッサ16が任意のプロセッサ・アー
キテクチャを使用できることに留意されたい。
リとして有するSMPシステムである。プロセッサ16
は、高性能プロセッサである。一実施形態では、各プロ
セッサ16は、SPARCプロセッサ・アーキテクチャ
のバージョン9に適合するSPARCプロセッサであ
る。しかし、プロセッサ16が任意のプロセッサ・アー
キテクチャを使用できることに留意されたい。
【0026】通常、プロセッサ16は、内部命令キャッ
シュと内部データ・キャッシュとを含む。したがって、
外部キャッシュ18はL2キャッシュと呼ばれる(レベ
ル2を表す。内部キャッシュはレベル1キャッシュであ
る)。プロセッサ16が内部キャッシュと共に構成され
ていない場合、外部キャッシュ18はレベル1キャッシ
ュである。「レベル」の語が、特定のキャッシュがプロ
セッサ16内の処理コアにどのくらい近接しているかを
識別するために使用されることに留意されたい。レベル
1は、処理コアに最も近く、レベル2は2番目に近く、
以下同様である。外部キャッシュ18は、それに結合さ
れたプロセッサ16から頻繁にアクセスされるメモリ・
アドレスに迅速にアクセスする。外部キャッシュ18が
様々な特定のキャッシュ構成として構成できることに留
意されたい。たとえば、外部キャッシュ18によってセ
ットアソシエーティブ構成または直接マップ構成を使用
することができる。
シュと内部データ・キャッシュとを含む。したがって、
外部キャッシュ18はL2キャッシュと呼ばれる(レベ
ル2を表す。内部キャッシュはレベル1キャッシュであ
る)。プロセッサ16が内部キャッシュと共に構成され
ていない場合、外部キャッシュ18はレベル1キャッシ
ュである。「レベル」の語が、特定のキャッシュがプロ
セッサ16内の処理コアにどのくらい近接しているかを
識別するために使用されることに留意されたい。レベル
1は、処理コアに最も近く、レベル2は2番目に近く、
以下同様である。外部キャッシュ18は、それに結合さ
れたプロセッサ16から頻繁にアクセスされるメモリ・
アドレスに迅速にアクセスする。外部キャッシュ18が
様々な特定のキャッシュ構成として構成できることに留
意されたい。たとえば、外部キャッシュ18によってセ
ットアソシエーティブ構成または直接マップ構成を使用
することができる。
【0027】SMPバス20は、プロセッサ16(キャ
ッシュ18を通じた通信)とメモリ22とシステム・イ
ンタフェース24と入出力インタフェース26との間の
通信に適応する。一実施形態では、SMPバス20は、
アドレス・バスおよび関連する制御信号、ならびにデー
タ・バスおよび関連する制御信号を含む。アドレス・バ
スとデータ・バスが別々のものなので、SMPバス20
上で分割トランザクション・バス・プロトコルを使用す
ることができる。一般的に言えば、分割トランザクショ
ン・バス・プロトコルは、アドレス・バス上で行われる
トランザクションが、データ・バス上で行われる並行ト
ランザクションとは異なるものでよいプロトコルであ
る。アドレスとデータを使用するトランザクションは、
アドレス・バス上でアドレスおよび関連する制御情報が
搬送されるアドレス・フェーズと、データ・バス上でデ
ータが搬送されるデータ・フェーズとを含む。特定のア
ドレス・フェーズに対応するデータ・フェーズの前に、
他のトランザクションに関する追加アドレス・フェーズ
または追加データ・フェーズ、あるいはその両方を開始
することができる。アドレス・フェーズと対応するデー
タ・フェーズは、多数の方法で相関付けることができ
る。たとえば、データ・トランザクションをアドレス・
トランザクションと同じ順序で行うことができる。別法
として、トランザクションのアドレス・フェーズとデー
タ・フェーズを固有のタグを介して識別することができ
る。
ッシュ18を通じた通信)とメモリ22とシステム・イ
ンタフェース24と入出力インタフェース26との間の
通信に適応する。一実施形態では、SMPバス20は、
アドレス・バスおよび関連する制御信号、ならびにデー
タ・バスおよび関連する制御信号を含む。アドレス・バ
スとデータ・バスが別々のものなので、SMPバス20
上で分割トランザクション・バス・プロトコルを使用す
ることができる。一般的に言えば、分割トランザクショ
ン・バス・プロトコルは、アドレス・バス上で行われる
トランザクションが、データ・バス上で行われる並行ト
ランザクションとは異なるものでよいプロトコルであ
る。アドレスとデータを使用するトランザクションは、
アドレス・バス上でアドレスおよび関連する制御情報が
搬送されるアドレス・フェーズと、データ・バス上でデ
ータが搬送されるデータ・フェーズとを含む。特定のア
ドレス・フェーズに対応するデータ・フェーズの前に、
他のトランザクションに関する追加アドレス・フェーズ
または追加データ・フェーズ、あるいはその両方を開始
することができる。アドレス・フェーズと対応するデー
タ・フェーズは、多数の方法で相関付けることができ
る。たとえば、データ・トランザクションをアドレス・
トランザクションと同じ順序で行うことができる。別法
として、トランザクションのアドレス・フェーズとデー
タ・フェーズを固有のタグを介して識別することができ
る。
【0028】メモリ22は、プロセッサ16によって使
用されるデータおよび命令コードを記憶するように構成
される。メモリ22は、ダイナミック・ランダム・アク
セス・メモリ(DRAM)を備えることが好ましい。た
だし、任意のタイプのメモリを使用することができる。
メモリ22は、他のSMPノード12内の図示した同様
なメモリと共に、分散共用メモリ・システムを形成す
る。分散共用メモリのアドレス空間の各アドレスは、そ
のアドレスのホーム・ノードと呼ばれる特定のノードに
割り当てられる。ホーム・ノードとは異なるノード内の
プロセッサは、ホーム・ノードのアドレスにあるデータ
にアクセスし、場合によってはデータをキャッシュする
ことができる。したがって、SMPノード12どうしの
間と、特定のSMPノード12Aないし12D内のプロ
セッサ16とキャッシュ18との間に、コヒーレンシが
維持される。システム・インタフェース24はノード間
コヒーレンシを与え、それに対してSMPバス20上の
スヌーピングはノード内コヒーレンシを与える。
用されるデータおよび命令コードを記憶するように構成
される。メモリ22は、ダイナミック・ランダム・アク
セス・メモリ(DRAM)を備えることが好ましい。た
だし、任意のタイプのメモリを使用することができる。
メモリ22は、他のSMPノード12内の図示した同様
なメモリと共に、分散共用メモリ・システムを形成す
る。分散共用メモリのアドレス空間の各アドレスは、そ
のアドレスのホーム・ノードと呼ばれる特定のノードに
割り当てられる。ホーム・ノードとは異なるノード内の
プロセッサは、ホーム・ノードのアドレスにあるデータ
にアクセスし、場合によってはデータをキャッシュする
ことができる。したがって、SMPノード12どうしの
間と、特定のSMPノード12Aないし12D内のプロ
セッサ16とキャッシュ18との間に、コヒーレンシが
維持される。システム・インタフェース24はノード間
コヒーレンシを与え、それに対してSMPバス20上の
スヌーピングはノード内コヒーレンシを与える。
【0029】システム・インタフェース24は、ノード
間コヒーレンシを維持するだけでなく、他のSMPノー
ド12との間のデータ転送を必要とするSMPバス20
上のアドレスを検出する。システム・インタフェース2
4は、転送を実行し、トランザクションのための対応す
るデータをSMPバス20上に与える。図の実施形態で
は、システム・インタフェース24はポイント・ツー・
ポイント・ネットワーク14に結合される。しかし、代
替実施形態では他のネットワークを使用できることに留
意されたい。ポイント・ツー・ポイント・ネットワーク
では、ネットワーク上の各ノード間に個別の接続が存在
する。特定のノードは、専用リンクを介して第2のノー
ドと直接通信する。特定のノードは、第3のノードと通
信するときは、第2のノードと通信するために使用した
リンクとは異なるリンクを使用する。
間コヒーレンシを維持するだけでなく、他のSMPノー
ド12との間のデータ転送を必要とするSMPバス20
上のアドレスを検出する。システム・インタフェース2
4は、転送を実行し、トランザクションのための対応す
るデータをSMPバス20上に与える。図の実施形態で
は、システム・インタフェース24はポイント・ツー・
ポイント・ネットワーク14に結合される。しかし、代
替実施形態では他のネットワークを使用できることに留
意されたい。ポイント・ツー・ポイント・ネットワーク
では、ネットワーク上の各ノード間に個別の接続が存在
する。特定のノードは、専用リンクを介して第2のノー
ドと直接通信する。特定のノードは、第3のノードと通
信するときは、第2のノードと通信するために使用した
リンクとは異なるリンクを使用する。
【0030】図1では4つのSMPノード12が示され
ているが、任意の数のノードを使用するコンピュータ・
システム10の実施形態が企図されることに留意された
い。
ているが、任意の数のノードを使用するコンピュータ・
システム10の実施形態が企図されることに留意された
い。
【0031】図2Aおよび2Bは、コンピュータ・シス
テム10の一実施形態によってサポートされる分散メモ
リ・アーキテクチャの概念図である。具体的には、図2
Aおよび2Bは、図1の各SMPノード12がデータを
キャッシュしメモリ・アクセスを実行する代替方法を示
す。コンピュータ・システム10がそのようなアクセス
をサポートする方法に関する詳細については、下記で詳
しく説明する。
テム10の一実施形態によってサポートされる分散メモ
リ・アーキテクチャの概念図である。具体的には、図2
Aおよび2Bは、図1の各SMPノード12がデータを
キャッシュしメモリ・アクセスを実行する代替方法を示
す。コンピュータ・システム10がそのようなアクセス
をサポートする方法に関する詳細については、下記で詳
しく説明する。
【0032】次に、図2Aを参照すると、コンピュータ
・システム10の一実施形態によってサポートされる第
1のメモリ・アーキテクチャ30を示す論理図が示され
ている。アーキテクチャ30は、複数のプロセッサ32
Aないし32Dと、複数のキャッシュ34Aないし34
Dと、複数のメモリ36Aないし36Dと、相互接続ネ
ットワーク38とを含む。複数のメモリ36は分散共用
メモリを形成する。アドレス空間内の各アドレスは、1
つのメモリ36内の位置に対応する。
・システム10の一実施形態によってサポートされる第
1のメモリ・アーキテクチャ30を示す論理図が示され
ている。アーキテクチャ30は、複数のプロセッサ32
Aないし32Dと、複数のキャッシュ34Aないし34
Dと、複数のメモリ36Aないし36Dと、相互接続ネ
ットワーク38とを含む。複数のメモリ36は分散共用
メモリを形成する。アドレス空間内の各アドレスは、1
つのメモリ36内の位置に対応する。
【0033】アーキテクチャ30は非一様メモリ・アー
キテクチャ(NUMA)である。NUMAアーキテクチ
ャでは、第1のメモリ・アドレスにアクセスするのに必
要な時間の長さが、第2のメモリ・アドレスにアクセス
するのに必要な時間の長さと大幅に異なることがある。
アクセス時間は、アクセスの開始側と、アクセスされた
データを記憶しているメモリ36Aないし36Dの位置
に依存する。たとえば、プロセッサ32Aが、メモリ3
6Aに記憶されている第1のメモリ・アドレスにアクセ
スする場合、このアクセス時間は、メモリ36Bないし
36Dのうちの1つに記憶されている第2のメモリ・ア
ドレスへのアクセスのアクセス時間よりもずっと短い。
すなわち、プロセッサ32Aによるメモリ36Aへのア
クセスはローカルに(たとえば、ネットワーク38上で
の転送なしに)完了することができ、それに対してメモ
リ36Bへのプロセッサ32Aアクセスはネットワーク
38を介して実行される。通常、ネットワーク38を通
じたアクセスは、ローカル・メモリ内で完了するアクセ
スよりも低速である。たとえば、ローカル・アクセスは
数百ナノ秒で完了することができ、それに対してネット
ワークを介したアクセスは数マイクロ秒を占有する可能
性がある。
キテクチャ(NUMA)である。NUMAアーキテクチ
ャでは、第1のメモリ・アドレスにアクセスするのに必
要な時間の長さが、第2のメモリ・アドレスにアクセス
するのに必要な時間の長さと大幅に異なることがある。
アクセス時間は、アクセスの開始側と、アクセスされた
データを記憶しているメモリ36Aないし36Dの位置
に依存する。たとえば、プロセッサ32Aが、メモリ3
6Aに記憶されている第1のメモリ・アドレスにアクセ
スする場合、このアクセス時間は、メモリ36Bないし
36Dのうちの1つに記憶されている第2のメモリ・ア
ドレスへのアクセスのアクセス時間よりもずっと短い。
すなわち、プロセッサ32Aによるメモリ36Aへのア
クセスはローカルに(たとえば、ネットワーク38上で
の転送なしに)完了することができ、それに対してメモ
リ36Bへのプロセッサ32Aアクセスはネットワーク
38を介して実行される。通常、ネットワーク38を通
じたアクセスは、ローカル・メモリ内で完了するアクセ
スよりも低速である。たとえば、ローカル・アクセスは
数百ナノ秒で完了することができ、それに対してネット
ワークを介したアクセスは数マイクロ秒を占有する可能
性がある。
【0034】リモート・ノードに記憶されているアドレ
スに対応するデータは任意のキャッシュ34にキャッシ
ュすることができる。しかし、キャッシュ34がそのよ
うなリモート・アドレスに対応するデータを放棄した
後、リモート・アドレスへのその後のアクセスはネット
ワーク38上での転送を介して完了する。
スに対応するデータは任意のキャッシュ34にキャッシ
ュすることができる。しかし、キャッシュ34がそのよ
うなリモート・アドレスに対応するデータを放棄した
後、リモート・アドレスへのその後のアクセスはネット
ワーク38上での転送を介して完了する。
【0035】NUMAアーキテクチャは、主として特定
のローカル・メモリに対応するアドレスを使用するソフ
トウェア・アプリケーションに優れた性能特性を付与す
ることができる。一方、より多くのランダム・アクセス
・パターンを有しメモリ・アクセスを特定のローカル・
メモリ内のアドレスに制限しないソフトウェア・アプリ
ケーションは、特定のプロセッサ32がリモート・ノー
ドへの反復アクセスを実行するときに大量のネットワー
ク・トラフィックを経験する。
のローカル・メモリに対応するアドレスを使用するソフ
トウェア・アプリケーションに優れた性能特性を付与す
ることができる。一方、より多くのランダム・アクセス
・パターンを有しメモリ・アクセスを特定のローカル・
メモリ内のアドレスに制限しないソフトウェア・アプリ
ケーションは、特定のプロセッサ32がリモート・ノー
ドへの反復アクセスを実行するときに大量のネットワー
ク・トラフィックを経験する。
【0036】次に図2Bを参照すると、図1のコンピュ
ータ・システム10によってサポートされる第2のメモ
リ・アーキテクチャ40を示す論理図が示されている。
アーキテクチャ40は、複数のプロセッサ42Aないし
42Dと、複数のキャッシュ44Aないし44Dと、複
数のメモリ46Aないし46Dと、ネットワーク48と
を含む。しかし、メモリ46はキャッシュ44とネット
ワーク48との間に論理的に結合される。メモリ46
は、より大規模なキャッシュ(たとえば、レベル3のキ
ャッシュ)として働き、対応するプロセッサ42からア
クセスされるアドレスを記憶する。メモリ46は、対応
するプロセッサ42から作用を受けているデータを「ア
トラクトする」と言われる。図2Aに示したNUMAア
ーキテクチャとは異なり、アーキテクチャ40は、ロー
カル・プロセッサがリモート・データにアクセスする際
にリモート・データをローカル・メモリに記憶すること
によってネットワーク48上のアクセスの数を低減させ
る。
ータ・システム10によってサポートされる第2のメモ
リ・アーキテクチャ40を示す論理図が示されている。
アーキテクチャ40は、複数のプロセッサ42Aないし
42Dと、複数のキャッシュ44Aないし44Dと、複
数のメモリ46Aないし46Dと、ネットワーク48と
を含む。しかし、メモリ46はキャッシュ44とネット
ワーク48との間に論理的に結合される。メモリ46
は、より大規模なキャッシュ(たとえば、レベル3のキ
ャッシュ)として働き、対応するプロセッサ42からア
クセスされるアドレスを記憶する。メモリ46は、対応
するプロセッサ42から作用を受けているデータを「ア
トラクトする」と言われる。図2Aに示したNUMAア
ーキテクチャとは異なり、アーキテクチャ40は、ロー
カル・プロセッサがリモート・データにアクセスする際
にリモート・データをローカル・メモリに記憶すること
によってネットワーク48上のアクセスの数を低減させ
る。
【0037】アーキテクチャ40をキャッシュ専用メモ
リ・アーキテクチャ(COMA)と呼ぶ。メモリ46の
組合せで形成された分散共用メモリ内の複数の位置は、
特定のアドレスに対応するデータを記憶することができ
る。特定の記憶位置に特定のアドレスの永久的なマッピ
ングが割り当てられることはない。その代わり、特定の
アドレスに対応するデータを記憶する位置は、その特定
のアドレスにアクセスするプロセッサ42に基づいて動
的に変化する。逆に、NUMAアーキテクチャでは、メ
モリ46内の特定の記憶位置が特定のアドレスに割り当
てられる。アーキテクチャ40は、アーキテクチャ上で
実行中のアプリケーションによって実行されるメモリ・
アクセス・パターンに調整し、メモリ46どうしの間で
コヒーレンシが維持される。
リ・アーキテクチャ(COMA)と呼ぶ。メモリ46の
組合せで形成された分散共用メモリ内の複数の位置は、
特定のアドレスに対応するデータを記憶することができ
る。特定の記憶位置に特定のアドレスの永久的なマッピ
ングが割り当てられることはない。その代わり、特定の
アドレスに対応するデータを記憶する位置は、その特定
のアドレスにアクセスするプロセッサ42に基づいて動
的に変化する。逆に、NUMAアーキテクチャでは、メ
モリ46内の特定の記憶位置が特定のアドレスに割り当
てられる。アーキテクチャ40は、アーキテクチャ上で
実行中のアプリケーションによって実行されるメモリ・
アクセス・パターンに調整し、メモリ46どうしの間で
コヒーレンシが維持される。
【0038】好ましい実施形態では、コンピュータ・シ
ステム10は、図2Aおよび2Bに示した両方のメモリ
・アーキテクチャをサポートする。具体的には、メモリ
・アドレスに、1つのSMPノード12Aないし12D
からNUMA方式でアクセスし、同時に他のSMPノー
ド12Aないし12DからCOMA方式でアクセスする
ことができる。一実施形態では、SMPバス20上のア
ドレスのあるビットが、他のSMPノード12を、与え
られたアドレスのホーム・ノードとして識別している場
合に、NUMAアクセスが検出される。そうでない場合
は、COMAアクセスが仮定される。他の詳細を下記に
与える。
ステム10は、図2Aおよび2Bに示した両方のメモリ
・アーキテクチャをサポートする。具体的には、メモリ
・アドレスに、1つのSMPノード12Aないし12D
からNUMA方式でアクセスし、同時に他のSMPノー
ド12Aないし12DからCOMA方式でアクセスする
ことができる。一実施形態では、SMPバス20上のア
ドレスのあるビットが、他のSMPノード12を、与え
られたアドレスのホーム・ノードとして識別している場
合に、NUMAアクセスが検出される。そうでない場合
は、COMAアクセスが仮定される。他の詳細を下記に
与える。
【0039】一実施形態では、COMAアーキテクチャ
は、ハードウェア技法とソフトウェア技法の組合せを使
用して実施される。ハードウェアは、ページのローカル
にキャッシュされたコピー間のコヒーレンシを維持し、
ソフトウェア(たとえば、コンピュータ・システム10
で使用されるオペレーティング・システム)は、キャッ
シュされたページを割り振り、割り振り解除する責任を
負う。
は、ハードウェア技法とソフトウェア技法の組合せを使
用して実施される。ハードウェアは、ページのローカル
にキャッシュされたコピー間のコヒーレンシを維持し、
ソフトウェア(たとえば、コンピュータ・システム10
で使用されるオペレーティング・システム)は、キャッ
シュされたページを割り振り、割り振り解除する責任を
負う。
【0040】図3は、一般に、図1に示したSMPノー
ド12Aに適合する、SMPノード12Aの一実施形態
の詳細を示す。他のノード12も同様に構成することが
できる。図1の各SMPノード12の特定の代替実施形
態も可能であることに留意されたい。図3に示したSM
Pノード12Aの実施形態は、サブノード50Aやサブ
ノード50Bなど複数のサブノードを含む。各サブノー
ド50は、2つのプロセッサ16および対応するキャッ
シュ18と、メモリ部分56と、アドレス・コントロー
ラ52と、データ・コントローラ54とを含む。サブノ
ード50内のメモリ部分56は集合的に、図1のSMP
ノード12Aのメモリ22を形成する。他のサブノード
(図示せず)はさらに、SMPバス20に結合され入出
力インタフェース26を形成する。
ド12Aに適合する、SMPノード12Aの一実施形態
の詳細を示す。他のノード12も同様に構成することが
できる。図1の各SMPノード12の特定の代替実施形
態も可能であることに留意されたい。図3に示したSM
Pノード12Aの実施形態は、サブノード50Aやサブ
ノード50Bなど複数のサブノードを含む。各サブノー
ド50は、2つのプロセッサ16および対応するキャッ
シュ18と、メモリ部分56と、アドレス・コントロー
ラ52と、データ・コントローラ54とを含む。サブノ
ード50内のメモリ部分56は集合的に、図1のSMP
ノード12Aのメモリ22を形成する。他のサブノード
(図示せず)はさらに、SMPバス20に結合され入出
力インタフェース26を形成する。
【0041】図3に示したように、SMPバス20は、
アドレス・バス58とデータ・バス60とを含む。アド
レス・コントローラ52はアドレス・バス58に結合さ
れ、データ・コントローラ54はデータ・バス60に結
合される。図3は、システム・インタフェース論理ブロ
ック62と、変換記憶域64と、ディレクトリ66と、
メモリ・タグ(MTAG)68とを含むシステム・イン
タフェース24も示す。論理ブロック62は、アドレス
・バス58とデータ・バス60の両方に結合され、下記
で詳しく説明するようにある種の状況でアドレス・バス
58上で無視信号70をアサートする。論理ブロック6
2は、変換記憶域64、ディレクトリ66、MTAG6
8、ネットワーク14にも結合される。
アドレス・バス58とデータ・バス60とを含む。アド
レス・コントローラ52はアドレス・バス58に結合さ
れ、データ・コントローラ54はデータ・バス60に結
合される。図3は、システム・インタフェース論理ブロ
ック62と、変換記憶域64と、ディレクトリ66と、
メモリ・タグ(MTAG)68とを含むシステム・イン
タフェース24も示す。論理ブロック62は、アドレス
・バス58とデータ・バス60の両方に結合され、下記
で詳しく説明するようにある種の状況でアドレス・バス
58上で無視信号70をアサートする。論理ブロック6
2は、変換記憶域64、ディレクトリ66、MTAG6
8、ネットワーク14にも結合される。
【0042】図3の実施形態では、各サブノード50
は、SMPバス20が配置されたバックプレーンに挿入
できるプリント回路ボード上に構成される。このよう
に、SMPノード12内に含まれるプロセッサまたは入
出力インタフェース26あるいはその両方の数は、サブ
ノード50を挿入しあるいは取り外すことによって変更
することができる。たとえば、コンピュータ・システム
10は最初、少数のサブノード50と共に構成すること
ができる。コンピュータ・システム10のユーザが必要
とするコンピューティング・パワーが増大するにつれて
必要に応じて追加サブノード50を追加することができ
る。
は、SMPバス20が配置されたバックプレーンに挿入
できるプリント回路ボード上に構成される。このよう
に、SMPノード12内に含まれるプロセッサまたは入
出力インタフェース26あるいはその両方の数は、サブ
ノード50を挿入しあるいは取り外すことによって変更
することができる。たとえば、コンピュータ・システム
10は最初、少数のサブノード50と共に構成すること
ができる。コンピュータ・システム10のユーザが必要
とするコンピューティング・パワーが増大するにつれて
必要に応じて追加サブノード50を追加することができ
る。
【0043】アドレス・コントローラ52は、キャッシ
ュ18とSMP20のアドレス部分との間のインタフェ
ースを形成する。図の実施形態では、アドレス・コント
ローラ52は、出力待ち行列72といくつかの入力待ち
行列74とを含む。出力待ち行列72は、アドレス・コ
ントローラ52がアドレス・バス58へのアクセスを許
可されるまで出力待ち行列に接続されたプロセッサから
のトランザクションをバッファする。アドレス・コント
ローラ52は、出力待ち行列72に記憶されているトラ
ンザクションを、それらが出力待ち行列72に入れられ
た順に実行する(すなわち、出力待ち行列72はFIF
O待ち行列である)。アドレス・コントローラ52によ
って実行されるトランザクション、ならびにキャッシュ
18およびプロセッサ16の内部のキャッシュによって
スヌープされるアドレス・バス58から受け取ったトラ
ンザクションは、入力待ち行列74に入れられる。
ュ18とSMP20のアドレス部分との間のインタフェ
ースを形成する。図の実施形態では、アドレス・コント
ローラ52は、出力待ち行列72といくつかの入力待ち
行列74とを含む。出力待ち行列72は、アドレス・コ
ントローラ52がアドレス・バス58へのアクセスを許
可されるまで出力待ち行列に接続されたプロセッサから
のトランザクションをバッファする。アドレス・コント
ローラ52は、出力待ち行列72に記憶されているトラ
ンザクションを、それらが出力待ち行列72に入れられ
た順に実行する(すなわち、出力待ち行列72はFIF
O待ち行列である)。アドレス・コントローラ52によ
って実行されるトランザクション、ならびにキャッシュ
18およびプロセッサ16の内部のキャッシュによって
スヌープされるアドレス・バス58から受け取ったトラ
ンザクションは、入力待ち行列74に入れられる。
【0044】出力待ち行列72と同様に、入力待ち行列
74はFIFO待ち行列である。すべてのアドレス・ト
ランザクションは、各サブノード50の入力待ち行列7
4(場合によっては、アドレス・トランザクションを開
始したサブノード50の入力待ち行列74内)に記憶さ
れる。したがって、アドレス・トランザクションは、ス
ヌーピングのために、アドレス・トランザクションがア
ドレス・バス58上で行われる順にキャッシュ18およ
びプロセッサ16に与えられる。トランザクションがア
ドレス・バス58上で行われる順序は、SMPノード1
2Aの順序である。しかし、完全なシステムは1つのグ
ローバル・メモリ順序を有することが予期される。この
ように順序が予期されるため、ネットワーク14上の動
作の順序によってグローバル順序を確立する必要がある
ので、コンピュータ・システム10が使用するNUMA
アーキテクチャとCOMAアーキテクチャの両方で問題
が生じる。2つのノードがあるアドレスに対するトラン
ザクションを実行する場合、そのアドレスのホーム・ノ
ードで対応するコヒーレンシ動作が行われる順序は、各
ノード内で見られる2つのトランザクションの順序を定
義する。たとえば、同じアドレスに対して2つの書込み
トランザクションが実行される場合、そのアドレスのホ
ーム・ノードに2番目に到着する書込み動作は2番目に
完了する書込みトランザクションであるべきである(す
なわち、両方の書込みトランザクションによって更新さ
れるバイト位置は、両方のトランザクションの完了時に
第2の書込みトランザクションから与えられる値を記憶
する)。しかし、第2のトランザクションを実行するノ
ードは実際には、SMPバス20上で最初に第2のトラ
ンザクションを行わせることができる。無視信号70に
よって、SMPノード12の残りの部分が第2のトラン
ザクションに反応することなしに、第2のトランザクシ
ョンをシステム・インタフェース24へ転送することが
できる。
74はFIFO待ち行列である。すべてのアドレス・ト
ランザクションは、各サブノード50の入力待ち行列7
4(場合によっては、アドレス・トランザクションを開
始したサブノード50の入力待ち行列74内)に記憶さ
れる。したがって、アドレス・トランザクションは、ス
ヌーピングのために、アドレス・トランザクションがア
ドレス・バス58上で行われる順にキャッシュ18およ
びプロセッサ16に与えられる。トランザクションがア
ドレス・バス58上で行われる順序は、SMPノード1
2Aの順序である。しかし、完全なシステムは1つのグ
ローバル・メモリ順序を有することが予期される。この
ように順序が予期されるため、ネットワーク14上の動
作の順序によってグローバル順序を確立する必要がある
ので、コンピュータ・システム10が使用するNUMA
アーキテクチャとCOMAアーキテクチャの両方で問題
が生じる。2つのノードがあるアドレスに対するトラン
ザクションを実行する場合、そのアドレスのホーム・ノ
ードで対応するコヒーレンシ動作が行われる順序は、各
ノード内で見られる2つのトランザクションの順序を定
義する。たとえば、同じアドレスに対して2つの書込み
トランザクションが実行される場合、そのアドレスのホ
ーム・ノードに2番目に到着する書込み動作は2番目に
完了する書込みトランザクションであるべきである(す
なわち、両方の書込みトランザクションによって更新さ
れるバイト位置は、両方のトランザクションの完了時に
第2の書込みトランザクションから与えられる値を記憶
する)。しかし、第2のトランザクションを実行するノ
ードは実際には、SMPバス20上で最初に第2のトラ
ンザクションを行わせることができる。無視信号70に
よって、SMPノード12の残りの部分が第2のトラン
ザクションに反応することなしに、第2のトランザクシ
ョンをシステム・インタフェース24へ転送することが
できる。
【0045】したがって、システム・インタフェース論
理ブロック62は、アドレス・コントローラ52の出力
待ち行列/入力待ち行列構造によって課される順序付け
制約と共に効果的に動作するために、無視信号70を使
用する。アドレス・バス58上にトランザクションが与
えられ、システム・インタフェース論理ブロック62
が、このトランザクションに応答してリモート・トラン
ザクションを実行すべきであることを検出すると、論理
ブロック62は無視信号70をアサートする。あるトラ
ンザクションに対して無視信号70をアサートすると、
アドレス・コントローラ52は入力待ち行列74へのそ
のトランザクションの格納を抑制する。したがって、無
視されたトランザクションに続いて行われ、SMPノー
ド12A内でローカルに完了する他のトランザクション
は、入力待ち行列74の順序付け規則を破らずに、無視
されたトランザクションに対して所定の順序とは異なる
順序で完了することができる。具体的には、ネットワー
ク14上のコヒーレンシ活動に応答してシステム・イン
タフェース24によって実行されるトランザクション
を、無視されたトランザクションの後に続けて実行し完
了することができる。リモート・トランザクションから
応答が受け取られたときに、システム・インタフェース
論理ブロック62によって、無視されたトランザクショ
ンをアドレス・バス58上で再発行することができる。
それによって、トランザクションは、入力待ち行列74
に入れられ、再発行時に行われるトランザクションと共
に順序正しく完了することができる。
理ブロック62は、アドレス・コントローラ52の出力
待ち行列/入力待ち行列構造によって課される順序付け
制約と共に効果的に動作するために、無視信号70を使
用する。アドレス・バス58上にトランザクションが与
えられ、システム・インタフェース論理ブロック62
が、このトランザクションに応答してリモート・トラン
ザクションを実行すべきであることを検出すると、論理
ブロック62は無視信号70をアサートする。あるトラ
ンザクションに対して無視信号70をアサートすると、
アドレス・コントローラ52は入力待ち行列74へのそ
のトランザクションの格納を抑制する。したがって、無
視されたトランザクションに続いて行われ、SMPノー
ド12A内でローカルに完了する他のトランザクション
は、入力待ち行列74の順序付け規則を破らずに、無視
されたトランザクションに対して所定の順序とは異なる
順序で完了することができる。具体的には、ネットワー
ク14上のコヒーレンシ活動に応答してシステム・イン
タフェース24によって実行されるトランザクション
を、無視されたトランザクションの後に続けて実行し完
了することができる。リモート・トランザクションから
応答が受け取られたときに、システム・インタフェース
論理ブロック62によって、無視されたトランザクショ
ンをアドレス・バス58上で再発行することができる。
それによって、トランザクションは、入力待ち行列74
に入れられ、再発行時に行われるトランザクションと共
に順序正しく完了することができる。
【0046】一実施形態では、特定のアドレス・コント
ローラ52からのトランザクションが無視された後、そ
の特定のアドレス・コントローラ52からのその後のコ
ヒーレント・トランザクションも無視される。特定のプ
ロセッサ16からのトランザクションは、アドレス・バ
ス58上に与えられることによって課される順序付け要
件にはかかわらず、互いに重要な順序付け関係を有する
ことができる。たとえば、トランザクションは、SPA
RCアーキテクチャに含まれるMEMBAR命令などの
メモリ同期命令によって他のトランザクションから分離
することができる。プロセッサ16は、トランザクショ
ンを、それらが互いに実行される順に搬送する。トラン
ザクションは、出力待ち行列72内で順序付けされ、し
たがって、特定の出力待ち行列72から発行されるトラ
ンザクションは順序正しく実行されるはずである。特定
のアドレス・コントローラ52からのその後のトランザ
クションを無視することによって、特定の出力待ち行列
72に関するインオーダー規則を保存することができ
る。さらに、特定のプロセッサからのすべてのトランザ
クションを順序付けなくて済むことに留意されたい。し
かし、アドレス・バス58上で、どのトランザクション
を順序付けなければならないかと、どのトランザクショ
ンを順序付けなくてもよいかを判定することは困難であ
る。したがって、この実施形態で、論理ブロック62は
特定の出力待ち行列72からのすべてのトランザクショ
ンの順序を維持する。この規則の例外を許容するサブノ
ード50の他の実施形態が可能であることに留意された
い。
ローラ52からのトランザクションが無視された後、そ
の特定のアドレス・コントローラ52からのその後のコ
ヒーレント・トランザクションも無視される。特定のプ
ロセッサ16からのトランザクションは、アドレス・バ
ス58上に与えられることによって課される順序付け要
件にはかかわらず、互いに重要な順序付け関係を有する
ことができる。たとえば、トランザクションは、SPA
RCアーキテクチャに含まれるMEMBAR命令などの
メモリ同期命令によって他のトランザクションから分離
することができる。プロセッサ16は、トランザクショ
ンを、それらが互いに実行される順に搬送する。トラン
ザクションは、出力待ち行列72内で順序付けされ、し
たがって、特定の出力待ち行列72から発行されるトラ
ンザクションは順序正しく実行されるはずである。特定
のアドレス・コントローラ52からのその後のトランザ
クションを無視することによって、特定の出力待ち行列
72に関するインオーダー規則を保存することができ
る。さらに、特定のプロセッサからのすべてのトランザ
クションを順序付けなくて済むことに留意されたい。し
かし、アドレス・バス58上で、どのトランザクション
を順序付けなければならないかと、どのトランザクショ
ンを順序付けなくてもよいかを判定することは困難であ
る。したがって、この実施形態で、論理ブロック62は
特定の出力待ち行列72からのすべてのトランザクショ
ンの順序を維持する。この規則の例外を許容するサブノ
ード50の他の実施形態が可能であることに留意された
い。
【0047】データ・コントローラ54は、データ・バ
ス60、メモリ部分56、キャッシュ18との間でデー
タをルーティングする。データ・コントローラ54は、
アドレス・コントローラ52と同様な入力待ち行列と出
力待ち行列とを含むことができる。一実施形態では、デ
ータ・コントローラ54は、バイト・スライス・バス構
成の複数の物理装置を使用する。
ス60、メモリ部分56、キャッシュ18との間でデー
タをルーティングする。データ・コントローラ54は、
アドレス・コントローラ52と同様な入力待ち行列と出
力待ち行列とを含むことができる。一実施形態では、デ
ータ・コントローラ54は、バイト・スライス・バス構
成の複数の物理装置を使用する。
【0048】図3に示したプロセッサ16は、メモリ管
理装置(MMU)76Aないし76Bを含む。MMU7
6は、プロセッサ16上で実行される命令コードによっ
て生成されたデータ・アドレスと、命令アドレスに対し
て、仮想アドレス・物理アドレス変換を実行する。命令
の実行に応答して生成されるアドレスは仮想アドレスで
ある。言い換えれば、仮想アドレスは、命令コードのプ
ログラマによって作成されるアドレスである。仮想アド
レスは(MMU76内で具体化される)アドレス変換機
構を通過し、アドレス変換機構から対応する物理アドレ
スが作成される。物理アドレスは、メモリ22内の記憶
位置を識別する。
理装置(MMU)76Aないし76Bを含む。MMU7
6は、プロセッサ16上で実行される命令コードによっ
て生成されたデータ・アドレスと、命令アドレスに対し
て、仮想アドレス・物理アドレス変換を実行する。命令
の実行に応答して生成されるアドレスは仮想アドレスで
ある。言い換えれば、仮想アドレスは、命令コードのプ
ログラマによって作成されるアドレスである。仮想アド
レスは(MMU76内で具体化される)アドレス変換機
構を通過し、アドレス変換機構から対応する物理アドレ
スが作成される。物理アドレスは、メモリ22内の記憶
位置を識別する。
【0049】アドレス変換は多数の理由で実行される。
たとえば、アドレス変換機構を使用して、あるメモリ・
アドレスに対する特定のコンピューティング・タスクの
アクセスを許可または拒否することができる。このよう
に、あるコンピューティング・タスク内のデータおよび
命令は、他のコンピューティング・タスクのデータおよ
び命令から分離される。また、コンピューティング・タ
スクのデータおよび命令の各部分は、ハード・ディスク
・ドライブに「ページアウト」することができる。ある
部分がページアウトされると、その変換は無効化され
る。コンピューティング・タスクによるその部分へのア
クセス時には、変換が失敗しているために割り込みが行
われる。この割り込みによって、オペレーティング・シ
ステムは、ハード・ディスク・ドライブから対応する情
報を検索することができる。このように、メモリ22内
の実際のメモリよりも多くの仮想メモリを使用すること
ができる。仮想メモリの他の多くの用途が良く知られて
いる。
たとえば、アドレス変換機構を使用して、あるメモリ・
アドレスに対する特定のコンピューティング・タスクの
アクセスを許可または拒否することができる。このよう
に、あるコンピューティング・タスク内のデータおよび
命令は、他のコンピューティング・タスクのデータおよ
び命令から分離される。また、コンピューティング・タ
スクのデータおよび命令の各部分は、ハード・ディスク
・ドライブに「ページアウト」することができる。ある
部分がページアウトされると、その変換は無効化され
る。コンピューティング・タスクによるその部分へのア
クセス時には、変換が失敗しているために割り込みが行
われる。この割り込みによって、オペレーティング・シ
ステムは、ハード・ディスク・ドライブから対応する情
報を検索することができる。このように、メモリ22内
の実際のメモリよりも多くの仮想メモリを使用すること
ができる。仮想メモリの他の多くの用途が良く知られて
いる。
【0050】再び、図1に示したコンピュータ・システ
ム10を、図3に示したSMPノード12A実施形態と
共に参照すると分かるように、MMU76によって算出
される物理アドレスは、プロセッサ16が配置されたS
MPノード12に関連付けられたメモリ22内の位置を
定義するローカル物理アドレス(LPA)である。MT
AG68は、メモリ22内の各「コヒーレンシ単位」ご
とにコヒーレンシ状態を記憶する。SMPバス20上で
アドレス変換が実行されると、システム・インタフェー
ス論理ブロック62は、アクセスされたコヒーレンシ単
位に関する、MTAG68に記憶されているコヒーレン
シ状態を調べる。SMPノード12がこのアクセスを実
行するのに十分な、このコヒーレンシ単位へのアクセス
権を有することをコヒーレンシ状態が示している場合、
アドレス変換は続行する。しかし、トランザクションを
完了する前にコヒーレンシ活動を実行すべきであること
をコヒーレンシ状態が示している場合、システム・イン
タフェース論理ブロック62は無視信号70をアサート
する。論理ブロック62は、ネットワーク14上でコヒ
ーレンシ動作を実行し、適当なコヒーレンシ状態を得
る。適当なコヒーレンシ状態が得られると、論理ブロッ
ク62は、無視されたトランザクションをSMPバス2
0上で再発行する。それに続いて、トランザクションが
完了する。
ム10を、図3に示したSMPノード12A実施形態と
共に参照すると分かるように、MMU76によって算出
される物理アドレスは、プロセッサ16が配置されたS
MPノード12に関連付けられたメモリ22内の位置を
定義するローカル物理アドレス(LPA)である。MT
AG68は、メモリ22内の各「コヒーレンシ単位」ご
とにコヒーレンシ状態を記憶する。SMPバス20上で
アドレス変換が実行されると、システム・インタフェー
ス論理ブロック62は、アクセスされたコヒーレンシ単
位に関する、MTAG68に記憶されているコヒーレン
シ状態を調べる。SMPノード12がこのアクセスを実
行するのに十分な、このコヒーレンシ単位へのアクセス
権を有することをコヒーレンシ状態が示している場合、
アドレス変換は続行する。しかし、トランザクションを
完了する前にコヒーレンシ活動を実行すべきであること
をコヒーレンシ状態が示している場合、システム・イン
タフェース論理ブロック62は無視信号70をアサート
する。論理ブロック62は、ネットワーク14上でコヒ
ーレンシ動作を実行し、適当なコヒーレンシ状態を得
る。適当なコヒーレンシ状態が得られると、論理ブロッ
ク62は、無視されたトランザクションをSMPバス2
0上で再発行する。それに続いて、トランザクションが
完了する。
【0051】一般的に言えば、特定の記憶位置(たとえ
ば、キャッシュまたはメモリ22)でコヒーレンシ単位
に関して維持されるコヒーレンシ状態は、そのSMPノ
ード12でのコヒーレンシ単位へのアクセス権を示す。
このアクセス権は、コヒーレンシ単位の妥当性と、その
SMPノード12内でコヒーレンシ単位のコピーに対し
て与えられている読取り/書込み許可を示す。一実施形
態では、コンピュータ・システム10によって使用され
るコヒーレンシ状態は、修正、所有、共用、無効であ
る。修正状態は、SMPノード12が対応するコヒーレ
ンシ単位を更新したことを示す。したがって、他のSM
Pノード12はこのコヒーレンシ単位のコピーを有さな
い。また、修正されたコヒーレンシ単位は、SMPノー
ド12から放棄されると、再びホーム・ノードに記憶さ
れる。所有状態は、このコヒーレンシ単位に対してSM
Pノード12が責任を負うが、他のSMPノード12が
コピーを共用している可能性があることを示す。この場
合も、コヒーレンシ単位は、SMPノード12から放棄
されると、再びホーム・ノードに記憶される。共用状態
は、SMPノード12がコヒーレンシ単位を読み取るこ
とはできるが、所有状態を得ないかぎり更新することは
できないことを示す。また、他のSMPノード12もこ
のコヒーレンシ単位のコピーを有する可能性がある。最
後に、無効状態は、SMPノード12がコヒーレンシ単
位のコピーを有さないことを示す。一実施形態では、修
正状態は、書込み許可を示すが、無効状態を除く状態
は、対応するコヒーレンシ単位への読取り許可を示す。
ば、キャッシュまたはメモリ22)でコヒーレンシ単位
に関して維持されるコヒーレンシ状態は、そのSMPノ
ード12でのコヒーレンシ単位へのアクセス権を示す。
このアクセス権は、コヒーレンシ単位の妥当性と、その
SMPノード12内でコヒーレンシ単位のコピーに対し
て与えられている読取り/書込み許可を示す。一実施形
態では、コンピュータ・システム10によって使用され
るコヒーレンシ状態は、修正、所有、共用、無効であ
る。修正状態は、SMPノード12が対応するコヒーレ
ンシ単位を更新したことを示す。したがって、他のSM
Pノード12はこのコヒーレンシ単位のコピーを有さな
い。また、修正されたコヒーレンシ単位は、SMPノー
ド12から放棄されると、再びホーム・ノードに記憶さ
れる。所有状態は、このコヒーレンシ単位に対してSM
Pノード12が責任を負うが、他のSMPノード12が
コピーを共用している可能性があることを示す。この場
合も、コヒーレンシ単位は、SMPノード12から放棄
されると、再びホーム・ノードに記憶される。共用状態
は、SMPノード12がコヒーレンシ単位を読み取るこ
とはできるが、所有状態を得ないかぎり更新することは
できないことを示す。また、他のSMPノード12もこ
のコヒーレンシ単位のコピーを有する可能性がある。最
後に、無効状態は、SMPノード12がコヒーレンシ単
位のコピーを有さないことを示す。一実施形態では、修
正状態は、書込み許可を示すが、無効状態を除く状態
は、対応するコヒーレンシ単位への読取り許可を示す。
【0052】本明細書では、コヒーレンシ単位は、コヒ
ーレンシのために単位とみなされるメモリのいくつかの
連続バイトである。たとえば、コヒーレンシ単位内の1
バイトが更新された場合、コヒーレンシ単位全体が更新
されたとみなされる。特定の一実施形態では、コヒーレ
ンシ単位はキャッシュ・ラインであり、連続64バイト
を備える。しかし、コヒーレンシ単位が任意の数のバイ
トを備えることができることが理解されよう。
ーレンシのために単位とみなされるメモリのいくつかの
連続バイトである。たとえば、コヒーレンシ単位内の1
バイトが更新された場合、コヒーレンシ単位全体が更新
されたとみなされる。特定の一実施形態では、コヒーレ
ンシ単位はキャッシュ・ラインであり、連続64バイト
を備える。しかし、コヒーレンシ単位が任意の数のバイ
トを備えることができることが理解されよう。
【0053】システム・インタフェース24は、変換記
憶域64を使用してローカル物理アドレスからグローバ
ル・アドレス(GA)への変換を記憶する変換機構も含
む。グローバル・アドレス内のあるビットは、そのグロ
ーバル・アドレスに関するコヒーレンシ情報が記憶され
ているアドレスのホーム・ノードを識別する。たとえ
ば、コンピュータ・システム10の実施形態は、図1の
SMPノードなど4つのSMPノード12を使用するこ
とができる。そのような実施形態では、グローバル・ア
ドレスの2ビットがホーム・ノードを識別する。グロー
バル・アドレスの最上位部分のビットはホーム・ノード
を識別するために使用されることが好ましい。同じビッ
トが、ローカル物理アドレスではNUMAアクセスを識
別するために使用される。LPAのビットが、ローカル
・ノードがホーム・ノードではないことを示す場合、そ
のLPAはグローバル・アドレスであり、トランザクシ
ョンはNUMAモードで実行される。したがって、オペ
レーティング・システムは、NUMAタイプ・ページの
場合はMMU76にグローバル・アドレスを置く。逆
に、オペレーティング・システムは、COMAタイプ・
ページの場合にはMMU76にLPAを置く。LPA
が、GAに等しくてよい(ホームが、LPAが与えられ
たノードのメモリ22内にある、NUMAアドレスなら
びにグローバル・アドレスの場合)ことに留意された
い。また、LPAは、他のSMPノード12にホームを
有するデータのコピーを記憶するために使用される記憶
位置を識別するときはGAに変換することができる。
憶域64を使用してローカル物理アドレスからグローバ
ル・アドレス(GA)への変換を記憶する変換機構も含
む。グローバル・アドレス内のあるビットは、そのグロ
ーバル・アドレスに関するコヒーレンシ情報が記憶され
ているアドレスのホーム・ノードを識別する。たとえ
ば、コンピュータ・システム10の実施形態は、図1の
SMPノードなど4つのSMPノード12を使用するこ
とができる。そのような実施形態では、グローバル・ア
ドレスの2ビットがホーム・ノードを識別する。グロー
バル・アドレスの最上位部分のビットはホーム・ノード
を識別するために使用されることが好ましい。同じビッ
トが、ローカル物理アドレスではNUMAアクセスを識
別するために使用される。LPAのビットが、ローカル
・ノードがホーム・ノードではないことを示す場合、そ
のLPAはグローバル・アドレスであり、トランザクシ
ョンはNUMAモードで実行される。したがって、オペ
レーティング・システムは、NUMAタイプ・ページの
場合はMMU76にグローバル・アドレスを置く。逆
に、オペレーティング・システムは、COMAタイプ・
ページの場合にはMMU76にLPAを置く。LPA
が、GAに等しくてよい(ホームが、LPAが与えられ
たノードのメモリ22内にある、NUMAアドレスなら
びにグローバル・アドレスの場合)ことに留意された
い。また、LPAは、他のSMPノード12にホームを
有するデータのコピーを記憶するために使用される記憶
位置を識別するときはGAに変換することができる。
【0054】特定のホーム・ノードのディレクトリ66
は、どのSMPノード12が、コピー間のコヒーレンシ
が維持できるようにホーム・ノードに割り当てられた所
与のグローバル・アドレスに対応するデータのコピーを
有するかを識別する。また、ホーム・ノードのディレク
トリ66は、コヒーレンシ単位を所有するSMPノード
12を識別する。したがって、キャッシュ18とプロセ
ッサ16との間のローカル・コヒーレンシはスヌーピン
グを介して維持され、それに対してシステム・ワイド
(またはグローバル)コヒーレンシはMTAG68およ
びディレクトリ66を使用して維持される。ディレクト
リ66は、SMPノード12Aに割り当てられた(すな
わち、SMPノード12Aがホーム・ノードである)コ
ヒーレンシ単位に対応するコヒーレンシ情報を記憶す
る。
は、どのSMPノード12が、コピー間のコヒーレンシ
が維持できるようにホーム・ノードに割り当てられた所
与のグローバル・アドレスに対応するデータのコピーを
有するかを識別する。また、ホーム・ノードのディレク
トリ66は、コヒーレンシ単位を所有するSMPノード
12を識別する。したがって、キャッシュ18とプロセ
ッサ16との間のローカル・コヒーレンシはスヌーピン
グを介して維持され、それに対してシステム・ワイド
(またはグローバル)コヒーレンシはMTAG68およ
びディレクトリ66を使用して維持される。ディレクト
リ66は、SMPノード12Aに割り当てられた(すな
わち、SMPノード12Aがホーム・ノードである)コ
ヒーレンシ単位に対応するコヒーレンシ情報を記憶す
る。
【0055】図3の実施形態では、ディレクトリ66お
よびMTAG68が各コヒーレンシ単位ごとに情報を記
憶することに留意されたい。逆に、変換記憶域64は、
ページに関して定義されたローカル物理/グローバル変
換を記憶する。ページは、複数のコヒーレンシ単位を含
み、通常、サイズが数キロバイト、あるいは場合によっ
ては数メガバイトである。
よびMTAG68が各コヒーレンシ単位ごとに情報を記
憶することに留意されたい。逆に、変換記憶域64は、
ページに関して定義されたローカル物理/グローバル変
換を記憶する。ページは、複数のコヒーレンシ単位を含
み、通常、サイズが数キロバイト、あるいは場合によっ
ては数メガバイトである。
【0056】したがって、ソフトウェアは、ページごと
にローカル物理アドレス/グローバル・アドレス変換を
作成する(それによって、リモートに記憶されているグ
ローバル・ページのコピーを記憶するローカル・メモリ
・ページを割り振る)。したがって、メモリ22のブロ
ックはページごとにも特定のグローバル・アドレスに割
り振られる。しかし、前述のように、コヒーレンシ状態
およびコヒーレンシ活動はコヒーレンシ単位上で実行さ
れる。したがって、メモリの特定のグローバル・アドレ
スにページが割り振られたときに、ページに対応するデ
ータは必ずしも、割り振られたメモリへ転送されるわけ
ではない。その代わり、プロセッサ16がページ内の様
々なコヒーレンシ単位にアクセスすると、それらのコヒ
ーレンシ単位はコヒーレンシ単位の所有者から転送され
る。このように、SMPノード12Aから実際にアクセ
スされたデータは、対応するメモリ22へ転送される。
SMPノード12Aからアクセスされないデータは転送
できず、そのため、メモリ22内のページの割り振り時
にデータのページを転送する実施形態と比べてネットワ
ーク14上の全体的な帯域幅使用度が低減する。
にローカル物理アドレス/グローバル・アドレス変換を
作成する(それによって、リモートに記憶されているグ
ローバル・ページのコピーを記憶するローカル・メモリ
・ページを割り振る)。したがって、メモリ22のブロ
ックはページごとにも特定のグローバル・アドレスに割
り振られる。しかし、前述のように、コヒーレンシ状態
およびコヒーレンシ活動はコヒーレンシ単位上で実行さ
れる。したがって、メモリの特定のグローバル・アドレ
スにページが割り振られたときに、ページに対応するデ
ータは必ずしも、割り振られたメモリへ転送されるわけ
ではない。その代わり、プロセッサ16がページ内の様
々なコヒーレンシ単位にアクセスすると、それらのコヒ
ーレンシ単位はコヒーレンシ単位の所有者から転送され
る。このように、SMPノード12Aから実際にアクセ
スされたデータは、対応するメモリ22へ転送される。
SMPノード12Aからアクセスされないデータは転送
できず、そのため、メモリ22内のページの割り振り時
にデータのページを転送する実施形態と比べてネットワ
ーク14上の全体的な帯域幅使用度が低減する。
【0057】一実施形態では、変換記憶域64、または
ディレクトリ66、またはMTAG68、あるいはそれ
らの組合せはそれぞれ、関連する変換、ディレクトリ、
MTAG情報の一部しか記憶しないキャッシュでよいこ
とに留意されたい。変換、ディレクトリ、MTAG情報
の全体は、メモリ22内のテーブルまたは専用メモリ記
憶域(図示せず)に記憶される。アクセスに必要な情報
が、対応するキャッシュにない場合、テーブルはシステ
ム・インタフェース24からアクセスされる。
ディレクトリ66、またはMTAG68、あるいはそれ
らの組合せはそれぞれ、関連する変換、ディレクトリ、
MTAG情報の一部しか記憶しないキャッシュでよいこ
とに留意されたい。変換、ディレクトリ、MTAG情報
の全体は、メモリ22内のテーブルまたは専用メモリ記
憶域(図示せず)に記憶される。アクセスに必要な情報
が、対応するキャッシュにない場合、テーブルはシステ
ム・インタフェース24からアクセスされる。
【0058】次に、図4を参照すると、例示的なディレ
クトリ・エントリ71が示されている。ディレクトリ・
エントリ71は、図3に示したディレクトリ66の一実
施形態によって使用することができる。ディレクトリ6
6の他の実施形態は、異なるディレクトリ・エントリを
使用することができる。ディレクトリ・エントリ71
は、有効ビット73と、書き直しビット75と、所有者
フィールド77と、共用者フィールド79とを含む。デ
ィレクトリ・エントリ71は、ディレクトリ・エントリ
のテーブル内に存在し、対応するコヒーレンシ単位を識
別するグローバル・アドレスを介してテーブル内に配置
される。具体的には、コヒーレンシ単位に関連付けられ
たディレクトリ・エントリ71は、コヒーレンシ単位を
識別するグローバル・アドレスで形成されたオフセット
位置にあるディレクトリ・エントリのテーブル内に記憶
される。
クトリ・エントリ71が示されている。ディレクトリ・
エントリ71は、図3に示したディレクトリ66の一実
施形態によって使用することができる。ディレクトリ6
6の他の実施形態は、異なるディレクトリ・エントリを
使用することができる。ディレクトリ・エントリ71
は、有効ビット73と、書き直しビット75と、所有者
フィールド77と、共用者フィールド79とを含む。デ
ィレクトリ・エントリ71は、ディレクトリ・エントリ
のテーブル内に存在し、対応するコヒーレンシ単位を識
別するグローバル・アドレスを介してテーブル内に配置
される。具体的には、コヒーレンシ単位に関連付けられ
たディレクトリ・エントリ71は、コヒーレンシ単位を
識別するグローバル・アドレスで形成されたオフセット
位置にあるディレクトリ・エントリのテーブル内に記憶
される。
【0059】有効ビット73は、セットされると、ディ
レクトリ・エントリ71が有効である(すなわち、その
ディレクトリ・エントリ71は、対応するコヒーレンシ
単位に関するコヒーレンシ情報を記憶している)ことを
示す。有効ビット73は、クリアされると、そのディレ
クトリ・エントリ71が無効であることを示す。
レクトリ・エントリ71が有効である(すなわち、その
ディレクトリ・エントリ71は、対応するコヒーレンシ
単位に関するコヒーレンシ情報を記憶している)ことを
示す。有効ビット73は、クリアされると、そのディレ
クトリ・エントリ71が無効であることを示す。
【0060】所有者フィールド77は、1つのSMPノ
ード12をコヒーレンシ単位の所有者として識別する。
所有側SMPノード12Aないし12Dは、コヒーレン
シ単位を修正状態と所有状態のどちらかで維持する。通
常、所有側SMPノード12Aないし12Dは、コヒー
レンシ単位を修正状態で得る(下記の図15を参照され
たい)。それに続いて、所有側SMPノード12Aない
し12Dは、コヒーレンシ単位のコピーを他のSMPノ
ード12Aないし12Dに与える際に所有状態に遷移す
ることができる。他のSMPノード12Aないし12D
はコヒーレンシ単位を共用状態で得る。一実施形態で
は、所有者フィールド77は、4つのSMPノード12
Aないし12Dのうちの1つをコヒーレンシ単位の所有
者として識別するようにコード化された2つのビットを
備える。
ード12をコヒーレンシ単位の所有者として識別する。
所有側SMPノード12Aないし12Dは、コヒーレン
シ単位を修正状態と所有状態のどちらかで維持する。通
常、所有側SMPノード12Aないし12Dは、コヒー
レンシ単位を修正状態で得る(下記の図15を参照され
たい)。それに続いて、所有側SMPノード12Aない
し12Dは、コヒーレンシ単位のコピーを他のSMPノ
ード12Aないし12Dに与える際に所有状態に遷移す
ることができる。他のSMPノード12Aないし12D
はコヒーレンシ単位を共用状態で得る。一実施形態で
は、所有者フィールド77は、4つのSMPノード12
Aないし12Dのうちの1つをコヒーレンシ単位の所有
者として識別するようにコード化された2つのビットを
備える。
【0061】共用者フィールド79は、各SMPノード
12Aないし12Dに割り当てられた1つのビットを含
む。SMPノード12Aないし12Dがコヒーレンシ単
位の共用コピーを維持している場合、共用者フィールド
79内の対応するビットがセットされる。逆に、SMP
ノード12Aないし12Dがコヒーレンシ単位の共用コ
ピーを維持していない場合、共用者フィールド79内の
対応するビットはクリアされる。このように、共用者フ
ィールド79は、図1のコンピュータ・システム10内
に存在するコヒーレンシ単位のすべての共用コピーを示
す。
12Aないし12Dに割り当てられた1つのビットを含
む。SMPノード12Aないし12Dがコヒーレンシ単
位の共用コピーを維持している場合、共用者フィールド
79内の対応するビットがセットされる。逆に、SMP
ノード12Aないし12Dがコヒーレンシ単位の共用コ
ピーを維持していない場合、共用者フィールド79内の
対応するビットはクリアされる。このように、共用者フ
ィールド79は、図1のコンピュータ・システム10内
に存在するコヒーレンシ単位のすべての共用コピーを示
す。
【0062】書き直しビット75は、セットされると、
所有者フィールド77を介してコヒーレンシ単位の所有
者として識別されたSMPノード12Aないし12Dが
コヒーレンシ単位の更新済みコピーをホームSMPノー
ド12に書き込んだことを示す。ビット75は、クリア
されると、所有側SMPノード12Aないし12Dがコ
ヒーレンシ単位の更新済みコピーをホームSMPノード
12Aないし12Dに書き込んでいないことを示す。
所有者フィールド77を介してコヒーレンシ単位の所有
者として識別されたSMPノード12Aないし12Dが
コヒーレンシ単位の更新済みコピーをホームSMPノー
ド12に書き込んだことを示す。ビット75は、クリア
されると、所有側SMPノード12Aないし12Dがコ
ヒーレンシ単位の更新済みコピーをホームSMPノード
12Aないし12Dに書き込んでいないことを示す。
【0063】次に図5を参照すると、システム・インタ
フェース24の一実施形態のブロック図が示されてい
る。図5に示したように、システム・インタフェース2
4は、ディレクトリ66と、変換記憶域64と、MTA
G68とを含む。変換記憶域64は、グローバル・アド
レス/ローカル物理アドレス(GA2LPA)変換装置
80およびローカル物理アドレス/グローバル・アドレ
ス(LPA2GA)変換装置82として示されている。
フェース24の一実施形態のブロック図が示されてい
る。図5に示したように、システム・インタフェース2
4は、ディレクトリ66と、変換記憶域64と、MTA
G68とを含む。変換記憶域64は、グローバル・アド
レス/ローカル物理アドレス(GA2LPA)変換装置
80およびローカル物理アドレス/グローバル・アドレ
ス(LPA2GA)変換装置82として示されている。
【0064】システム・インタフェース24は、SMP
バス20またはネットワーク14上で実行すべきトラン
ザクションを記憶するための入力待ち行列と出力待ち行
列も含む。具体的には、図の実施形態では、システム・
インタフェース24は、ヘッダ・パケットをネットワー
ク14との間でバッファするための入力ヘッダ待ち行列
84と出力ヘッダ待ち行列86とを含む。ヘッダ・パケ
ットは、実行すべき動作を識別し、その後に続くデータ
・パケットの数およびフォーマットを指定する。出力ヘ
ッダ待ち行列86は、ネットワーク14上で送るべきヘ
ッダ・パケットをバッファし、入力ヘッダ待ち行列84
は、システム・インタフェース24が、受け取ったヘッ
ダ・パケットを処理するまで、ネットワーク14から受
け取ったヘッダ・パケットをバッファする。同様に、デ
ータ・パケットは、データがそれぞれ、SMPデータ・
バス60およびネットワーク14上で転送されるまで入
力データ待ち行列88および出力データ待ち行列90に
バッファされる。
バス20またはネットワーク14上で実行すべきトラン
ザクションを記憶するための入力待ち行列と出力待ち行
列も含む。具体的には、図の実施形態では、システム・
インタフェース24は、ヘッダ・パケットをネットワー
ク14との間でバッファするための入力ヘッダ待ち行列
84と出力ヘッダ待ち行列86とを含む。ヘッダ・パケ
ットは、実行すべき動作を識別し、その後に続くデータ
・パケットの数およびフォーマットを指定する。出力ヘ
ッダ待ち行列86は、ネットワーク14上で送るべきヘ
ッダ・パケットをバッファし、入力ヘッダ待ち行列84
は、システム・インタフェース24が、受け取ったヘッ
ダ・パケットを処理するまで、ネットワーク14から受
け取ったヘッダ・パケットをバッファする。同様に、デ
ータ・パケットは、データがそれぞれ、SMPデータ・
バス60およびネットワーク14上で転送されるまで入
力データ待ち行列88および出力データ待ち行列90に
バッファされる。
【0065】SMP出力待ち行列92、SMP入力待ち
行列94、SMP入出力入力待ち行列(PIQ)96
は、アドレス・バス58との間でアドレス・トランザク
ションをバッファするために使用される。SMP出力待
ち行列92は、アドレス・バス58上のシステム・イン
タフェース24から与えられるトランザクションをバッ
ファする。無視されたトランザクションに関するコヒー
レンシ活動の完了に応答して待機させられた再発行トラ
ンザクションは、SMP出力待ち行列92にバッファさ
れる。また、ネットワーク14から受け取られたコヒー
レンシ活動に応答して生成されたトランザクションは、
SMP出力待ち行列92にバッファされる。SMP入力
待ち行列94は、システム・インタフェース24によっ
て処理されるコヒーレンシ関連トランザクションを記憶
する。逆にSMP PIQ96は、他のSMPノード1
2に存在する入出力インタフェースへ搬送される入出力
トランザクションを記憶する。入出力トランザクション
は一般に、非コヒーレントとみなされ、したがってコヒ
ーレンシ活動を生成しない。
行列94、SMP入出力入力待ち行列(PIQ)96
は、アドレス・バス58との間でアドレス・トランザク
ションをバッファするために使用される。SMP出力待
ち行列92は、アドレス・バス58上のシステム・イン
タフェース24から与えられるトランザクションをバッ
ファする。無視されたトランザクションに関するコヒー
レンシ活動の完了に応答して待機させられた再発行トラ
ンザクションは、SMP出力待ち行列92にバッファさ
れる。また、ネットワーク14から受け取られたコヒー
レンシ活動に応答して生成されたトランザクションは、
SMP出力待ち行列92にバッファされる。SMP入力
待ち行列94は、システム・インタフェース24によっ
て処理されるコヒーレンシ関連トランザクションを記憶
する。逆にSMP PIQ96は、他のSMPノード1
2に存在する入出力インタフェースへ搬送される入出力
トランザクションを記憶する。入出力トランザクション
は一般に、非コヒーレントとみなされ、したがってコヒ
ーレンシ活動を生成しない。
【0066】SMP入力待ち行列94およびSMP P
IQ96は、トランザクション・フィルタ98から、待
機させるべきトランザクションを受け取る。トランザク
ション・フィルタ98はMTAG68およびSMPアド
レス・バス58に結合される。トランザクション・フィ
ルタ98は、他のSMPノード12上の入出力インタフ
ェースを識別する入出力トランザクションをアドレス・
バス58上で検出した場合、そのトランザクションをS
MP PIQ96に入れる。LPAアドレスへのコヒー
レント・トランザクションがトランザクション・フィル
タ98によって検出された場合、MTAG68から得た
対応するコヒーレンシ状態が調べられる。トランザクシ
ョン・フィルタ98は、コヒーレンシ状態に応じて、無
視信号70をアサートすることができ、コヒーレンシ・
トランザクションをSMP入力待ち行列94で待機させ
ることができる。コヒーレント・トランザクションを実
行するのに十分な、コヒーレンシ単位へのアクセス権
が、SMPノード12Aによって維持されていないこと
をMTAG68が示している場合には、無視信号70が
アサートされ、コヒーレンシ・トランザクションが待機
させられる。逆に、SMPノード12Aによって十分な
アクセス権が維持されていることをMTAG68が示し
ている場合、無視信号70がアサート解除されコヒーレ
ンシ・トランザクションは生成されない。
IQ96は、トランザクション・フィルタ98から、待
機させるべきトランザクションを受け取る。トランザク
ション・フィルタ98はMTAG68およびSMPアド
レス・バス58に結合される。トランザクション・フィ
ルタ98は、他のSMPノード12上の入出力インタフ
ェースを識別する入出力トランザクションをアドレス・
バス58上で検出した場合、そのトランザクションをS
MP PIQ96に入れる。LPAアドレスへのコヒー
レント・トランザクションがトランザクション・フィル
タ98によって検出された場合、MTAG68から得た
対応するコヒーレンシ状態が調べられる。トランザクシ
ョン・フィルタ98は、コヒーレンシ状態に応じて、無
視信号70をアサートすることができ、コヒーレンシ・
トランザクションをSMP入力待ち行列94で待機させ
ることができる。コヒーレント・トランザクションを実
行するのに十分な、コヒーレンシ単位へのアクセス権
が、SMPノード12Aによって維持されていないこと
をMTAG68が示している場合には、無視信号70が
アサートされ、コヒーレンシ・トランザクションが待機
させられる。逆に、SMPノード12Aによって十分な
アクセス権が維持されていることをMTAG68が示し
ている場合、無視信号70がアサート解除されコヒーレ
ンシ・トランザクションは生成されない。
【0067】SMP入力待ち行列94およびSMP P
IQ96からのトランザクションは、システム・インタ
フェース24内の要求エージェント100によって処理
される。LPA2GA変換装置82は、要求エージェン
ト100による動作の前に、トランザクションのアドレ
ス(LPAアドレスである場合)を、SMPアドレス・
バス58上に与えられるローカル物理アドレスから、対
応するグローバル・アドレスに変換する。要求エージェ
ント100は次いで、グローバル・アドレスによって識
別されたホーム・ノードへ送られる特定のコヒーレンシ
要求を指定するヘッダ・パケットを生成する。このコヒ
ーレンシ要求は出力ヘッダ待ち行列86に入れられる。
それに続いて、コヒーレンシ応答が入力ヘッダ待ち行列
84で受け取られる。要求エージェント100は、入力
ヘッダ待ち行列84から得たコヒーレンシ応答を処理
し、場合によっては(下記で説明するように)SMP出
力待ち行列92に関する再発行トランザクションを生成
する。
IQ96からのトランザクションは、システム・インタ
フェース24内の要求エージェント100によって処理
される。LPA2GA変換装置82は、要求エージェン
ト100による動作の前に、トランザクションのアドレ
ス(LPAアドレスである場合)を、SMPアドレス・
バス58上に与えられるローカル物理アドレスから、対
応するグローバル・アドレスに変換する。要求エージェ
ント100は次いで、グローバル・アドレスによって識
別されたホーム・ノードへ送られる特定のコヒーレンシ
要求を指定するヘッダ・パケットを生成する。このコヒ
ーレンシ要求は出力ヘッダ待ち行列86に入れられる。
それに続いて、コヒーレンシ応答が入力ヘッダ待ち行列
84で受け取られる。要求エージェント100は、入力
ヘッダ待ち行列84から得たコヒーレンシ応答を処理
し、場合によっては(下記で説明するように)SMP出
力待ち行列92に関する再発行トランザクションを生成
する。
【0068】システム・インタフェース24には、ホー
ム・エージェント102とスレーブ・エージェント10
4とが含まれる。ホーム・エージェント102は、入力
ヘッダ待ち行列84から受け取ったコヒーレンシ要求を
処理する。ホーム・エージェント102は、特定のグロ
ーバル・アドレスに関してディレクトリ66に記憶され
ているコヒーレンシ情報から、他のSMPノード12内
の1つまたは複数のスレーブ・エージェントへコヒーレ
ンシ・デマンドを送るべきかどうかを判定する。一実施
形態では、ホーム・エージェント102は、影響を受け
るコヒーレンシ単位に対応するコヒーレンシ情報をブロ
ックする。言い換えれば、そのコヒーレンシ単位に関連
するその後の要求は、コヒーレンシ要求に対応するコヒ
ーレンシ活動が完了するまで実行されない。一実施形態
によれば、ホーム・エージェント102は、(入力ヘッ
ダ待ち行列84を介して)コヒーレンシ要求を開始した
要求エージェントからコヒーレンシ完了を受け取る。コ
ヒーレンシ完了は、コヒーレンシ活動が完了したことを
示す。ホーム・エージェント102は、コヒーレンシ完
了を受け取ると、影響を受けるコヒーレンシ単位に対応
するコヒーレンシ情報上のブロックを削除する。コヒー
レンシ情報がコヒーレンシ活動が完了するまでブロック
されるので、ホーム・エージェント102が、コヒーレ
ンシ要求の受取時にただちに実行されたコヒーレンシ活
動に応じてコヒーレンシ情報を更新できることに留意さ
れたい。
ム・エージェント102とスレーブ・エージェント10
4とが含まれる。ホーム・エージェント102は、入力
ヘッダ待ち行列84から受け取ったコヒーレンシ要求を
処理する。ホーム・エージェント102は、特定のグロ
ーバル・アドレスに関してディレクトリ66に記憶され
ているコヒーレンシ情報から、他のSMPノード12内
の1つまたは複数のスレーブ・エージェントへコヒーレ
ンシ・デマンドを送るべきかどうかを判定する。一実施
形態では、ホーム・エージェント102は、影響を受け
るコヒーレンシ単位に対応するコヒーレンシ情報をブロ
ックする。言い換えれば、そのコヒーレンシ単位に関連
するその後の要求は、コヒーレンシ要求に対応するコヒ
ーレンシ活動が完了するまで実行されない。一実施形態
によれば、ホーム・エージェント102は、(入力ヘッ
ダ待ち行列84を介して)コヒーレンシ要求を開始した
要求エージェントからコヒーレンシ完了を受け取る。コ
ヒーレンシ完了は、コヒーレンシ活動が完了したことを
示す。ホーム・エージェント102は、コヒーレンシ完
了を受け取ると、影響を受けるコヒーレンシ単位に対応
するコヒーレンシ情報上のブロックを削除する。コヒー
レンシ情報がコヒーレンシ活動が完了するまでブロック
されるので、ホーム・エージェント102が、コヒーレ
ンシ要求の受取時にただちに実行されたコヒーレンシ活
動に応じてコヒーレンシ情報を更新できることに留意さ
れたい。
【0069】スレーブ・エージェント104は、コヒー
レンシ・デマンドを入力ヘッダ待ち行列84を介して他
のSMPノード12のホーム・エージェントから受け取
る。スレーブ・エージェント104は、特定のコヒーレ
ンシ・デマンドに応答して、コヒーレンシ・トランザク
ションをSMP出力待ち行列92で待機させる。一実施
形態では、コヒーレンシ・トランザクションによって、
キャッシュ18およびプロセッサ16の内部のキャッシ
ュは、影響を受けるコヒーレンシ単位を無効化すること
ができる。コヒーレンシ単位がキャッシュ内で修正され
た場合、修正済みデータはシステム・インタフェース2
4へ転送される。別法として、コヒーレンシ・トランザ
クションによって、キャッシュ18およびプロセッサ1
6の内部のキャッシュは、コヒーレンシ単位のコヒーレ
ンシ状態を共用に変更することができる。スレーブ・エ
ージェント104は、コヒーレンシ・デマンドに応答し
て活動を完了した後、コヒーレンシ・デマンドに対応す
るコヒーレンシ要求を開始した要求エージェントへコヒ
ーレンシ応答を送る。コヒーレンシ応答は、出力ヘッダ
待ち行列86で待機させられる。コヒーレンシ・デマン
ドに応答して活動を実行する前に、コヒーレンシ・デマ
ンドと共に受け取られたグローバル・アドレスがGA2
LPA変換装置80を介してローカル物理アドレスに変
換される。
レンシ・デマンドを入力ヘッダ待ち行列84を介して他
のSMPノード12のホーム・エージェントから受け取
る。スレーブ・エージェント104は、特定のコヒーレ
ンシ・デマンドに応答して、コヒーレンシ・トランザク
ションをSMP出力待ち行列92で待機させる。一実施
形態では、コヒーレンシ・トランザクションによって、
キャッシュ18およびプロセッサ16の内部のキャッシ
ュは、影響を受けるコヒーレンシ単位を無効化すること
ができる。コヒーレンシ単位がキャッシュ内で修正され
た場合、修正済みデータはシステム・インタフェース2
4へ転送される。別法として、コヒーレンシ・トランザ
クションによって、キャッシュ18およびプロセッサ1
6の内部のキャッシュは、コヒーレンシ単位のコヒーレ
ンシ状態を共用に変更することができる。スレーブ・エ
ージェント104は、コヒーレンシ・デマンドに応答し
て活動を完了した後、コヒーレンシ・デマンドに対応す
るコヒーレンシ要求を開始した要求エージェントへコヒ
ーレンシ応答を送る。コヒーレンシ応答は、出力ヘッダ
待ち行列86で待機させられる。コヒーレンシ・デマン
ドに応答して活動を実行する前に、コヒーレンシ・デマ
ンドと共に受け取られたグローバル・アドレスがGA2
LPA変換装置80を介してローカル物理アドレスに変
換される。
【0070】一実施形態によれば、要求エージェント1
00、ホーム・エージェント102、スレーブ・エージ
ェント104によって実行されるコヒーレンシ・プロト
コルは書込み無効化ポリシーを含む。言い換えれば、S
MPノード12内のプロセッサ16があるコヒーレンシ
単位を更新すると、他のSMPノード12内に記憶され
ているそのコヒーレンシ単位のコピーは無効化される。
しかし、他の実施形態では他の書込みポリシーを使用す
ることができる。たとえば、書込み更新ポリシーを使用
することができる。書込み更新ポリシーによれば、ある
コヒーレンシ単位が更新されると、更新済みデータは各
SMPノード12に記憶されているそのコヒーレンシ単
位の各コピーへ送られる。
00、ホーム・エージェント102、スレーブ・エージ
ェント104によって実行されるコヒーレンシ・プロト
コルは書込み無効化ポリシーを含む。言い換えれば、S
MPノード12内のプロセッサ16があるコヒーレンシ
単位を更新すると、他のSMPノード12内に記憶され
ているそのコヒーレンシ単位のコピーは無効化される。
しかし、他の実施形態では他の書込みポリシーを使用す
ることができる。たとえば、書込み更新ポリシーを使用
することができる。書込み更新ポリシーによれば、ある
コヒーレンシ単位が更新されると、更新済みデータは各
SMPノード12に記憶されているそのコヒーレンシ単
位の各コピーへ送られる。
【0071】次に図6を参照すると、要求エージェント
100に対応するSMPノード12内のSMPバス20
上の特定のトランザクションに応答して、第1のSMP
ノード12Aないし12D(「要求側ノード」)の要求
エージェント100と第2のSMPノード12Aないし
12D(「ホーム・ノード」)のホーム・エージェント
102と第3のSMPノード12Aないし12D(「ス
レーブ・ノード」)のスレーブ・エージェント104と
の間で実行される通常のコヒーレンシ活動を示す図が示
されている。図1に示すようなコンピュータ・システム
10の一実施形態によって使用される特定のコヒーレン
シ活動を、下記で図11ないし13に関して詳しく説明
する。この説明の残りの部分全体にわたって、参照符号
100、102、104は、要求エージェント、ホーム
・エージェント、スレーブ・エージェントを識別するた
めに使用される。エージェントが他のエージェントと通
信する際、2つのエージェントがそれぞれの異なるSM
Pノード12Aないし12Dに存在することが多いこと
を理解されたい。
100に対応するSMPノード12内のSMPバス20
上の特定のトランザクションに応答して、第1のSMP
ノード12Aないし12D(「要求側ノード」)の要求
エージェント100と第2のSMPノード12Aないし
12D(「ホーム・ノード」)のホーム・エージェント
102と第3のSMPノード12Aないし12D(「ス
レーブ・ノード」)のスレーブ・エージェント104と
の間で実行される通常のコヒーレンシ活動を示す図が示
されている。図1に示すようなコンピュータ・システム
10の一実施形態によって使用される特定のコヒーレン
シ活動を、下記で図11ないし13に関して詳しく説明
する。この説明の残りの部分全体にわたって、参照符号
100、102、104は、要求エージェント、ホーム
・エージェント、スレーブ・エージェントを識別するた
めに使用される。エージェントが他のエージェントと通
信する際、2つのエージェントがそれぞれの異なるSM
Pノード12Aないし12Dに存在することが多いこと
を理解されたい。
【0072】要求エージェント100は、SMPバス2
0からトランザクションを受け取ると、トランザクショ
ンに適したコヒーレンシ要求を形成し、トランザクショ
ンのアドレスに対応するホーム・ノードへコヒーレンシ
要求を送る(参照符号110)。コヒーレンシ要求は、
要求エージェント100から要求されたアクセス権なら
びに影響を受けるコヒーレンシ単位のグローバル・アド
レスを示す。要求されたアクセス権は、要求エージェン
ト100に対応するSMPノード12で試みられている
トランザクションの実行を可能にするのに十分なもので
ある。
0からトランザクションを受け取ると、トランザクショ
ンに適したコヒーレンシ要求を形成し、トランザクショ
ンのアドレスに対応するホーム・ノードへコヒーレンシ
要求を送る(参照符号110)。コヒーレンシ要求は、
要求エージェント100から要求されたアクセス権なら
びに影響を受けるコヒーレンシ単位のグローバル・アド
レスを示す。要求されたアクセス権は、要求エージェン
ト100に対応するSMPノード12で試みられている
トランザクションの実行を可能にするのに十分なもので
ある。
【0073】ホーム・エージェント102は、コヒーレ
ンシ要求を受け取ると、関連するディレクトリ66にア
クセスし、どのSMPノード12が、影響を受けるコヒ
ーレンシ単位のコピーを記憶しているかを判定する。ま
た、ホーム・エージェント102はコヒーレンシ単位の
所有者を判定する。ホーム・エージェント102は、影
響を受けるコヒーレンシ単位のコピーを記憶している各
ノードのスレーブ・エージェント104と、影響を受け
るコヒーレンシ単位に対する所有コヒーレンシ状態を有
するノードのスレーブ・エージェント104へのコヒー
レンシ・デマンドを生成することができる(参照符号1
12)。コヒーレンシ・デマンドは、受取側SMPノー
ド12内の影響を受けるコヒーレンシ単位の新しいコヒ
ーレンシ状態を示す。コヒーレンシ要求が未処理なの
で、ホーム・エージェント102は、影響を受けるコヒ
ーレンシ単位に関連するその後のコヒーレンシ要求がホ
ーム・エージェント102によって開始されないよう
に、影響を受けるコヒーレンシ単位に対応するコヒーレ
ンシ情報をブロックする。また、ホーム・エージェント
102は、コヒーレンシ要求が完了したことを反映する
ようにコヒーレンシ情報を更新する。
ンシ要求を受け取ると、関連するディレクトリ66にア
クセスし、どのSMPノード12が、影響を受けるコヒ
ーレンシ単位のコピーを記憶しているかを判定する。ま
た、ホーム・エージェント102はコヒーレンシ単位の
所有者を判定する。ホーム・エージェント102は、影
響を受けるコヒーレンシ単位のコピーを記憶している各
ノードのスレーブ・エージェント104と、影響を受け
るコヒーレンシ単位に対する所有コヒーレンシ状態を有
するノードのスレーブ・エージェント104へのコヒー
レンシ・デマンドを生成することができる(参照符号1
12)。コヒーレンシ・デマンドは、受取側SMPノー
ド12内の影響を受けるコヒーレンシ単位の新しいコヒ
ーレンシ状態を示す。コヒーレンシ要求が未処理なの
で、ホーム・エージェント102は、影響を受けるコヒ
ーレンシ単位に関連するその後のコヒーレンシ要求がホ
ーム・エージェント102によって開始されないよう
に、影響を受けるコヒーレンシ単位に対応するコヒーレ
ンシ情報をブロックする。また、ホーム・エージェント
102は、コヒーレンシ要求が完了したことを反映する
ようにコヒーレンシ情報を更新する。
【0074】ホーム・エージェント102は、要求エー
ジェント100へコヒーレンシ応答を送ることもできる
(参照符号114)。コヒーレンシ応答は、スレーブ・
エージェント104から発行されるコヒーレンシ応答の
数を示すことができる。別法として、ある種のトランザ
クションは、スレーブ・エージェント104との対話な
しで完了することができる。たとえば、ホーム・エージ
ェント102を含むSMPノード12内の入出力インタ
フェース26を目標とする入出力トランザクションは、
ホーム・エージェント102によって完了することがで
きる。ホーム・エージェント102は、関連するSMP
バス20に関するトランザクションを待機させ(参照符
号116)、次いで、トランザクションが完了したこと
を示す応答を送ることができる。
ジェント100へコヒーレンシ応答を送ることもできる
(参照符号114)。コヒーレンシ応答は、スレーブ・
エージェント104から発行されるコヒーレンシ応答の
数を示すことができる。別法として、ある種のトランザ
クションは、スレーブ・エージェント104との対話な
しで完了することができる。たとえば、ホーム・エージ
ェント102を含むSMPノード12内の入出力インタ
フェース26を目標とする入出力トランザクションは、
ホーム・エージェント102によって完了することがで
きる。ホーム・エージェント102は、関連するSMP
バス20に関するトランザクションを待機させ(参照符
号116)、次いで、トランザクションが完了したこと
を示す応答を送ることができる。
【0075】スレーブ・エージェント104は、ホーム
・エージェント102からのコヒーレンシ・デマンドに
応答して、関連するSMPバス20上に与えるトランザ
クションを待機させることができる(参照符号11
8)。また、スレーブ・エージェント104は要求エー
ジェント100へコヒーレンシ応答を送る(参照符号1
20)。コヒーレンシ応答は、特定のコヒーレンシ要求
に応答して受け取られたコヒーレンシ・デマンドがその
スレーブによって完了したことを示す。コヒーレンシ応
答は、コヒーレンシ・デマンドが完了したとき、あるい
はコヒーレンシ・デマンドが、対応するSMPノード1
2上で確実に完了し、影響を受けるコヒーレンシ単位に
対する状態変化がコヒーレンシ・デマンドが完了するよ
りも前に実行される、コヒーレンシ・デマンドが完了す
るよりも前の時間に、スレーブ・エージェント104に
よって送られる。
・エージェント102からのコヒーレンシ・デマンドに
応答して、関連するSMPバス20上に与えるトランザ
クションを待機させることができる(参照符号11
8)。また、スレーブ・エージェント104は要求エー
ジェント100へコヒーレンシ応答を送る(参照符号1
20)。コヒーレンシ応答は、特定のコヒーレンシ要求
に応答して受け取られたコヒーレンシ・デマンドがその
スレーブによって完了したことを示す。コヒーレンシ応
答は、コヒーレンシ・デマンドが完了したとき、あるい
はコヒーレンシ・デマンドが、対応するSMPノード1
2上で確実に完了し、影響を受けるコヒーレンシ単位に
対する状態変化がコヒーレンシ・デマンドが完了するよ
りも前に実行される、コヒーレンシ・デマンドが完了す
るよりも前の時間に、スレーブ・エージェント104に
よって送られる。
【0076】要求エージェント100は、影響を受ける
各スレーブ・エージェント104からコヒーレンシ応答
を受け取ると、ホーム・エージェント102へコヒーレ
ンシ完了を送る(参照符号122)。ホーム・エージェ
ント102は、コヒーレンシ完了を受け取ると、対応す
るコヒーレンシ情報からブロックを削除する。要求エー
ジェント100は、再発行トランザクションを、SMP
バス20上で実行できるように待機させ、SMPノード
12内でトランザクションを完了することができる(参
照符号124)。
各スレーブ・エージェント104からコヒーレンシ応答
を受け取ると、ホーム・エージェント102へコヒーレ
ンシ完了を送る(参照符号122)。ホーム・エージェ
ント102は、コヒーレンシ完了を受け取ると、対応す
るコヒーレンシ情報からブロックを削除する。要求エー
ジェント100は、再発行トランザクションを、SMP
バス20上で実行できるように待機させ、SMPノード
12内でトランザクションを完了することができる(参
照符号124)。
【0077】コヒーレンシ要求を発行した要求エージェ
ント100によって各コヒーレンシ要求に固有のタグが
割り当てられることに留意されたい。その後に続くコヒ
ーレンシ・デマンド、コヒーレンシ応答、コヒーレンシ
完了はこのタグを含む。このように、特定のコヒーレン
シ要求に関するコヒーレンシ活動は、関連する各エージ
ェントによって識別することができる。さらに、非コヒ
ーレント・トランザクション(たとえば、入出力トラン
ザクション)に応答して非コヒーレント動作を実行でき
ることに留意されたい。非コヒーレント動作は、要求側
ノードとホーム・ノードしか使用しないものでよい。さ
らに、ホーム・エージェント102によって各コヒーレ
ンシ要求に異なる固有のタグを割り当てることができ
る。それぞれの異なるタグは、ホーム・エージェント1
02を識別し、要求側のタグの代わりにコヒーレンシ完
了を表すために使用される。
ント100によって各コヒーレンシ要求に固有のタグが
割り当てられることに留意されたい。その後に続くコヒ
ーレンシ・デマンド、コヒーレンシ応答、コヒーレンシ
完了はこのタグを含む。このように、特定のコヒーレン
シ要求に関するコヒーレンシ活動は、関連する各エージ
ェントによって識別することができる。さらに、非コヒ
ーレント・トランザクション(たとえば、入出力トラン
ザクション)に応答して非コヒーレント動作を実行でき
ることに留意されたい。非コヒーレント動作は、要求側
ノードとホーム・ノードしか使用しないものでよい。さ
らに、ホーム・エージェント102によって各コヒーレ
ンシ要求に異なる固有のタグを割り当てることができ
る。それぞれの異なるタグは、ホーム・エージェント1
02を識別し、要求側のタグの代わりにコヒーレンシ完
了を表すために使用される。
【0078】次に図7を参照すると、SMPバス20上
でのリード・ツー・オウン・トランザクションに応答し
たコンピュータ・システム10の例示的な実施形態に関
するコヒーレンシ活動を示す図が示されている。リード
・ツー・オウン・トランザクションが実行されるのは、
プロセッサ16によって要求された特定のデータに関し
てキャッシュ・ミスが検出され、プロセッサ16がコヒ
ーレンシ単位への書込み許可を要求したときである。ス
トア・キャッシュ・ミスはたとえば、リード・ツー・オ
ウン・トランザクションを生成することができる。
でのリード・ツー・オウン・トランザクションに応答し
たコンピュータ・システム10の例示的な実施形態に関
するコヒーレンシ活動を示す図が示されている。リード
・ツー・オウン・トランザクションが実行されるのは、
プロセッサ16によって要求された特定のデータに関し
てキャッシュ・ミスが検出され、プロセッサ16がコヒ
ーレンシ単位への書込み許可を要求したときである。ス
トア・キャッシュ・ミスはたとえば、リード・ツー・オ
ウン・トランザクションを生成することができる。
【0079】要求エージェント100、ホーム・エージ
ェント102、いくつかのスレーブ・エージェント10
4を図7に示す。SMPバス20からリード・ツー・オ
ウン・トランザクションを受け取ったノードは、影響を
受けるコヒーレンシ単位を無効状態で記憶する(たとえ
ば、コヒーレンシ単位はそのノードには記憶されな
い)。要求ノード100の下付き文字「i」は無効状態
を示す。ホーム・ノードは、コヒーレンシ単位を共用状
態で記憶し、いくつかのスレーブ・エージェント104
に対応するノードもコヒーレンシ単位を共用状態で記憶
する。ホーム・エージェント102およびスレーブ・エ
ージェント104の下付き文字「s」は、それらのノー
ドでの共用状態を示す。リード・ツー・オウン動作は、
要求されたコヒーレンシ単位を要求側ノードへ転送させ
る。要求側ノードはコヒーレンシ単位を修正状態で受け
取る。
ェント102、いくつかのスレーブ・エージェント10
4を図7に示す。SMPバス20からリード・ツー・オ
ウン・トランザクションを受け取ったノードは、影響を
受けるコヒーレンシ単位を無効状態で記憶する(たとえ
ば、コヒーレンシ単位はそのノードには記憶されな
い)。要求ノード100の下付き文字「i」は無効状態
を示す。ホーム・ノードは、コヒーレンシ単位を共用状
態で記憶し、いくつかのスレーブ・エージェント104
に対応するノードもコヒーレンシ単位を共用状態で記憶
する。ホーム・エージェント102およびスレーブ・エ
ージェント104の下付き文字「s」は、それらのノー
ドでの共用状態を示す。リード・ツー・オウン動作は、
要求されたコヒーレンシ単位を要求側ノードへ転送させ
る。要求側ノードはコヒーレンシ単位を修正状態で受け
取る。
【0080】要求エージェント100は、SMPバス2
0からリード・ツー・オウン・トランザクションを受け
取ると、コヒーレンシ単位のホーム・ノードへリード・
ツー・オウン・コヒーレンシ要求を送る(参照符号13
0)。受取側ホーム・ノードのホーム・エージェント1
02は、1つまたは複数の他のノードに関する共用状態
を検出する。スレーブ・エージェントが所有状態ではな
く共用状態であるので、ホーム・ノードは、要求された
データを直接供給することができる。ホーム・エージェ
ント102は、要求されたコヒーレンシ単位に対応する
データを含むデータ・コヒーレンシ応答を要求エージェ
ント100へ送る(参照符号132)。データ・コヒー
レンシ応答は、要求エージェント100がデータの所有
権を得る前に他のノードのスレーブ・エージェントから
受け取るべき肯定応答の数も示す。ホーム・エージェン
ト102は、要求側SMPノード12Aないし12Dが
コヒーレンシ単位の所有者であり、他のSMPノード1
2Aないし12Dがそれぞれ無効であることを示すよう
にディレクトリ66を更新する。要求エージェント10
0からのコヒーレンシ完了の受取時に、コヒーレンシ単
位に関するコヒーレンシ情報がブロック解除されると、
ディレクトリ66は各SMPノード12でのコヒーレン
シ単位の状態に一致する。
0からリード・ツー・オウン・トランザクションを受け
取ると、コヒーレンシ単位のホーム・ノードへリード・
ツー・オウン・コヒーレンシ要求を送る(参照符号13
0)。受取側ホーム・ノードのホーム・エージェント1
02は、1つまたは複数の他のノードに関する共用状態
を検出する。スレーブ・エージェントが所有状態ではな
く共用状態であるので、ホーム・ノードは、要求された
データを直接供給することができる。ホーム・エージェ
ント102は、要求されたコヒーレンシ単位に対応する
データを含むデータ・コヒーレンシ応答を要求エージェ
ント100へ送る(参照符号132)。データ・コヒー
レンシ応答は、要求エージェント100がデータの所有
権を得る前に他のノードのスレーブ・エージェントから
受け取るべき肯定応答の数も示す。ホーム・エージェン
ト102は、要求側SMPノード12Aないし12Dが
コヒーレンシ単位の所有者であり、他のSMPノード1
2Aないし12Dがそれぞれ無効であることを示すよう
にディレクトリ66を更新する。要求エージェント10
0からのコヒーレンシ完了の受取時に、コヒーレンシ単
位に関するコヒーレンシ情報がブロック解除されると、
ディレクトリ66は各SMPノード12でのコヒーレン
シ単位の状態に一致する。
【0081】ホーム・エージェント102は、影響を受
けるコヒーレンシ単位の共用コピーを維持している各ス
レーブ・エージェント104へ無効化コヒーレンシ・デ
マンドを送る(参照符号134A、134B、134
C)。無効化コヒーレンシ・デマンドは、受取側スレー
ブ・エージェントにノード内の対応するコヒーレンシ単
位を無効化させ、無効化が完了したことを示す肯定コヒ
ーレンシ応答を要求側ノードへ送る。各スレーブ・エー
ジェント104は、コヒーレンシ単位の無効化を完了
し、それに続いて肯定コヒーレンシ応答を送る(参照符
号136A、136B、136C)。一実施形態では、
各肯定応答は、コヒーレンシ単位に関して要求エージェ
ント100によって受け取られる応答の総数のカウント
を含む。
けるコヒーレンシ単位の共用コピーを維持している各ス
レーブ・エージェント104へ無効化コヒーレンシ・デ
マンドを送る(参照符号134A、134B、134
C)。無効化コヒーレンシ・デマンドは、受取側スレー
ブ・エージェントにノード内の対応するコヒーレンシ単
位を無効化させ、無効化が完了したことを示す肯定コヒ
ーレンシ応答を要求側ノードへ送る。各スレーブ・エー
ジェント104は、コヒーレンシ単位の無効化を完了
し、それに続いて肯定コヒーレンシ応答を送る(参照符
号136A、136B、136C)。一実施形態では、
各肯定応答は、コヒーレンシ単位に関して要求エージェ
ント100によって受け取られる応答の総数のカウント
を含む。
【0082】要求エージェント100は、スレーブ・エ
ージェント104から各肯定コヒーレンシ応答を受け取
り、ホーム・エージェント102からデータ・コヒーレ
ンシ応答を受け取った後、ホーム・エージェント102
へコヒーレンシ完了を送る(参照符号138)。要求エ
ージェント100は、そのローカル・メモリ内のコヒー
レンシ単位を無効化し、ホーム・エージェント102
は、対応するコヒーレンシ情報に対するブロックを解除
する。データ・コヒーレンシ応答132および肯定コヒ
ーレンシ応答136が、特に各ノード内の未処理のトラ
ンザクションの数に応じて任意の順序で受け取ることが
できることに留意されたい。
ージェント104から各肯定コヒーレンシ応答を受け取
り、ホーム・エージェント102からデータ・コヒーレ
ンシ応答を受け取った後、ホーム・エージェント102
へコヒーレンシ完了を送る(参照符号138)。要求エ
ージェント100は、そのローカル・メモリ内のコヒー
レンシ単位を無効化し、ホーム・エージェント102
は、対応するコヒーレンシ情報に対するブロックを解除
する。データ・コヒーレンシ応答132および肯定コヒ
ーレンシ応答136が、特に各ノード内の未処理のトラ
ンザクションの数に応じて任意の順序で受け取ることが
できることに留意されたい。
【0083】次に図8を参照すると、要求エージェント
100によって使用される例示的な状態マシンを示すフ
ローチャート140が示されている。要求エージェント
100は、フローチャート140で表した状態マシンの
複数の独立のコピーを含むことができ、そのため、複数
の要求を並行して処理することができる。
100によって使用される例示的な状態マシンを示すフ
ローチャート140が示されている。要求エージェント
100は、フローチャート140で表した状態マシンの
複数の独立のコピーを含むことができ、そのため、複数
の要求を並行して処理することができる。
【0084】要求エージェント100は、SMP入力待
ち行列94からトランザクションを受け取ると、要求準
備完了状態142を開始する。要求準備完了状態142
では、要求エージェント100は、影響を受けるコヒー
レンシ単位のグローバル・アドレスで識別されるホーム
・ノードに存在するホーム・エージェント102へコヒ
ーレンシ要求を送る。要求エージェント100は、コヒ
ーレンシ要求を送ると、要求アクティブ状態144に遷
移する。要求アクティブ状態144中に、要求エージェ
ント100はスレーブ・エージェント104から(およ
び任意選択でホーム・エージェント102から)コヒー
レンシ応答を受け取る。各コヒーレンシ応答を受け取る
と、要求エージェント100は、コヒーレンシ活動を開
始したトランザクションのタイプに応じて新しい状態に
遷移する。また、要求活動状態142は、タイマを使用
して、所定のタイムアウト期間内にコヒーレンシ応答が
受け取られなかったことを検出することができる。ホー
ム・エージェント102によって指定された応答の数を
受け取る前にタイマが満了した場合、要求エージェント
100はエラー状態に遷移する(図示せず)。さらに、
ある種の実施形態は、読取り転送が失敗したことを示す
応答を使用することができる。そのような応答が受け取
られた場合、要求エージェント100は、要求準備完了
状態142に遷移し再び読取りを試みる。
ち行列94からトランザクションを受け取ると、要求準
備完了状態142を開始する。要求準備完了状態142
では、要求エージェント100は、影響を受けるコヒー
レンシ単位のグローバル・アドレスで識別されるホーム
・ノードに存在するホーム・エージェント102へコヒ
ーレンシ要求を送る。要求エージェント100は、コヒ
ーレンシ要求を送ると、要求アクティブ状態144に遷
移する。要求アクティブ状態144中に、要求エージェ
ント100はスレーブ・エージェント104から(およ
び任意選択でホーム・エージェント102から)コヒー
レンシ応答を受け取る。各コヒーレンシ応答を受け取る
と、要求エージェント100は、コヒーレンシ活動を開
始したトランザクションのタイプに応じて新しい状態に
遷移する。また、要求活動状態142は、タイマを使用
して、所定のタイムアウト期間内にコヒーレンシ応答が
受け取られなかったことを検出することができる。ホー
ム・エージェント102によって指定された応答の数を
受け取る前にタイマが満了した場合、要求エージェント
100はエラー状態に遷移する(図示せず)。さらに、
ある種の実施形態は、読取り転送が失敗したことを示す
応答を使用することができる。そのような応答が受け取
られた場合、要求エージェント100は、要求準備完了
状態142に遷移し再び読取りを試みる。
【0085】エラーやタイムアウトなしで応答が受け取
られた場合、状態は読取りトランザクションに関しては
要求エージェント100によって読取り完了状態146
に遷移する。読取りトランザクションの場合、受け取ら
れる応答のうちの1つに、要求されたコヒーレンシ単位
に対応するデータを含めることができることに留意され
たい。要求エージェント100は、SMPバス20上で
読取りトランザクションを再発行し、さらにホーム・エ
ージェント102へコヒーレンシ完了を送る。それに続
いて、要求エージェント100はアイドル状態148に
遷移する。次いで、図8に示した状態マシンを使用し
て、要求エージェント100によって新しいトランザク
ションを処理することができる。
られた場合、状態は読取りトランザクションに関しては
要求エージェント100によって読取り完了状態146
に遷移する。読取りトランザクションの場合、受け取ら
れる応答のうちの1つに、要求されたコヒーレンシ単位
に対応するデータを含めることができることに留意され
たい。要求エージェント100は、SMPバス20上で
読取りトランザクションを再発行し、さらにホーム・エ
ージェント102へコヒーレンシ完了を送る。それに続
いて、要求エージェント100はアイドル状態148に
遷移する。次いで、図8に示した状態マシンを使用し
て、要求エージェント100によって新しいトランザク
ションを処理することができる。
【0086】逆に、書込みトランザクションには書込み
アクティブ状態150および無視書込み再発行状態15
2が使用される。コンピュータ・システム10のある種
の書込みトランザクションでは、ネットワーク14上で
コヒーレンシ活動が開始されても、無視信号70はアサ
ートされない。たとえば、入出力書込みトランザクショ
ンは無視されない。書込みデータは、システム・インタ
フェース24へ転送され、そこに記憶される。SMPバ
ス20上での書込みトランザクションのデータ・フェー
ズよりも前にコヒーレンシ応答が受け取られた場合にシ
ステム・インタフェース24へデータを転送できるよう
に、非無視書込みトランザクションには書込みアクティ
ブ状態150が使用される。対応するデータが受け取ら
れた後、要求エージェント100は書込み完了状態15
4に遷移する。書込み完了状態154中に、コヒーレン
シ完了応答がホーム・エージェント102へ送られる。
それ続いて、要求エージェント100がアイドル状態1
48に遷移する。
アクティブ状態150および無視書込み再発行状態15
2が使用される。コンピュータ・システム10のある種
の書込みトランザクションでは、ネットワーク14上で
コヒーレンシ活動が開始されても、無視信号70はアサ
ートされない。たとえば、入出力書込みトランザクショ
ンは無視されない。書込みデータは、システム・インタ
フェース24へ転送され、そこに記憶される。SMPバ
ス20上での書込みトランザクションのデータ・フェー
ズよりも前にコヒーレンシ応答が受け取られた場合にシ
ステム・インタフェース24へデータを転送できるよう
に、非無視書込みトランザクションには書込みアクティ
ブ状態150が使用される。対応するデータが受け取ら
れた後、要求エージェント100は書込み完了状態15
4に遷移する。書込み完了状態154中に、コヒーレン
シ完了応答がホーム・エージェント102へ送られる。
それ続いて、要求エージェント100がアイドル状態1
48に遷移する。
【0087】無視された書込みトランザクションは、無
視書込み再発行状態152への遷移を介して処理され
る。無視書込み再発行状態152中に、要求エージェン
ト100は、無視された書込みトランザクションをSM
Pバス20上で再発行する。このように、書込みデータ
を発送側プロセッサ16から転送することができ、対応
する書込みトランザクションをプロセッサ16によって
解除することができる。要求エージェント100は、書
込みデータをコヒーレンシ完了と共に送るべきかどうか
に応じて、無視書込みアクティブ状態156と無視書込
み完了状態158のどちらかに遷移する。無視書込みア
クティブ状態156は、書込みアクティブ状態150と
同様に、SMPバス20からのデータ転送を待つために
使用される。無視書込み完了状態158中に、ホーム・
エージェント102へコヒーレンシ完了が送られる。そ
れに続いて、要求エージェント100がアイドル状態1
48に遷移する。要求エージェント100は、SMP入
力待ち行列94からトランザクションを受け取ると、ア
イドル状態148から要求準備完了状態142に遷移す
る。
視書込み再発行状態152への遷移を介して処理され
る。無視書込み再発行状態152中に、要求エージェン
ト100は、無視された書込みトランザクションをSM
Pバス20上で再発行する。このように、書込みデータ
を発送側プロセッサ16から転送することができ、対応
する書込みトランザクションをプロセッサ16によって
解除することができる。要求エージェント100は、書
込みデータをコヒーレンシ完了と共に送るべきかどうか
に応じて、無視書込みアクティブ状態156と無視書込
み完了状態158のどちらかに遷移する。無視書込みア
クティブ状態156は、書込みアクティブ状態150と
同様に、SMPバス20からのデータ転送を待つために
使用される。無視書込み完了状態158中に、ホーム・
エージェント102へコヒーレンシ完了が送られる。そ
れに続いて、要求エージェント100がアイドル状態1
48に遷移する。要求エージェント100は、SMP入
力待ち行列94からトランザクションを受け取ると、ア
イドル状態148から要求準備完了状態142に遷移す
る。
【0088】次に図9を参照すると、ホーム・エージェ
ント102に関する例示的な状態マシンを示すフローチ
ャート160が示されている。ホーム・エージェント1
02は、それに対する複数の未処理の要求を処理できる
ように、フローチャート160で表した状態マシンの複
数の独立のコピーを含むことができる。しかし、一実施
形態によれば、複数の未処理の要求が同じコヒーレンシ
単位に影響を与えることはない。
ント102に関する例示的な状態マシンを示すフローチ
ャート160が示されている。ホーム・エージェント1
02は、それに対する複数の未処理の要求を処理できる
ように、フローチャート160で表した状態マシンの複
数の独立のコピーを含むことができる。しかし、一実施
形態によれば、複数の未処理の要求が同じコヒーレンシ
単位に影響を与えることはない。
【0089】ホーム・エージェント102は、要求受取
状態162でコヒーレンシ要求を受け取る。この要求
は、コヒーレント要求とその他のトランザクション要求
のどちらかとして分類することができる。一実施形態に
よれば、他のトランザクション要求には、入出力読取り
要求および入出力書込み要求と、割り込み要求と、管理
要求を含めることができる。非コヒーレント要求は、状
態164の間にSMPバス20上でトランザクションを
送ることによって処理される。それに続いて、コヒーレ
ンシ完了が送られる。コヒーレンシ完了の受取時に、入
出力書込みトランザクションおよび割り込み許可トラン
ザクションによって、ホーム・ノード内のSMPバス2
0上でデータ・トランザクションが送られる(データ専
用状態165)。データが転送されると、ホーム・エー
ジェント102はアイドル状態166に遷移する。別法
として、コヒーレンシ完了の受取時に、入出力読取りト
ランザクション、管理トランザクション、割り込み拒否
トランザクションによって、アイドル状態への遷移が行
われる。
状態162でコヒーレンシ要求を受け取る。この要求
は、コヒーレント要求とその他のトランザクション要求
のどちらかとして分類することができる。一実施形態に
よれば、他のトランザクション要求には、入出力読取り
要求および入出力書込み要求と、割り込み要求と、管理
要求を含めることができる。非コヒーレント要求は、状
態164の間にSMPバス20上でトランザクションを
送ることによって処理される。それに続いて、コヒーレ
ンシ完了が送られる。コヒーレンシ完了の受取時に、入
出力書込みトランザクションおよび割り込み許可トラン
ザクションによって、ホーム・ノード内のSMPバス2
0上でデータ・トランザクションが送られる(データ専
用状態165)。データが転送されると、ホーム・エー
ジェント102はアイドル状態166に遷移する。別法
として、コヒーレンシ完了の受取時に、入出力読取りト
ランザクション、管理トランザクション、割り込み拒否
トランザクションによって、アイドル状態への遷移が行
われる。
【0090】逆に、ホーム・エージェント102は、コ
ヒーレンシ要求を受け取ると検査状態168に遷移す
る。検査状態168は、コヒーレンシ要求の影響を受け
るコヒーレンシ単位に関してコヒーレンシ活動が進行中
であるかどうかを検出するために使用される。コヒーレ
ンシ活動が進行中である(すなわち、コヒーレンシ情報
がブロックされている)場合、ホーム・エージェント1
02は、進行中のコヒーレンシ活動が完了するまで検査
状態168のままである。それに続いて、ホーム・エー
ジェント102は設定状態170に遷移する。
ヒーレンシ要求を受け取ると検査状態168に遷移す
る。検査状態168は、コヒーレンシ要求の影響を受け
るコヒーレンシ単位に関してコヒーレンシ活動が進行中
であるかどうかを検出するために使用される。コヒーレ
ンシ活動が進行中である(すなわち、コヒーレンシ情報
がブロックされている)場合、ホーム・エージェント1
02は、進行中のコヒーレンシ活動が完了するまで検査
状態168のままである。それに続いて、ホーム・エー
ジェント102は設定状態170に遷移する。
【0091】設定状態170中に、ホーム・エージェン
ト102は、ブロックすべき影響を受けるコヒーレンシ
単位に対応するコヒーレンシ情報を記憶するディレクト
リ・エントリの状況を設定する。ブロック状況によっ
て、影響を受けるコヒーレンシ単位へのその後の活動の
進行が妨げられ、コンピュータ・システム10のコヒー
レンシ・プロトコルが簡略化される。ホーム・エージェ
ント102は、受け取ったコヒーレンシ要求に対応する
トランザクションの読取り特性または書込み特性に応じ
て、読取り状態172または書込み応答状態174に遷
移する。
ト102は、ブロックすべき影響を受けるコヒーレンシ
単位に対応するコヒーレンシ情報を記憶するディレクト
リ・エントリの状況を設定する。ブロック状況によっ
て、影響を受けるコヒーレンシ単位へのその後の活動の
進行が妨げられ、コンピュータ・システム10のコヒー
レンシ・プロトコルが簡略化される。ホーム・エージェ
ント102は、受け取ったコヒーレンシ要求に対応する
トランザクションの読取り特性または書込み特性に応じ
て、読取り状態172または書込み応答状態174に遷
移する。
【0092】ホーム・エージェント102は、読取り状
態172中に、読取りトランザクションに関して更新さ
れるコヒーレンシ・デマンドをスレーブ・エージェント
104に発行する。ホーム・エージェント102は、要
求エージェント100からコヒーレンシ完了が受け取ら
れるまで読取り状態172のままであり、その後、ブロ
ック状況クリア状態176に遷移する。読取りを求める
コヒーレンシ要求が失敗する可能性のある実施形態で
は、ホーム・エージェント102は、読取りトランザク
ションの失敗を示すコヒーレンシ完了を受け取ると、影
響を受けるディレクトリ・エントリの状態をコヒーレン
シ要求の前の状態に復元する。
態172中に、読取りトランザクションに関して更新さ
れるコヒーレンシ・デマンドをスレーブ・エージェント
104に発行する。ホーム・エージェント102は、要
求エージェント100からコヒーレンシ完了が受け取ら
れるまで読取り状態172のままであり、その後、ブロ
ック状況クリア状態176に遷移する。読取りを求める
コヒーレンシ要求が失敗する可能性のある実施形態で
は、ホーム・エージェント102は、読取りトランザク
ションの失敗を示すコヒーレンシ完了を受け取ると、影
響を受けるディレクトリ・エントリの状態をコヒーレン
シ要求の前の状態に復元する。
【0093】書込み状態174中に、ホーム・エージェ
ント102は要求エージェント100へコヒーレンシ応
答を送る。ホーム・エージェント102は、要求エージ
ェント100からコヒーレンシ完了が受け取られるまで
応答書込み状態174のままである。コヒーレンシ完了
と共にデータが受け取られた場合、ホーム・エージェン
ト102は書込みデータ状態178に遷移する。別法と
して、ホーム・エージェント102は、データを含まな
いコヒーレンシ完了を受け取ったときに、ブロック状況
クリア状態176に遷移する。
ント102は要求エージェント100へコヒーレンシ応
答を送る。ホーム・エージェント102は、要求エージ
ェント100からコヒーレンシ完了が受け取られるまで
応答書込み状態174のままである。コヒーレンシ完了
と共にデータが受け取られた場合、ホーム・エージェン
ト102は書込みデータ状態178に遷移する。別法と
して、ホーム・エージェント102は、データを含まな
いコヒーレンシ完了を受け取ったときに、ブロック状況
クリア状態176に遷移する。
【0094】ホーム・エージェント102は、受け取っ
た書込みデータを転送するために、書込みデータ状態1
78中にSMPバス20上で書込みトランザクションを
発行する。たとえば、書込みストリーム動作(後述)に
よって、データがホーム・エージェント102へ転送さ
れる。ホーム・エージェント102は、受け取ったデー
タを、記憶するためにメモリ22へ送る。それに続い
て、ホーム・エージェント102はブロック状況クリア
状態176に遷移する。
た書込みデータを転送するために、書込みデータ状態1
78中にSMPバス20上で書込みトランザクションを
発行する。たとえば、書込みストリーム動作(後述)に
よって、データがホーム・エージェント102へ転送さ
れる。ホーム・エージェント102は、受け取ったデー
タを、記憶するためにメモリ22へ送る。それに続い
て、ホーム・エージェント102はブロック状況クリア
状態176に遷移する。
【0095】ホーム・エージェント102は、ブロック
状況クリア状態176で受け取ったコヒーレンシ要求の
影響を受けるコヒーレンシ単位に対応するコヒーレンシ
情報のブロック状況をクリアする。それに続いて、コヒ
ーレンシ情報にアクセスすることができる。非ブロック
・コヒーレンシ情報内に存在する状態は、前に受け取っ
たコヒーレンシ要求によって開始されたコヒーレンシ活
動を反映する。ホーム・エージェント102は、対応す
るコヒーレンシ情報のブロック状況をクリアすることに
よって、アイドル状態166に遷移する。ホーム・エー
ジェント102は、コヒーレンシ要求を受け取ると、ア
イドル状態166から受取要求状態162に遷移する。
状況クリア状態176で受け取ったコヒーレンシ要求の
影響を受けるコヒーレンシ単位に対応するコヒーレンシ
情報のブロック状況をクリアする。それに続いて、コヒ
ーレンシ情報にアクセスすることができる。非ブロック
・コヒーレンシ情報内に存在する状態は、前に受け取っ
たコヒーレンシ要求によって開始されたコヒーレンシ活
動を反映する。ホーム・エージェント102は、対応す
るコヒーレンシ情報のブロック状況をクリアすることに
よって、アイドル状態166に遷移する。ホーム・エー
ジェント102は、コヒーレンシ要求を受け取ると、ア
イドル状態166から受取要求状態162に遷移する。
【0096】次に図10を参照すると、スレーブ・エー
ジェント104に関する例示的な状態マシンを示すフロ
ーチャート180が示されている。スレーブ・エージェ
ント104は、受取状態182中にコヒーレンシ・デマ
ンドを受け取る。スレーブ・エージェント104は、コ
ヒーレンシ・デマンドに応答して、SMPバス20上に
与えられるトランザクションを待機させる。このトラン
ザクションによって、キャッシュ18およびプロセッサ
16の内部のキャッシュの状態が、受け取ったコヒーレ
ンシ・デマンドに応じて変化する。スレーブ・エージェ
ント104は、このトランザクションを要求発送状態1
84の間待機させる。
ジェント104に関する例示的な状態マシンを示すフロ
ーチャート180が示されている。スレーブ・エージェ
ント104は、受取状態182中にコヒーレンシ・デマ
ンドを受け取る。スレーブ・エージェント104は、コ
ヒーレンシ・デマンドに応答して、SMPバス20上に
与えられるトランザクションを待機させる。このトラン
ザクションによって、キャッシュ18およびプロセッサ
16の内部のキャッシュの状態が、受け取ったコヒーレ
ンシ・デマンドに応じて変化する。スレーブ・エージェ
ント104は、このトランザクションを要求発送状態1
84の間待機させる。
【0097】応答発送状態186中に、スレーブ・エー
ジェント104は、トランザクションを開始した要求エ
ージェント100へコヒーレンシ応答を送る。様々な実
施形態によれば、スレーブ・エージェント104が、S
MPバス20に関するトランザクションを待機させ、あ
るいはSMPバス20上のトランザクションが首尾良く
完了したときに要求発送状態184から応答発送状態1
86に遷移できることに留意されたい。スレーブ・エー
ジェント104は、コヒーレンシ応答を送った後、アイ
ドル状態188に遷移する。スレーブ・エージェント1
04は、コヒーレンシ・デマンドを受け取るとアイドル
状態188から受取状態182に遷移することができ
る。
ジェント104は、トランザクションを開始した要求エ
ージェント100へコヒーレンシ応答を送る。様々な実
施形態によれば、スレーブ・エージェント104が、S
MPバス20に関するトランザクションを待機させ、あ
るいはSMPバス20上のトランザクションが首尾良く
完了したときに要求発送状態184から応答発送状態1
86に遷移できることに留意されたい。スレーブ・エー
ジェント104は、コヒーレンシ応答を送った後、アイ
ドル状態188に遷移する。スレーブ・エージェント1
04は、コヒーレンシ・デマンドを受け取るとアイドル
状態188から受取状態182に遷移することができ
る。
【0098】次に図11ないし14を参照すると、例示
的なコヒーレンシ要求タイプ、コヒーレンシ・デマンド
・タイプ、コヒーレンシ応答タイプ、コヒーレンシ完了
タイプをリストしたいくつかの表が示されている。図1
1ないし14の表に示したタイプは、コンピュータ・シ
ステム10の一実施形態によって使用することができ
る。他の実施形態は、他の数組のタイプを使用すること
ができる。
的なコヒーレンシ要求タイプ、コヒーレンシ・デマンド
・タイプ、コヒーレンシ応答タイプ、コヒーレンシ完了
タイプをリストしたいくつかの表が示されている。図1
1ないし14の表に示したタイプは、コンピュータ・シ
ステム10の一実施形態によって使用することができ
る。他の実施形態は、他の数組のタイプを使用すること
ができる。
【0099】図11は、コヒーレンシ要求のタイプをリ
ストした表190である。第1の列192は、下記の図
15で使用される各要求タイプのコードをリストしたも
のである。第2の列194は、コヒーレンシ要求タイプ
をリストしたものであり、第3の列196は、コヒーレ
ンシ要求の発送元を示すものである。図12ないし14
では、同様な列がコヒーレンシ・デマンド、コヒーレン
シ応答、コヒーレンシ完了に使用される。「R」は要求
エージェント100を示し、「S」はスレーブ・エージ
ェント104を示し、「H」はホーム・エージェント1
02を示す。
ストした表190である。第1の列192は、下記の図
15で使用される各要求タイプのコードをリストしたも
のである。第2の列194は、コヒーレンシ要求タイプ
をリストしたものであり、第3の列196は、コヒーレ
ンシ要求の発送元を示すものである。図12ないし14
では、同様な列がコヒーレンシ・デマンド、コヒーレン
シ応答、コヒーレンシ完了に使用される。「R」は要求
エージェント100を示し、「S」はスレーブ・エージ
ェント104を示し、「H」はホーム・エージェント1
02を示す。
【0100】リード・ツー・シェア要求は、特定のSM
Pノードにコヒーレンシ単位が存在せず、SMPバス2
0からコヒーレンシ単位へのトランザクションの性質
上、コヒーレンシ単位への読取りアクセスが必要である
ときに実行される。たとえば、キャッシュ可能読取りト
ランザクションではリード・ツー・シェア要求が実行さ
れる。一般的に言えば、リード・ツー・シェア要求と
は、共用状態のコヒーレンシ単位のコピーを求める要求
である。同様に、リード・ツー・オウン要求とは、所有
状態のコヒーレンシ単位のコピーを求める要求である。
他のSMPノード内のコヒーレンシ単位のコピーは無効
状態に変更すべきである。リード・ツー・オウン要求
は、たとえばキャッシュ可能書込みトランザクションの
キャッシュ・ミスに応答して実行することができる。
Pノードにコヒーレンシ単位が存在せず、SMPバス2
0からコヒーレンシ単位へのトランザクションの性質
上、コヒーレンシ単位への読取りアクセスが必要である
ときに実行される。たとえば、キャッシュ可能読取りト
ランザクションではリード・ツー・シェア要求が実行さ
れる。一般的に言えば、リード・ツー・シェア要求と
は、共用状態のコヒーレンシ単位のコピーを求める要求
である。同様に、リード・ツー・オウン要求とは、所有
状態のコヒーレンシ単位のコピーを求める要求である。
他のSMPノード内のコヒーレンシ単位のコピーは無効
状態に変更すべきである。リード・ツー・オウン要求
は、たとえばキャッシュ可能書込みトランザクションの
キャッシュ・ミスに応答して実行することができる。
【0101】読取りストリームおよび書込みストリーム
とは、コヒーレンシ単位全体の読取りまたは書込みを求
める要求である。これらの動作は通常、ブロック・コピ
ー動作に使用される。プロセッサ16およびキャッシュ
18は、読取りストリーム要求または書込みストリーム
要求に応答して与えられたデータはキャッシュしない。
その代わり、読取りストリーム要求の場合には、コヒー
レンシ単位がプロセッサ16へのデータとして与えら
れ、書込みストリーム要求の場合にはメモリ22にデー
タが書き込まれる。リード・ツー・シェア要求、リード
・ツー・オウン要求、読取りストリーム要求をCOMA
動作(たとえば、RTS、RTO、RS)またはNUM
A動作(たとえば、RTSN、RTON、RSN)とし
て実行できることに留意されたい。
とは、コヒーレンシ単位全体の読取りまたは書込みを求
める要求である。これらの動作は通常、ブロック・コピ
ー動作に使用される。プロセッサ16およびキャッシュ
18は、読取りストリーム要求または書込みストリーム
要求に応答して与えられたデータはキャッシュしない。
その代わり、読取りストリーム要求の場合には、コヒー
レンシ単位がプロセッサ16へのデータとして与えら
れ、書込みストリーム要求の場合にはメモリ22にデー
タが書き込まれる。リード・ツー・シェア要求、リード
・ツー・オウン要求、読取りストリーム要求をCOMA
動作(たとえば、RTS、RTO、RS)またはNUM
A動作(たとえば、RTSN、RTON、RSN)とし
て実行できることに留意されたい。
【0102】書き直し要求は、コヒーレンシ単位のホー
ム・ノードにコヒーレンシ単位が書き込まれるときに実
行される。ホーム・ノードは、コヒーレンシ単位を書き
直す許可と共に応答する。コヒーレンシ単位は次いで、
コヒーレンシ完了と共にホーム・ノードに渡される。
ム・ノードにコヒーレンシ単位が書き込まれるときに実
行される。ホーム・ノードは、コヒーレンシ単位を書き
直す許可と共に応答する。コヒーレンシ単位は次いで、
コヒーレンシ完了と共にホーム・ノードに渡される。
【0103】無効要求は、他のSMPノード内のコヒー
レンシ単位のコピーを無効化するために実行される。無
効化要求が生成される例示的なケースは、共用または所
有されているコヒーレンシ単位への書込みストリーム・
トランザクションである。書込みストリーム・トランザ
クションではコヒーレンシ単位が更新され、したがって
他のSMPノード内のコヒーレンシ単位のコピーが無効
化される。
レンシ単位のコピーを無効化するために実行される。無
効化要求が生成される例示的なケースは、共用または所
有されているコヒーレンシ単位への書込みストリーム・
トランザクションである。書込みストリーム・トランザ
クションではコヒーレンシ単位が更新され、したがって
他のSMPノード内のコヒーレンシ単位のコピーが無効
化される。
【0104】入出力読取りトランザクションおよび入出
力書込みトランザクションに応答して入出力読取り要求
および入出力書込み要求が送られる。入出力トランザク
ションは非コヒーレントである(すなわち、トランザク
ションはキャッシュされず、トランザクションに対して
コヒーレンシは維持されない)。入出力ブロック・トラ
ンザクションでは、通常の入出力トランザクションより
も大きな、データの一部が転送される。一実施形態で
は、ブロック入出力動作で64バイトの情報が転送さ
れ、それに対して非ブロック入出力トランザクションで
8バイトが転送される。
力書込みトランザクションに応答して入出力読取り要求
および入出力書込み要求が送られる。入出力トランザク
ションは非コヒーレントである(すなわち、トランザク
ションはキャッシュされず、トランザクションに対して
コヒーレンシは維持されない)。入出力ブロック・トラ
ンザクションでは、通常の入出力トランザクションより
も大きな、データの一部が転送される。一実施形態で
は、ブロック入出力動作で64バイトの情報が転送さ
れ、それに対して非ブロック入出力トランザクションで
8バイトが転送される。
【0105】フラッシュ要求では、コヒーレンシ単位の
コピーが無効化される。修正されたコピーはホーム・ノ
ードへ返される。割り込み要求は、リモートSMPノー
ド内の特定の装置への割り込みを知らせるために使用さ
れる。割り込みは特定のプロセッサ16に与えることが
でき、そのプロセッサは、割り込みに応答して所定のア
ドレスに記憶されている割り込みサービス・ルーチンを
実行することができる。管理パケットは、ノード間であ
る種のリセット信号を送るために使用される。
コピーが無効化される。修正されたコピーはホーム・ノ
ードへ返される。割り込み要求は、リモートSMPノー
ド内の特定の装置への割り込みを知らせるために使用さ
れる。割り込みは特定のプロセッサ16に与えることが
でき、そのプロセッサは、割り込みに応答して所定のア
ドレスに記憶されている割り込みサービス・ルーチンを
実行することができる。管理パケットは、ノード間であ
る種のリセット信号を送るために使用される。
【0106】図12は、例示的なコヒーレンシ・デマン
ド・タイプをリストした表198である。表190と同
様に、表198には列192、194、196が含まれ
る。リード・ツー・シェア・デマンドは、コヒーレンシ
単位の所有者へ搬送され、それによってその所有者は要
求側ノードへデータを送る。同様に、リード・ツー・オ
ウン・デマンドおよび読取りストリーム・デマンドによ
って、コヒーレンシ単位の所有者は要求側ノードへデー
タを送る。また、リード・ツー・オウン・デマンドによ
って、所有者は所有者ノード内のコヒーレンシ単位の状
態を無効に変更する。読取りストリーム・デマンドおよ
びリード・ツー・シェア・デマンドによって、所有者ノ
ードにおける状態が(修正から)所有に変更される。
ド・タイプをリストした表198である。表190と同
様に、表198には列192、194、196が含まれ
る。リード・ツー・シェア・デマンドは、コヒーレンシ
単位の所有者へ搬送され、それによってその所有者は要
求側ノードへデータを送る。同様に、リード・ツー・オ
ウン・デマンドおよび読取りストリーム・デマンドによ
って、コヒーレンシ単位の所有者は要求側ノードへデー
タを送る。また、リード・ツー・オウン・デマンドによ
って、所有者は所有者ノード内のコヒーレンシ単位の状
態を無効に変更する。読取りストリーム・デマンドおよ
びリード・ツー・シェア・デマンドによって、所有者ノ
ードにおける状態が(修正から)所有に変更される。
【0107】無効化デマンドでは、対応するコヒーレン
シ単位は転送されない。その代わり、無効化デマンドで
はコヒーレンシ単位のコピーが無効化される。最後に、
管理デマンドは管理要求に応答して搬送される。各デマ
ンドが要求エージェント100からの要求に応答してホ
ーム・エージェント102によって開始されることを留
意されたい。
シ単位は転送されない。その代わり、無効化デマンドで
はコヒーレンシ単位のコピーが無効化される。最後に、
管理デマンドは管理要求に応答して搬送される。各デマ
ンドが要求エージェント100からの要求に応答してホ
ーム・エージェント102によって開始されることを留
意されたい。
【0108】図13は、コンピュータ・システム10の
一実施形態によって使用される例示的な応答タイプをリ
ストした表200である。図11および12と同様に、
図13はコヒーレンシ応答に関する列192、194、
196を含む。
一実施形態によって使用される例示的な応答タイプをリ
ストした表200である。図11および12と同様に、
図13はコヒーレンシ応答に関する列192、194、
196を含む。
【0109】データ応答とは、要求されたデータを含む
応答である。所有者スレーブ・エージェントは通常、コ
ヒーレンシ要求に関するデータ応答を与える。しかし、
ホーム・エージェントは入出力読取り要求に関するデー
タを与えることができる。
応答である。所有者スレーブ・エージェントは通常、コ
ヒーレンシ要求に関するデータ応答を与える。しかし、
ホーム・エージェントは入出力読取り要求に関するデー
タを与えることができる。
【0110】肯定応答は、特定のコヒーレンシ要求に関
連するコヒーレンシ・デマンドが完了したことを示す。
スレーブ・エージェントは通常、肯定応答を与えるが、
ホーム・エージェントは、ホーム・ノードがコヒーレン
シ単位の所有者であるときに肯定応答を(データと共
に)与える。
連するコヒーレンシ・デマンドが完了したことを示す。
スレーブ・エージェントは通常、肯定応答を与えるが、
ホーム・エージェントは、ホーム・ノードがコヒーレン
シ単位の所有者であるときに肯定応答を(データと共
に)与える。
【0111】スレーブ所有なし応答、アドレス・マップ
なし応答、エラー応答は、エラーが検出されたときにス
レーブ・エージェント104によって搬送される。スレ
ーブ所有なし応答は、コヒーレンシ単位の所有者および
スレーブがもはやコヒーレンシ単位を所有していないと
きにホーム・エージェント102によってスレーブが識
別された場合に送られる。アドレス・マップなし応答
は、所有権を主張している装置が、対応するSMPバス
20上にはないデマンドを、スレーブが受け取った場合
に、送られる。スレーブ・エージェントによって検出さ
れた他のエラー条件はエラー応答を介して示される。
なし応答、エラー応答は、エラーが検出されたときにス
レーブ・エージェント104によって搬送される。スレ
ーブ所有なし応答は、コヒーレンシ単位の所有者および
スレーブがもはやコヒーレンシ単位を所有していないと
きにホーム・エージェント102によってスレーブが識
別された場合に送られる。アドレス・マップなし応答
は、所有権を主張している装置が、対応するSMPバス
20上にはないデマンドを、スレーブが受け取った場合
に、送られる。スレーブ・エージェントによって検出さ
れた他のエラー条件はエラー応答を介して示される。
【0112】ホーム・エージェント102は、スレーブ
・エージェント104が使用できるエラー応答以外のエ
ラー応答を与えることができる。対応する要求がホーム
・エージェント102によるサービスを必要としていな
いことを示すために、ホーム・エージェント102によ
って否定肯定(NACK)および否定応答(NOPE)
が使用される。NACKトランザクションを使用して、
対応する要求がホーム・ノードによって拒否されたこと
を示すことができる。たとえば、割り込み要求は、受取
側ノードによって割り込みが拒否された場合にNACK
を受け取る。受取側ノードによって割り込みが受け入れ
られた場合には肯定応答(ACK)が搬送される。NO
PEトランザクションは、受取側ノードによって記憶さ
れていないコヒーレンシ単位のための対応するフラッシ
ュ要求が搬送されたことを示すために使用される。
・エージェント104が使用できるエラー応答以外のエ
ラー応答を与えることができる。対応する要求がホーム
・エージェント102によるサービスを必要としていな
いことを示すために、ホーム・エージェント102によ
って否定肯定(NACK)および否定応答(NOPE)
が使用される。NACKトランザクションを使用して、
対応する要求がホーム・ノードによって拒否されたこと
を示すことができる。たとえば、割り込み要求は、受取
側ノードによって割り込みが拒否された場合にNACK
を受け取る。受取側ノードによって割り込みが受け入れ
られた場合には肯定応答(ACK)が搬送される。NO
PEトランザクションは、受取側ノードによって記憶さ
れていないコヒーレンシ単位のための対応するフラッシ
ュ要求が搬送されたことを示すために使用される。
【0113】図14は、コンピュータ・システム10の
一実施形態による例示的なコヒーレンシ完了タイプを示
す表202である。図14は、図11ないし13と同様
に、コヒーレンシ完了に関する列192、194、19
6を含む。
一実施形態による例示的なコヒーレンシ完了タイプを示
す表202である。図14は、図11ないし13と同様
に、コヒーレンシ完了に関する列192、194、19
6を含む。
【0114】データなしの完了は、特定の要求が完了し
たことを示す、要求エージェント100からホーム・エ
ージェント102への信号として使用される。ホーム・
エージェント102は、これに応答して、対応するコヒ
ーレンシ情報をブロック解除する。SMPバス20上の
異なるトランザクションに対応する2種類のデータ完了
が含まれている。一方のタイプの再発行トランザクショ
ンでは、SMPバス20上でデータ・フェーズしか使用
されない。この再発行トランザクションは、一実施形態
では入出力書込みトランザクションおよび割り込みトラ
ンザクションに使用することができる。他方のタイプの
再発行トランザクションではアドレス・フェーズとデー
タ・フェーズの両方が使用される。書込みストリームや
書き直しなどのコヒーレント書込みは、アドレス・フェ
ーズとデータ・フェーズの両方を含む再発行トランザク
ションを使用することができる。最後に、要求された状
態を得ることに失敗した読取り要求に関する、失敗を示
す完了が含まれている。
たことを示す、要求エージェント100からホーム・エ
ージェント102への信号として使用される。ホーム・
エージェント102は、これに応答して、対応するコヒ
ーレンシ情報をブロック解除する。SMPバス20上の
異なるトランザクションに対応する2種類のデータ完了
が含まれている。一方のタイプの再発行トランザクショ
ンでは、SMPバス20上でデータ・フェーズしか使用
されない。この再発行トランザクションは、一実施形態
では入出力書込みトランザクションおよび割り込みトラ
ンザクションに使用することができる。他方のタイプの
再発行トランザクションではアドレス・フェーズとデー
タ・フェーズの両方が使用される。書込みストリームや
書き直しなどのコヒーレント書込みは、アドレス・フェ
ーズとデータ・フェーズの両方を含む再発行トランザク
ションを使用することができる。最後に、要求された状
態を得ることに失敗した読取り要求に関する、失敗を示
す完了が含まれている。
【0115】次に図15を参照すると、SMPバス20
上の様々なトランザクションに対するコヒーレンシ活動
を示す表210が示されている。表210は、他のSM
Pノード12へ要求を送らせるトランザクションを示
す。SMPノード内で完了するトランザクションは示さ
れていない。列内の「−」は、特定の行内で考えられる
ケースではその列に関して実行される活動がないことを
示す。要求エージェント100によってSMPバス20
上で受け取られるトランザクションを示すトランザクシ
ョン列212が含まれている。MTAG列214は、ト
ランザクションに対応するアドレスによってアクセスさ
れるコヒーレンシ単位のMTAGの状態を示す。図の状
態は、前述のMOSI状態と「n」状態とを含む。
「n」状態は、コヒーレンシ単位が、トランザクション
が開始されたSMPノードではNUMAモードでアクセ
スされることを示す。したがって、コヒーレンシ単位の
ローカル・コピーは要求側ノード・メモリには記憶され
ない。その代わり、コヒーレンシ単位は、ホームSMP
ノード(または所有者ノード)から転送され、メモリ2
2に記憶されずに要求側プロセッサ16またはキャッシ
ュ18へ送られる。
上の様々なトランザクションに対するコヒーレンシ活動
を示す表210が示されている。表210は、他のSM
Pノード12へ要求を送らせるトランザクションを示
す。SMPノード内で完了するトランザクションは示さ
れていない。列内の「−」は、特定の行内で考えられる
ケースではその列に関して実行される活動がないことを
示す。要求エージェント100によってSMPバス20
上で受け取られるトランザクションを示すトランザクシ
ョン列212が含まれている。MTAG列214は、ト
ランザクションに対応するアドレスによってアクセスさ
れるコヒーレンシ単位のMTAGの状態を示す。図の状
態は、前述のMOSI状態と「n」状態とを含む。
「n」状態は、コヒーレンシ単位が、トランザクション
が開始されたSMPノードではNUMAモードでアクセ
スされることを示す。したがって、コヒーレンシ単位の
ローカル・コピーは要求側ノード・メモリには記憶され
ない。その代わり、コヒーレンシ単位は、ホームSMP
ノード(または所有者ノード)から転送され、メモリ2
2に記憶されずに要求側プロセッサ16またはキャッシ
ュ18へ送られる。
【0116】要求列216は、トランザクションのアド
レスによって識別されるホーム・エージェントへ送られ
るコヒーレンシ要求をリストしたものである。ホーム・
エージェント102は、列216にリストしたコヒーレ
ンシ要求を受け取ると、ディレクトリ66に記録されて
いる要求側ノードのコヒーレンシ単位の状態を検査す
る。D列218は、要求側ノードに関して記録されるコ
ヒーレンシ単位の現状態をリストしたものであり、D’
列220は、受け取ったコヒーレンシ要求に応答してホ
ーム・エージェント102によって更新された、要求側
ノードに関して記録されるコヒーレンシ単位の状態をリ
ストしたものである。ホーム・エージェント102は、
コヒーレンシ単位の所有者への第1のコヒーレンシ・デ
マンドと、コヒーレンシ単位の共用コピーを維持してい
るノードへの追加コヒーレンシ・デマンドを生成するこ
とができる。所有者へ送られるコヒーレンシ・デマンド
を列222に示し、それに対して共用ノードへ送られる
コヒーレンシ・デマンドを列224に示す。さらに、ホ
ーム・エージェント102は要求側ノードへコヒーレン
シ応答を送ることができる。ホーム・エージェント応答
を列226に示す。
レスによって識別されるホーム・エージェントへ送られ
るコヒーレンシ要求をリストしたものである。ホーム・
エージェント102は、列216にリストしたコヒーレ
ンシ要求を受け取ると、ディレクトリ66に記録されて
いる要求側ノードのコヒーレンシ単位の状態を検査す
る。D列218は、要求側ノードに関して記録されるコ
ヒーレンシ単位の現状態をリストしたものであり、D’
列220は、受け取ったコヒーレンシ要求に応答してホ
ーム・エージェント102によって更新された、要求側
ノードに関して記録されるコヒーレンシ単位の状態をリ
ストしたものである。ホーム・エージェント102は、
コヒーレンシ単位の所有者への第1のコヒーレンシ・デ
マンドと、コヒーレンシ単位の共用コピーを維持してい
るノードへの追加コヒーレンシ・デマンドを生成するこ
とができる。所有者へ送られるコヒーレンシ・デマンド
を列222に示し、それに対して共用ノードへ送られる
コヒーレンシ・デマンドを列224に示す。さらに、ホ
ーム・エージェント102は要求側ノードへコヒーレン
シ応答を送ることができる。ホーム・エージェント応答
を列226に示す。
【0117】コヒーレンシ単位の所有者として示された
SMPノード内のスレーブ・エージェント104は、列
228に示したようにコヒーレンシ応答を送る。共用ノ
ードとして示されたノード内のスレーブ・エージェント
104は、受け取ったコヒーレンシ・デマンドで示され
た状態変化を実行した後に、列230に示したコヒーレ
ンシ応答を用いて、列224に示したコヒーレンシ・デ
マンドに応答する。
SMPノード内のスレーブ・エージェント104は、列
228に示したようにコヒーレンシ応答を送る。共用ノ
ードとして示されたノード内のスレーブ・エージェント
104は、受け取ったコヒーレンシ・デマンドで示され
た状態変化を実行した後に、列230に示したコヒーレ
ンシ応答を用いて、列224に示したコヒーレンシ・デ
マンドに応答する。
【0118】要求エージェント100は、適当な数のコ
ヒーレンシ応答を受け取ると、ホーム・エージェント1
02へコヒーレンシ完了を送る。様々なトランザクショ
ンに使用されるコヒーレンシ完了を列232に示す。
ヒーレンシ応答を受け取ると、ホーム・エージェント1
02へコヒーレンシ完了を送る。様々なトランザクショ
ンに使用されるコヒーレンシ完了を列232に示す。
【0119】一例を挙げると、行234は、対応するM
TAG状態が無効であるSMPバス20上のリード・ツ
ー・シェア・トランザクションに対するコヒーレンシ活
動を示す。対応する要求エージェント100は、リード
・ツー・シェア・トランザクションに関連付けられたグ
ローバル・アドレスで識別されたホーム・ノードへリー
ド・ツー・シェア・コヒーレンシ要求を送る。行234
に示したケースでは、ホーム・ノードのディレクトリ
は、要求側ノードがデータを無効状態で記憶しているこ
とを示す。要求側ノードに関するホーム・ノードのディ
レクトリ内の状態は共用に更新され、ホーム・エージェ
ント102により、ディレクトリによって所有者として
示されたノードへリード・ツー・シェア・コヒーレンシ
・デマンドが送られる。トランザクションが共用状態を
得ようとするので、共用者へはデマンドは送られない。
所有者ノード内のスレーブ・エージェント104は、コ
ヒーレンシ単位に対応するデータを要求側ノードへ送
る。要求側ノード内の要求エージェント100は、デー
タを受け取るとホーム・ノード内のホーム・エージェン
ト102へコヒーレンシ完了を送る。したがって、トラ
ンザクションが完了する。
TAG状態が無効であるSMPバス20上のリード・ツ
ー・シェア・トランザクションに対するコヒーレンシ活
動を示す。対応する要求エージェント100は、リード
・ツー・シェア・トランザクションに関連付けられたグ
ローバル・アドレスで識別されたホーム・ノードへリー
ド・ツー・シェア・コヒーレンシ要求を送る。行234
に示したケースでは、ホーム・ノードのディレクトリ
は、要求側ノードがデータを無効状態で記憶しているこ
とを示す。要求側ノードに関するホーム・ノードのディ
レクトリ内の状態は共用に更新され、ホーム・エージェ
ント102により、ディレクトリによって所有者として
示されたノードへリード・ツー・シェア・コヒーレンシ
・デマンドが送られる。トランザクションが共用状態を
得ようとするので、共用者へはデマンドは送られない。
所有者ノード内のスレーブ・エージェント104は、コ
ヒーレンシ単位に対応するデータを要求側ノードへ送
る。要求側ノード内の要求エージェント100は、デー
タを受け取るとホーム・ノード内のホーム・エージェン
ト102へコヒーレンシ完了を送る。したがって、トラ
ンザクションが完了する。
【0120】D列218に示した状態がMTAG列21
4の状態に合致しないことがあることに留意されたい。
たとえば、行236は、MTAG列214では無効状態
のコヒーレンシ単位を示す。しかし、D列218内の対
応する状態は、修正でも、あるいは所有でも、あるいは
共用でもよい。そのような状況が発生するのは、コヒー
レンシ単位への現トランザクションに関するMTAG6
8へのアクセスがアドレス・バス58上で実行されると
きに、コヒーレンシ単位に関する要求側ノードからの前
のコヒーレンシ要求がコンピュータ・システム10内で
未処理であるときである。しかし、特定のアクセス時に
ディレクトリ・エントリがブロックされるので、未処理
の要求は、現要求によるディレクトリ66のアクセスよ
りも前に完了する。このため、生成されるコヒーレンシ
・デマンドは、(ディレクトリがアクセスされるときの
MTAG状態に合致する)ディレクトリ状態に依存す
る。行236に示した例では、コヒーレンシ単位が現
在、要求側ノードに存在していることをディレクトリが
示しているので、リード・ツー・シェア要求は、単に要
求側ノード内のSMPバス20上で読取りトランザクシ
ョンを再発行することによって完了することができる。
したがって、ホーム・ノードは、応答カウント1を含
め、要求に肯定応答し、それに続いて要求側ノードは読
取りトランザクションを再発行することができる。さら
に、表210には多数のタイプのトランザクションがリ
ストされているが、コンピュータ・システム10の様々
な実施形態に応じて他のトランザクションを使用できる
ことに留意されたい。
4の状態に合致しないことがあることに留意されたい。
たとえば、行236は、MTAG列214では無効状態
のコヒーレンシ単位を示す。しかし、D列218内の対
応する状態は、修正でも、あるいは所有でも、あるいは
共用でもよい。そのような状況が発生するのは、コヒー
レンシ単位への現トランザクションに関するMTAG6
8へのアクセスがアドレス・バス58上で実行されると
きに、コヒーレンシ単位に関する要求側ノードからの前
のコヒーレンシ要求がコンピュータ・システム10内で
未処理であるときである。しかし、特定のアクセス時に
ディレクトリ・エントリがブロックされるので、未処理
の要求は、現要求によるディレクトリ66のアクセスよ
りも前に完了する。このため、生成されるコヒーレンシ
・デマンドは、(ディレクトリがアクセスされるときの
MTAG状態に合致する)ディレクトリ状態に依存す
る。行236に示した例では、コヒーレンシ単位が現
在、要求側ノードに存在していることをディレクトリが
示しているので、リード・ツー・シェア要求は、単に要
求側ノード内のSMPバス20上で読取りトランザクシ
ョンを再発行することによって完了することができる。
したがって、ホーム・ノードは、応答カウント1を含
め、要求に肯定応答し、それに続いて要求側ノードは読
取りトランザクションを再発行することができる。さら
に、表210には多数のタイプのトランザクションがリ
ストされているが、コンピュータ・システム10の様々
な実施形態に応じて他のトランザクションを使用できる
ことに留意されたい。
【0121】移行データ・アクセス・パターンおよび非
移行データ・アクセス・パターン次に図16を参照する
と、ディレクトリ66の一実施形態によって使用できる
例示的なディレクトリ・エントリ300が示されてい
る。ディレクトリ66の他の実施形態では、同様な情
報、または置換情報、または代替情報を含む他のディレ
クトリ・エントリを使用することができる。ディレクト
リ・エントリ300は、有効ビット73と、書き直しビ
ット75と、所有者フィールド77と、図4に示したデ
ィレクトリ・エントリ71と同様な共用者フィールド7
9とを含む。データ・アクセス状態フィールド302
と、サスペクト・カウント・フィールド304と、移行
カウント・フィールド306も含まれる。
移行データ・アクセス・パターン次に図16を参照する
と、ディレクトリ66の一実施形態によって使用できる
例示的なディレクトリ・エントリ300が示されてい
る。ディレクトリ66の他の実施形態では、同様な情
報、または置換情報、または代替情報を含む他のディレ
クトリ・エントリを使用することができる。ディレクト
リ・エントリ300は、有効ビット73と、書き直しビ
ット75と、所有者フィールド77と、図4に示したデ
ィレクトリ・エントリ71と同様な共用者フィールド7
9とを含む。データ・アクセス状態フィールド302
と、サスペクト・カウント・フィールド304と、移行
カウント・フィールド306も含まれる。
【0122】データ・アクセス状態フィールド302
は、対応するコヒーレンシ単位に関して観測されたデー
タ・アクセス状態を記憶する。一実施形態では、データ
・アクセス状態フィールド302は、セットされると、
コヒーレンシ単位が移行データ・アクセス・パターンを
経験していることを示すビットを備える。このビット
は、クリアされると、コヒーレンシ単位が非移行データ
・アクセス・パターンを経験していることを示す。
は、対応するコヒーレンシ単位に関して観測されたデー
タ・アクセス状態を記憶する。一実施形態では、データ
・アクセス状態フィールド302は、セットされると、
コヒーレンシ単位が移行データ・アクセス・パターンを
経験していることを示すビットを備える。このビット
は、クリアされると、コヒーレンシ単位が非移行データ
・アクセス・パターンを経験していることを示す。
【0123】ホームSMPノード12Aないし12D内
のホーム・エージェント102は、要求側SMPノード
12Aないし12D内の要求エージェント100からリ
ード・ツー・シェア要求を受け取ると、対応するディレ
クトリ・エントリ300のデータ・アクセス状態フィー
ルド302を調べる。データ・アクセス状態が移行状態
である場合、ホーム・エージェント102はコヒーレン
シ・デマンドを発行し、それによって要求側ノードは、
リード・ツー・シェア要求を介して読取り許可しか要求
されていない場合でもコヒーレンシ単位への書込み許可
を受け取る。一実施形態では、ホーム・エージェント1
02はリード・ツー・オウン・コヒーレンシ・デマンド
を発行する。あるいは、データ・アクセス状態が非移行
状態である場合、ホーム・エージェント102はコヒー
レンシ・デマンドを発行し、それによって要求側ノード
は、コヒーレンシ単位への読取り許可を受け取る(たと
えば、リード・ツー・シェア・コヒーレンシ・デマン
ド)。
のホーム・エージェント102は、要求側SMPノード
12Aないし12D内の要求エージェント100からリ
ード・ツー・シェア要求を受け取ると、対応するディレ
クトリ・エントリ300のデータ・アクセス状態フィー
ルド302を調べる。データ・アクセス状態が移行状態
である場合、ホーム・エージェント102はコヒーレン
シ・デマンドを発行し、それによって要求側ノードは、
リード・ツー・シェア要求を介して読取り許可しか要求
されていない場合でもコヒーレンシ単位への書込み許可
を受け取る。一実施形態では、ホーム・エージェント1
02はリード・ツー・オウン・コヒーレンシ・デマンド
を発行する。あるいは、データ・アクセス状態が非移行
状態である場合、ホーム・エージェント102はコヒー
レンシ・デマンドを発行し、それによって要求側ノード
は、コヒーレンシ単位への読取り許可を受け取る(たと
えば、リード・ツー・シェア・コヒーレンシ・デマン
ド)。
【0124】コンピュータ・システム10は、移行デー
タ・アクセス・パターンが観測されているコヒーレンシ
単位を読み取るSMPノード12Aないし12Dに書込
み許可を与えることによって、普通なら書込み許可を得
るために実行されるSMPノード12Aないし12Dか
らのその後のコヒーレンシ活動を回避することができ
る。それによって、移行データ・アクセスが行われる場
合にネットワーク・トラフィックを低減させることがで
きる。さらに、それに続いて移行データ・アクセスの対
応する書込みを実行するSMPノード12内のプロセッ
サ16は、書込みをより高速に完了することができる。
したがって、コンピュータ・システム10の性能が向上
する。他の利点は、移行共用データへの書込みアクセス
を、コヒーレンシ活動を行うための停止時間なしに継続
できることである。その代わり、コヒーレンシ単位への
書込み許可はすでに与えられている。この最適化を用い
ない場合、プロセッサは、データのすべての共用コピー
が無効化されるまで待ち、その後書込みを実行する(た
とえば、順次整合性が、システムによって使用されるメ
モリ・モデルから得られる場合)。
タ・アクセス・パターンが観測されているコヒーレンシ
単位を読み取るSMPノード12Aないし12Dに書込
み許可を与えることによって、普通なら書込み許可を得
るために実行されるSMPノード12Aないし12Dか
らのその後のコヒーレンシ活動を回避することができ
る。それによって、移行データ・アクセスが行われる場
合にネットワーク・トラフィックを低減させることがで
きる。さらに、それに続いて移行データ・アクセスの対
応する書込みを実行するSMPノード12内のプロセッ
サ16は、書込みをより高速に完了することができる。
したがって、コンピュータ・システム10の性能が向上
する。他の利点は、移行共用データへの書込みアクセス
を、コヒーレンシ活動を行うための停止時間なしに継続
できることである。その代わり、コヒーレンシ単位への
書込み許可はすでに与えられている。この最適化を用い
ない場合、プロセッサは、データのすべての共用コピー
が無効化されるまで待ち、その後書込みを実行する(た
とえば、順次整合性が、システムによって使用されるメ
モリ・モデルから得られる場合)。
【0125】サスペクト・カウント・フィールド304
および移行カウント・フィールド306は、ディレクト
リ・エントリ用のカウンタ対を記憶するために使用され
る。このカウンタ対は、データ・アクセス状態をいつ移
行状態から非移行状態に変更し(移行カウントフィール
ド306)、いつ非移行状態から移行状態に変更すべき
か(サスペクト・カウント・フィールド304)を判定
するために使用される。
および移行カウント・フィールド306は、ディレクト
リ・エントリ用のカウンタ対を記憶するために使用され
る。このカウンタ対は、データ・アクセス状態をいつ移
行状態から非移行状態に変更し(移行カウントフィール
ド306)、いつ非移行状態から移行状態に変更すべき
か(サスペクト・カウント・フィールド304)を判定
するために使用される。
【0126】ホーム・エージェント102は、やはり共
用コピーを維持している他のSMPノード12Aないし
12Dが1つしかないことを共用者フィールド79が示
している場合に、共用コピーを有する(共用者フィール
ド79で示される)要求側ノードからリード・ツー・オ
ウン要求を受け取ったときにサスペクト・カウントを増
分する。メモリ反映を使用するコンピュータ・システム
10の実施形態では、ホームSMPノードも共用コピー
を維持することができる。メモリ反映が使用されるの
は、あるSMPノード12Aないし12Dが他のSMP
ノード12Aないし12Dで更新されたコヒーレンシ単
位を読み取ることによって、その更新が読取り側SMP
ノード12Aないし12DとホームSMPノード12A
ないし12Dの両方へ転送される場合である。ホームS
MPノード12Aないし12Dを更新することによっ
て、それに続く読取りに関するデータをホームSMPノ
ード12Aないし12Dから与えることができる。
用コピーを維持している他のSMPノード12Aないし
12Dが1つしかないことを共用者フィールド79が示
している場合に、共用コピーを有する(共用者フィール
ド79で示される)要求側ノードからリード・ツー・オ
ウン要求を受け取ったときにサスペクト・カウントを増
分する。メモリ反映を使用するコンピュータ・システム
10の実施形態では、ホームSMPノードも共用コピー
を維持することができる。メモリ反映が使用されるの
は、あるSMPノード12Aないし12Dが他のSMP
ノード12Aないし12Dで更新されたコヒーレンシ単
位を読み取ることによって、その更新が読取り側SMP
ノード12Aないし12DとホームSMPノード12A
ないし12Dの両方へ転送される場合である。ホームS
MPノード12Aないし12Dを更新することによっ
て、それに続く読取りに関するデータをホームSMPノ
ード12Aないし12Dから与えることができる。
【0127】1つの第2のSMPノード12Aないし1
2Dのみと共に共用コピーを維持している第1のSMP
ノード12Aないし12Dからのリード・ツー・オウン
・コヒーレンシ要求は場合によっては、データ移行の書
込み部分を表す。リード・ツー・オウン・コヒーレンシ
要求がデータ移行の書込み部分を表す場合、前に第1の
SMPノード12Aないし12Dからのリード・ツー・
シェア・コヒーレンシ要求が実行され、第2のSMPノ
ード12Aないし12Dからデータが与えられている
(したがって、未処理の共用コピーは2つだけであ
る)。リード・ツー・オウン・コヒーレンシ要求が受け
取られたときに未処理の共用コピーが2つだけなので、
データは移行方式で共用されていると仮定することがで
きる。したがって、サスペクト・カウントが増分され
る。サスペクト・カウントは、特定の数のビットを含
み、したがって、移行データ・アクセス・パターンが引
き続き実行される場合はオーバフローする。たとえば、
サスペクト・カウントは1からMまでカウントするのに
十分な数のビットを含むことができる。したがって、デ
ータ移行アクセスである可能性があるアクセスがM+1
回行われると、サスペクト・カウントはオーバフローす
る。ホーム・エージェント102は、このオーバフロー
を検出し、データ・アクセス状態フィールド302に記
憶されているデータ・アクセス状態を移行状態に変更す
る。また、ホーム・エージェント102は移行カウント
を1に初期設定する。特定の一実施形態では、コンピュ
ータ・システム10のリセット時に各ディレクトリ・エ
ントリが非移行データ・アクセス状態に初期設定されサ
スペクト・カウントが零に初期設定されることに留意さ
れたい。
2Dのみと共に共用コピーを維持している第1のSMP
ノード12Aないし12Dからのリード・ツー・オウン
・コヒーレンシ要求は場合によっては、データ移行の書
込み部分を表す。リード・ツー・オウン・コヒーレンシ
要求がデータ移行の書込み部分を表す場合、前に第1の
SMPノード12Aないし12Dからのリード・ツー・
シェア・コヒーレンシ要求が実行され、第2のSMPノ
ード12Aないし12Dからデータが与えられている
(したがって、未処理の共用コピーは2つだけであ
る)。リード・ツー・オウン・コヒーレンシ要求が受け
取られたときに未処理の共用コピーが2つだけなので、
データは移行方式で共用されていると仮定することがで
きる。したがって、サスペクト・カウントが増分され
る。サスペクト・カウントは、特定の数のビットを含
み、したがって、移行データ・アクセス・パターンが引
き続き実行される場合はオーバフローする。たとえば、
サスペクト・カウントは1からMまでカウントするのに
十分な数のビットを含むことができる。したがって、デ
ータ移行アクセスである可能性があるアクセスがM+1
回行われると、サスペクト・カウントはオーバフローす
る。ホーム・エージェント102は、このオーバフロー
を検出し、データ・アクセス状態フィールド302に記
憶されているデータ・アクセス状態を移行状態に変更す
る。また、ホーム・エージェント102は移行カウント
を1に初期設定する。特定の一実施形態では、コンピュ
ータ・システム10のリセット時に各ディレクトリ・エ
ントリが非移行データ・アクセス状態に初期設定されサ
スペクト・カウントが零に初期設定されることに留意さ
れたい。
【0128】他の実施形態では、RTOを受け取るコヒ
ーレンシ単位には2つの共用コピーしか存在しないとい
う要件と共に、移行カウントを増加させるための追加要
件を含めることができる。この追加要件は、RTO要求
が、最後にコヒーレンシ単位を更新したノードではない
ノードから発信されることである。この追加要件によっ
て、生産者/消費者関係(あるノードがコヒーレンシ単
位を反復的に更新し、他のノードがそのコヒーレンシ単
位を反復的に読み取る)で共用されるデータが移行状態
として検出されることはなくなる。そのような関係が移
行状態として検出された場合、生産者は停止して消費者
からのデータのコピーを待ち、コピーを得た時点で他の
更新を試みる。さらに、複数のプロセッサがデータを共
用し、複数の共用コピーの不要な無効化が行われる恐れ
がある。
ーレンシ単位には2つの共用コピーしか存在しないとい
う要件と共に、移行カウントを増加させるための追加要
件を含めることができる。この追加要件は、RTO要求
が、最後にコヒーレンシ単位を更新したノードではない
ノードから発信されることである。この追加要件によっ
て、生産者/消費者関係(あるノードがコヒーレンシ単
位を反復的に更新し、他のノードがそのコヒーレンシ単
位を反復的に読み取る)で共用されるデータが移行状態
として検出されることはなくなる。そのような関係が移
行状態として検出された場合、生産者は停止して消費者
からのデータのコピーを待ち、コピーを得た時点で他の
更新を試みる。さらに、複数のプロセッサがデータを共
用し、複数の共用コピーの不要な無効化が行われる恐れ
がある。
【0129】同様に、移行カウント・フィールド306
に記憶されている移行カウントは、影響を受けるコヒー
レンシ単位に関して移行データ・アクセス・パターンが
観測されたことをデータ・アクセス状態フィールド30
2が示している間にデータ移行が検出されたときに増分
される。移行カウントは、特定の数のビットを含み、そ
のため、オーバフローが起こる前に1からNまでカウン
トすることができる。ホーム・エージェント102は、
移行カウントがオーバフローすると、データ・アクセス
状態を非移行状態に変更する。また、ホーム・エージェ
ント102はサスペクト・カウントをM(たとえば、サ
スペクト・カウント・フィールド304で表すことがで
きる最大値)に設定する。基本的に、移行カウントによ
って、一定数の移行が行われた後に非移行データ・アク
セス状態に戻る。ホーム・エージェント102は、非移
行状態に戻ったときにサスペクト・カウントを最大値に
設定することによって、移行データ・アクセス・パター
ンが引き続き観測される場合に迅速に移行状態に戻れる
ようにする。移行データ・アクセス状態から非移行デー
タ・アクセス状態への遷移時にサスペクト・カウントに
記憶される値が、様々な実施形態ごとに異なることに留
意されたい。
に記憶されている移行カウントは、影響を受けるコヒー
レンシ単位に関して移行データ・アクセス・パターンが
観測されたことをデータ・アクセス状態フィールド30
2が示している間にデータ移行が検出されたときに増分
される。移行カウントは、特定の数のビットを含み、そ
のため、オーバフローが起こる前に1からNまでカウン
トすることができる。ホーム・エージェント102は、
移行カウントがオーバフローすると、データ・アクセス
状態を非移行状態に変更する。また、ホーム・エージェ
ント102はサスペクト・カウントをM(たとえば、サ
スペクト・カウント・フィールド304で表すことがで
きる最大値)に設定する。基本的に、移行カウントによ
って、一定数の移行が行われた後に非移行データ・アク
セス状態に戻る。ホーム・エージェント102は、非移
行状態に戻ったときにサスペクト・カウントを最大値に
設定することによって、移行データ・アクセス・パター
ンが引き続き観測される場合に迅速に移行状態に戻れる
ようにする。移行データ・アクセス状態から非移行デー
タ・アクセス状態への遷移時にサスペクト・カウントに
記憶される値が、様々な実施形態ごとに異なることに留
意されたい。
【0130】代替実施形態では、サスペクト・カウント
・フィールド304と移行カウント・フィールド306
のどちらかまたは両方をディレクトリ300からなくす
ことができる。たとえば、移行カウント・フィールド3
06をなくし、ディレクトリ・エントリに関する非移行
データ・アクセス状態へのリターンを1/Nの確率で無
作為に行うことができる。無作為性は、システム・イン
タフェース24内の単一のカウンタを移行カウントとし
て使用することによって実施することができ、その場
合、この単一のカウンタは、対応するデータ・アクセス
状態が移行状態であるコヒーレンシ単位が移行するたび
に増分される。カウンタがNまでカウントするように構
成されている場合、特定の要求が単一のカウンタをオー
バフローさせ、データ・アクセス状態フィールド302
を非移行状態に遷移させる確率は1/Nである。同様
に、確率1/Mの無作為遷移のためにサスペクト・カウ
ント・フィールド304をなくすことができる。別法と
して、特定のコヒーレンシ単位に関して移行データ・ア
クセス・パターンが初めて検出されたときに移行データ
・アクセス状態に遷移させることができる。さらに、プ
ログラム可能な競合アルゴリズムを使用して、移行デー
タ・アクセス状態から非移行データ・アクセス状態に遷
移することができ、その逆についても同様である。
・フィールド304と移行カウント・フィールド306
のどちらかまたは両方をディレクトリ300からなくす
ことができる。たとえば、移行カウント・フィールド3
06をなくし、ディレクトリ・エントリに関する非移行
データ・アクセス状態へのリターンを1/Nの確率で無
作為に行うことができる。無作為性は、システム・イン
タフェース24内の単一のカウンタを移行カウントとし
て使用することによって実施することができ、その場
合、この単一のカウンタは、対応するデータ・アクセス
状態が移行状態であるコヒーレンシ単位が移行するたび
に増分される。カウンタがNまでカウントするように構
成されている場合、特定の要求が単一のカウンタをオー
バフローさせ、データ・アクセス状態フィールド302
を非移行状態に遷移させる確率は1/Nである。同様
に、確率1/Mの無作為遷移のためにサスペクト・カウ
ント・フィールド304をなくすことができる。別法と
して、特定のコヒーレンシ単位に関して移行データ・ア
クセス・パターンが初めて検出されたときに移行データ
・アクセス状態に遷移させることができる。さらに、プ
ログラム可能な競合アルゴリズムを使用して、移行デー
タ・アクセス状態から非移行データ・アクセス状態に遷
移することができ、その逆についても同様である。
【0131】次に図17を参照すると、ホーム・エージ
ェント102の一実施形態による、コヒーレンシ要求の
受取時にホーム・エージェント102によって実行され
る活動のフローチャートが示されている。代替実施形態
では、異なる数組の活動を実行することができる。
ェント102の一実施形態による、コヒーレンシ要求の
受取時にホーム・エージェント102によって実行され
る活動のフローチャートが示されている。代替実施形態
では、異なる数組の活動を実行することができる。
【0132】ホーム・エージェント102は、要求が、
リード・ツー・オウン要求であるか(決定ボックス31
0)、それとも対応するディレクトリ・エントリ300
が移行データ・アクセス状態を示すリード・ツー・シェ
ア要求であるか(決定ボックス312)を判定する。リ
ード・ツー・オウン要求の場合、ホーム・エージェント
102は、要求側ノードと他の1つのノードのみが、影
響を受けるコヒーレンシ単位を共用しているかどうかを
判定する(決定ボックス314)。そうでない場合、要
求は図15に示したように処理される(ステップ31
6)。同様に、データ・アクセス状態が非移行状態であ
るコヒーレンシ単位にアクセスするリード・ツー・シェ
ア要求は、図15に示したように処理される。ホーム・
エージェント102がさらに、決定ボックス314で、
前述のように、要求側ノードが、影響を受けるコヒーレ
ンシ単位を最後に更新したノードではないことを検出で
きることに留意されたい。
リード・ツー・オウン要求であるか(決定ボックス31
0)、それとも対応するディレクトリ・エントリ300
が移行データ・アクセス状態を示すリード・ツー・シェ
ア要求であるか(決定ボックス312)を判定する。リ
ード・ツー・オウン要求の場合、ホーム・エージェント
102は、要求側ノードと他の1つのノードのみが、影
響を受けるコヒーレンシ単位を共用しているかどうかを
判定する(決定ボックス314)。そうでない場合、要
求は図15に示したように処理される(ステップ31
6)。同様に、データ・アクセス状態が非移行状態であ
るコヒーレンシ単位にアクセスするリード・ツー・シェ
ア要求は、図15に示したように処理される。ホーム・
エージェント102がさらに、決定ボックス314で、
前述のように、要求側ノードが、影響を受けるコヒーレ
ンシ単位を最後に更新したノードではないことを検出で
きることに留意されたい。
【0133】一方、リード・ツー・オウン要求は、要求
側および他の1つのノードのみによって共用されている
コヒーレンシ単位に影響を与えることができる。そのよ
うな検出時に、ホーム・エージェント102は、対応す
るサスペクト・カウントを増分する(ステップ31
8)。ホーム・エージェント102は、サスペクト・カ
ウントのオーバフローを検出し(決定ボックス32
0)、オーバフローが検出された場合、対応するディレ
クトリ・エントリ内で移行データ・アクセス状態に遷移
する(ステップ322)。
側および他の1つのノードのみによって共用されている
コヒーレンシ単位に影響を与えることができる。そのよ
うな検出時に、ホーム・エージェント102は、対応す
るサスペクト・カウントを増分する(ステップ31
8)。ホーム・エージェント102は、サスペクト・カ
ウントのオーバフローを検出し(決定ボックス32
0)、オーバフローが検出された場合、対応するディレ
クトリ・エントリ内で移行データ・アクセス状態に遷移
する(ステップ322)。
【0134】ホーム・エージェント102は、データ・
アクセス状態が移行状態であるコヒーレンシ単位に対す
るリード・ツー・シェア要求を決定する際に特殊な処理
を行う。具体的には、ホーム・エージェント102は、
データが、通常与えられる読取り専用許可ではなく読取
り/書込み許可と共に要求側SMPノード12Aないし
12Dに与えられるようにコヒーレンシ・デマンドを生
成する(ステップ324)。さらに、対応する移行カウ
ントが増分される(ステップ326)。移行カウントが
オーバフローすると(決定ボックス328)、コヒーレ
ンシ単位のデータ・アクセス状態が非移行状態に変更さ
れる(ステップ330)。
アクセス状態が移行状態であるコヒーレンシ単位に対す
るリード・ツー・シェア要求を決定する際に特殊な処理
を行う。具体的には、ホーム・エージェント102は、
データが、通常与えられる読取り専用許可ではなく読取
り/書込み許可と共に要求側SMPノード12Aないし
12Dに与えられるようにコヒーレンシ・デマンドを生
成する(ステップ324)。さらに、対応する移行カウ
ントが増分される(ステップ326)。移行カウントが
オーバフローすると(決定ボックス328)、コヒーレ
ンシ単位のデータ・アクセス状態が非移行状態に変更さ
れる(ステップ330)。
【0135】次の図18を参照すると、非移行コヒーレ
ンシ単位へのリード・ツー・シェア要求に関するコヒー
レンシ活動を示す図が示されている。要求側SMPノー
ド12Aないし12D内の要求エージェント100は、
対応するコヒーレンシ単位のホーム・ノードへのリード
・ツー・シェア・コヒーレンシ要求340を実行する。
これに応答して、ホーム・ノード内のホーム・エージェ
ント102は、所有者スレーブ・エージェント104に
リード・ツー・シェア・デマンドを発行する。所有者ス
レーブ・エージェント104は、リード・ツー・シェア
・デマンドを受け取ると、データ応答344で応答す
る。スレーブ・エージェント104はさらに、コヒーレ
ンシ単位のコピーを所有状態に保持する。要求エージェ
ント100は、データ応答344に応答して、受け取っ
たコヒーレンシ単位を共用状態で記憶する。また、要求
エージェント100はホーム・エージェント102へコ
ヒーレンシ完了信号346を送る。一実施形態では、デ
ータ応答344は、コヒーレンシ単位が要求側ノード内
に記憶されるコヒーレンシ状態を含む。データ応答34
4にコヒーレンシ状態を含めることによって、下記で詳
しく論じるように、通常、リード・ツー・シェア要求に
応答して割り当てられる状態とは異なる状態を、指定す
ることができる。
ンシ単位へのリード・ツー・シェア要求に関するコヒー
レンシ活動を示す図が示されている。要求側SMPノー
ド12Aないし12D内の要求エージェント100は、
対応するコヒーレンシ単位のホーム・ノードへのリード
・ツー・シェア・コヒーレンシ要求340を実行する。
これに応答して、ホーム・ノード内のホーム・エージェ
ント102は、所有者スレーブ・エージェント104に
リード・ツー・シェア・デマンドを発行する。所有者ス
レーブ・エージェント104は、リード・ツー・シェア
・デマンドを受け取ると、データ応答344で応答す
る。スレーブ・エージェント104はさらに、コヒーレ
ンシ単位のコピーを所有状態に保持する。要求エージェ
ント100は、データ応答344に応答して、受け取っ
たコヒーレンシ単位を共用状態で記憶する。また、要求
エージェント100はホーム・エージェント102へコ
ヒーレンシ完了信号346を送る。一実施形態では、デ
ータ応答344は、コヒーレンシ単位が要求側ノード内
に記憶されるコヒーレンシ状態を含む。データ応答34
4にコヒーレンシ状態を含めることによって、下記で詳
しく論じるように、通常、リード・ツー・シェア要求に
応答して割り当てられる状態とは異なる状態を、指定す
ることができる。
【0136】移行データ・アクセス状態を有するコヒー
レンシ単位に対するリード・ツー・シェア要求に応答し
て実行されるコヒーレンシ活動を図19に示す。図18
の活動と同様に、要求側SMPノード12Aないし12
D内の要求エージェント100は、影響を受けるコヒー
レンシ単位のホーム・ノード内のホーム・エージェント
102へのリード・ツー・シェア要求340を実行す
る。ホーム・エージェント102は、影響を受けるコヒ
ーレンシ単位のためにディレクトリ66にアクセスする
と、コヒーレンシ単位が移行データ・アクセス状態であ
ることを検出する。したがって、ホーム・エージェント
102は、(ディレクトリ・エントリ300に示したよ
うに)所有者スレーブ・エージェント104Aへのリー
ド・ツー・オウン・コヒーレンシ・デマンド350を実
行する。ホーム・エージェント102は、共用スレーブ
・エージェント104Bへのコヒーレンシ無効化デマン
ド352も実行する。
レンシ単位に対するリード・ツー・シェア要求に応答し
て実行されるコヒーレンシ活動を図19に示す。図18
の活動と同様に、要求側SMPノード12Aないし12
D内の要求エージェント100は、影響を受けるコヒー
レンシ単位のホーム・ノード内のホーム・エージェント
102へのリード・ツー・シェア要求340を実行す
る。ホーム・エージェント102は、影響を受けるコヒ
ーレンシ単位のためにディレクトリ66にアクセスする
と、コヒーレンシ単位が移行データ・アクセス状態であ
ることを検出する。したがって、ホーム・エージェント
102は、(ディレクトリ・エントリ300に示したよ
うに)所有者スレーブ・エージェント104Aへのリー
ド・ツー・オウン・コヒーレンシ・デマンド350を実
行する。ホーム・エージェント102は、共用スレーブ
・エージェント104Bへのコヒーレンシ無効化デマン
ド352も実行する。
【0137】スレーブ・エージェント104Aは、リー
ド・ツー・オウン・コヒーレンシ・デマンド350に応
答して、コヒーレンシ単位のローカル・コピーを無効化
し、そのローカル・コピーをデータ・コヒーレンシ応答
354において要求エージェント100へ転送する。ス
レーブ・エージェント104Aは、データ・コヒーレン
シ応答354内で、要求側SMPノード12Aないし1
2Dがコヒーレンシ単位への読取り/書込みアクセス権
を得るべきであることも示す。一実施形態では、スレー
ブ・エージェント104Aは、要求側SMPノード12
Aないし12D内のコヒーレンシ単位のコヒーレンシ状
態を修正すべきであることを示す。ホーム・エージェン
ト102が、要求側SMPノード12Aないし12Dが
コヒーレンシ単位を修正状態で記憶していることを示す
ようにディレクトリを更新することに留意されたい。
ド・ツー・オウン・コヒーレンシ・デマンド350に応
答して、コヒーレンシ単位のローカル・コピーを無効化
し、そのローカル・コピーをデータ・コヒーレンシ応答
354において要求エージェント100へ転送する。ス
レーブ・エージェント104Aは、データ・コヒーレン
シ応答354内で、要求側SMPノード12Aないし1
2Dがコヒーレンシ単位への読取り/書込みアクセス権
を得るべきであることも示す。一実施形態では、スレー
ブ・エージェント104Aは、要求側SMPノード12
Aないし12D内のコヒーレンシ単位のコヒーレンシ状
態を修正すべきであることを示す。ホーム・エージェン
ト102が、要求側SMPノード12Aないし12Dが
コヒーレンシ単位を修正状態で記憶していることを示す
ようにディレクトリを更新することに留意されたい。
【0138】スレーブ・エージェント104Bは、スレ
ーブ・エージェント自体内でコヒーレンシ単位のローカ
ル・コピーを無効化したときに肯定コヒーレンシ応答3
56を与える。要求エージェント100は、スレーブ・
エージェント104Bから肯定コヒーレンシ応答356
を受け取り、所有者スレーブ・エージェント104Aか
らデータ・コヒーレンシ応答354を受け取った後、ホ
ーム・エージェント102へコヒーレンシ完了信号34
6を送る。それによって、リード・ツー・シェア要求が
完了し、要求側SMPノードはこの時点で、読取り専用
アクセス権を要求したにもかかわらず、影響を受けるコ
ヒーレンシ単位への読取り/書込みアクセス権を得てい
る。これに続いて要求側SMPノードがコヒーレンシ単
位を更新する(たとえば、移行データ・アクセス・パタ
ーンの一部を示す)場合、要求側SMPノードのアクセ
ス権によって、ネットワーク14上でネットワーク・ト
ラフィックを生成せずに更新を行うことができる。
ーブ・エージェント自体内でコヒーレンシ単位のローカ
ル・コピーを無効化したときに肯定コヒーレンシ応答3
56を与える。要求エージェント100は、スレーブ・
エージェント104Bから肯定コヒーレンシ応答356
を受け取り、所有者スレーブ・エージェント104Aか
らデータ・コヒーレンシ応答354を受け取った後、ホ
ーム・エージェント102へコヒーレンシ完了信号34
6を送る。それによって、リード・ツー・シェア要求が
完了し、要求側SMPノードはこの時点で、読取り専用
アクセス権を要求したにもかかわらず、影響を受けるコ
ヒーレンシ単位への読取り/書込みアクセス権を得てい
る。これに続いて要求側SMPノードがコヒーレンシ単
位を更新する(たとえば、移行データ・アクセス・パタ
ーンの一部を示す)場合、要求側SMPノードのアクセ
ス権によって、ネットワーク14上でネットワーク・ト
ラフィックを生成せずに更新を行うことができる。
【0139】コヒーレンシ単位が実際に、コヒーレンシ
単位に関する移行データ・アクセス・パターンを示して
いる場合、所有者スレーブ・エージェント104Aは存
在できるが、通常、要求エージェント100によってリ
ード・ツー・シェア要求が実行されるときには共用スレ
ーブ・エージェント104Bは存在しないことに留意さ
れたい。図20は、リード・ツー・シェア・コヒーレン
シ要求340、リード・ツー・オウン・コヒーレンシ・
デマンド350、データ・コヒーレンシ応答354、コ
ヒーレンシ完了信号346のみが関与するそのような状
況を示す。
単位に関する移行データ・アクセス・パターンを示して
いる場合、所有者スレーブ・エージェント104Aは存
在できるが、通常、要求エージェント100によってリ
ード・ツー・シェア要求が実行されるときには共用スレ
ーブ・エージェント104Bは存在しないことに留意さ
れたい。図20は、リード・ツー・シェア・コヒーレン
シ要求340、リード・ツー・オウン・コヒーレンシ・
デマンド350、データ・コヒーレンシ応答354、コ
ヒーレンシ完了信号346のみが関与するそのような状
況を示す。
【0140】図21は、図15に示した表210と同様
な表360を示す。表360は、移行データ・アクセス
状態を有するコヒーレンシ単位に対して実行されるリー
ド・ツー・シェア要求に関して実行されるコヒーレンシ
活動を示す。この表に示したように(たとえば、行36
2および364)、移行データ・アクセス・パターンが
観測されたリード・ツー・シェア要求によってリード・
ツー・オウン・コヒーレンシ・デマンドが発行され、そ
れに続いて、リード・ツー・オウン・デマンドに応答し
てスレーブ・コヒーレンシ動作が実行される。また、要
求側ノードが活動の終わりにディレクトリにおいて修正
されることも示されている。行366および368は、
要求エージェント100によって開始されるコヒーレン
シ活動を示すが、すでに、ホーム・ノードで要求が処理
されたときに要求側SMPノードによって妥当なコヒー
レンシ状態が達成されている。したがって、行366お
よび368は表210の行236に類似している。
な表360を示す。表360は、移行データ・アクセス
状態を有するコヒーレンシ単位に対して実行されるリー
ド・ツー・シェア要求に関して実行されるコヒーレンシ
活動を示す。この表に示したように(たとえば、行36
2および364)、移行データ・アクセス・パターンが
観測されたリード・ツー・シェア要求によってリード・
ツー・オウン・コヒーレンシ・デマンドが発行され、そ
れに続いて、リード・ツー・オウン・デマンドに応答し
てスレーブ・コヒーレンシ動作が実行される。また、要
求側ノードが活動の終わりにディレクトリにおいて修正
されることも示されている。行366および368は、
要求エージェント100によって開始されるコヒーレン
シ活動を示すが、すでに、ホーム・ノードで要求が処理
されたときに要求側SMPノードによって妥当なコヒー
レンシ状態が達成されている。したがって、行366お
よび368は表210の行236に類似している。
【0141】表360は、リード・ツー・シェア要求が
読取り/書込みアクセス権を求める要求に変換されるこ
とを示しているが、コンピュータ・システム10の様々
な実施形態ではコヒーレンシ読取り要求を同様に処理で
きることに留意されたい。一般に、コヒーレンシ読取り
要求とは、コヒーレンシ単位に対する読取り専用アクセ
ス権を求める要求である。
読取り/書込みアクセス権を求める要求に変換されるこ
とを示しているが、コンピュータ・システム10の様々
な実施形態ではコヒーレンシ読取り要求を同様に処理で
きることに留意されたい。一般に、コヒーレンシ読取り
要求とは、コヒーレンシ単位に対する読取り専用アクセ
ス権を求める要求である。
【0142】上記の例示的な実施形態では、SMPノー
ド12について説明したが、一般的に言えば、コンピュ
ータ・システム10の実施形態は1つまたは複数の処理
ノードを含むことができる。本明細書では、処理ノード
は、少なくとも1つのプロセッサと対応するメモリとを
含む。他の処理ノードと通信する回路も含まれる。コン
ピュータ・システム10の実施形態に複数の処理ノード
が含まれるとき、処理ノード内の対応するメモリは分散
共用メモリを形成する。処理ノードはリモート処理ノー
ドまたはローカル処理ノードと呼ぶことができる。処理
ノードは、特定のプロセッサを含まない場合、その特定
のプロセッサに対してリモート処理ノードである。逆
に、特定のプロセッサを含む処理ノードは、その特定の
プロセッサのローカル処理ノードである。
ド12について説明したが、一般的に言えば、コンピュ
ータ・システム10の実施形態は1つまたは複数の処理
ノードを含むことができる。本明細書では、処理ノード
は、少なくとも1つのプロセッサと対応するメモリとを
含む。他の処理ノードと通信する回路も含まれる。コン
ピュータ・システム10の実施形態に複数の処理ノード
が含まれるとき、処理ノード内の対応するメモリは分散
共用メモリを形成する。処理ノードはリモート処理ノー
ドまたはローカル処理ノードと呼ぶことができる。処理
ノードは、特定のプロセッサを含まない場合、その特定
のプロセッサに対してリモート処理ノードである。逆
に、特定のプロセッサを含む処理ノードは、その特定の
プロセッサのローカル処理ノードである。
【0143】上記の開示によれば、移行データ・アクセ
スを効率的に検出し処理する装置および方法が示されて
いる。この装置および方法は、コンピュータ・システム
のディレクトリで集中制御され、そのため、システム内
の処理ノードのキャッシュ階層内の様々なキャッシュを
修正しなくても移行データ・アクセス・パターンが効率
的に検出され処理される。1つまたは複数のコヒーレン
シ単位に関して移行データ・アクセス・パターンを示す
プログラムに対してコンピュータ・システムの性能を向
上させることができるので有利である。性能の向上は、
移行データ・アクセスのより効率的な処理を介して実現
することができ、その場合、移行データ・アクセス・パ
ターンが検出されたコヒーレンシ単位への読取りアクセ
ス時に読取り/書込みアクセス権が与えられる。
スを効率的に検出し処理する装置および方法が示されて
いる。この装置および方法は、コンピュータ・システム
のディレクトリで集中制御され、そのため、システム内
の処理ノードのキャッシュ階層内の様々なキャッシュを
修正しなくても移行データ・アクセス・パターンが効率
的に検出され処理される。1つまたは複数のコヒーレン
シ単位に関して移行データ・アクセス・パターンを示す
プログラムに対してコンピュータ・システムの性能を向
上させることができるので有利である。性能の向上は、
移行データ・アクセスのより効率的な処理を介して実現
することができ、その場合、移行データ・アクセス・パ
ターンが検出されたコヒーレンシ単位への読取りアクセ
ス時に読取り/書込みアクセス権が与えられる。
【0144】当業者には、上記の開示を完全に理解した
後に多数の変形形態および修正形態が明らかになろう。
たとえば、本明細書に示した様々なブロックおよび構成
要素はハードウェア実施形態に関して説明したが、代替
実施形態では、ハードウェア機能のすべてまたは一部を
ソフトウェアで実施することができる。特許請求の範囲
は、すべてのそのような変形形態および修正形態を包含
するものと解釈されるものである。
後に多数の変形形態および修正形態が明らかになろう。
たとえば、本明細書に示した様々なブロックおよび構成
要素はハードウェア実施形態に関して説明したが、代替
実施形態では、ハードウェア機能のすべてまたは一部を
ソフトウェアで実施することができる。特許請求の範囲
は、すべてのそのような変形形態および修正形態を包含
するものと解釈されるものである。
【図1】マルチプロセッサ・コンピュータ・システムの
ブロック図である。
ブロック図である。
【図2】図1に示したコンピュータ・システムの一実施
形態によってサポートされる非一様メモリ・アーキテク
チャを示す概念ブロック図(A)と、図1に示したコン
ピュータ・システムの一実施形態によってサポートされ
るキャッシュ専用メモリ・アーキテクチャを示す概念ブ
ロック図(B)である。
形態によってサポートされる非一様メモリ・アーキテク
チャを示す概念ブロック図(A)と、図1に示したコン
ピュータ・システムの一実施形態によってサポートされ
るキャッシュ専用メモリ・アーキテクチャを示す概念ブ
ロック図(B)である。
【図3】図1に示した対称型多重処理ノードの一実施形
態のブロック図である。
態のブロック図である。
【図4】図3に示したディレクトリの一実施形態に記憶
された例示的なディレクトリ・エントリを示す図であ
る。
された例示的なディレクトリ・エントリを示す図であ
る。
【図5】図1に示したシステム・インタフェースの一実
施形態のブロック図である。
施形態のブロック図である。
【図6】要求エージェントとホーム・エージェントとス
レーブ・エージェントとの間の通常のコヒーレンシ動作
に応答して実行される活動を示す図である。
レーブ・エージェントとの間の通常のコヒーレンシ動作
に応答して実行される活動を示す図である。
【図7】プロセッサからのリード・ツー・オウン要求に
応答して実行される例示的なコヒーレンシ動作を示す図
である。
応答して実行される例示的なコヒーレンシ動作を示す図
である。
【図8】図5に示した要求エージェントの一実施形態に
関する例示的な状態マシンを示すフローチャートであ
る。
関する例示的な状態マシンを示すフローチャートであ
る。
【図9】図5に示したホーム・エージェントの一実施形
態に関する例示的な状態マシンを示すフローチャートで
ある。
態に関する例示的な状態マシンを示すフローチャートで
ある。
【図10】図5に示したスレーブ・エージェントの一実
施形態に関する例示的な状態マシンを示すフローチャー
トである。
施形態に関する例示的な状態マシンを示すフローチャー
トである。
【図11】システム・インタフェースの一実施形態によ
る要求タイプをリストした表である。
る要求タイプをリストした表である。
【図12】システム・インタフェースの一実施形態によ
るデマンド・タイプをリストした表である。
るデマンド・タイプをリストした表である。
【図13】システム・インタフェースの一実施形態によ
る応答タイプをリストした表である。
る応答タイプをリストした表である。
【図14】システム・インタフェースの一実施形態によ
る完了タイプをリストした表である。
る完了タイプをリストした表である。
【図15】システム・インタフェースの一実施形態によ
る、プロセッサによって実行される様々な動作に応答し
て実行されるコヒーレンシ動作を表す表である。
る、プロセッサによって実行される様々な動作に応答し
て実行されるコヒーレンシ動作を表す表である。
【図16】図3に示したディレクトリの一実施形態に記
憶されている例示的なディレクトリ・エントリを示す図
である。
憶されている例示的なディレクトリ・エントリを示す図
である。
【図17】ホーム・エージェントの一実施形態によっ
て、移行データ・アクセス・パターンおよび非移行デー
タ・アクセス・パターンを検出し処理するために実行さ
れるホーム・エージェント内の活動を示すフローチャー
トである。
て、移行データ・アクセス・パターンおよび非移行デー
タ・アクセス・パターンを検出し処理するために実行さ
れるホーム・エージェント内の活動を示すフローチャー
トである。
【図18】図1に示したコンピュータ・システムの一実
施形態によって非移行コヒーレンシ単位へのリード・ツ
ー・シェア要求に応答して実行される活動の図である。
施形態によって非移行コヒーレンシ単位へのリード・ツ
ー・シェア要求に応答して実行される活動の図である。
【図19】図1に示したコンピュータ・システムの一実
施形態によって移行コヒーレンシ単位へのリード・ツー
・シェア要求に応答して実行される活動の図である。
施形態によって移行コヒーレンシ単位へのリード・ツー
・シェア要求に応答して実行される活動の図である。
【図20】図1に示したコンピュータ・システムの一実
施形態によって移行コヒーレンシ単位へのリード・ツー
・シェア要求に応答して実行される活動の別の図であ
る。
施形態によって移行コヒーレンシ単位へのリード・ツー
・シェア要求に応答して実行される活動の別の図であ
る。
【図21】図1に示したコンピュータ・システムの一実
施形態によって、リード・ツー・シェア要求に応答して
移行コヒーレンシ単位に対して実行されるコヒーレンシ
動作を示す表である。
施形態によって、リード・ツー・シェア要求に応答して
移行コヒーレンシ単位に対して実行されるコヒーレンシ
動作を示す表である。
10 コンピュータ・システム 12 SMPノード 14 ポイント・ツー・ポイント・ネットワーク 16 プロセッサ 18 外部キャッシュ 20 SMPバス 22 メモリ 24 システム・インタフェース 26 入出力インタフェース
─────────────────────────────────────────────────────
【手続補正書】
【提出日】平成9年12月19日
【手続補正1】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正内容】
【図1】
【図4】
【図12】
【図2】
【図6】
【図11】
【図3】
【図5】
【図14】
【図21】
【図7】
【図10】
【図13】
【図16】
【図8】
【図18】
【図19】
【図9】
【図20】
【図15】
【図17】
───────────────────────────────────────────────────── フロントページの続き (71)出願人 591064003 901 SAN ANTONIO ROAD PALO ALTO,CA 94303,U. S.A. (72)発明者 マーク・ディ・ヒル アメリカ合衆国・53705・ウィスコンシン 州・マディソン・チャンバーレイン アヴ ェニュ・2124
Claims (20)
- 【請求項1】 多重処理コンピュータ・システムにおい
て処理ノードにコヒーレンシ単位を与える方法であっ
て、 前記コヒーレンシ単位に対応し、状態自体が第1の値を
維持している場合に移行データ・アクセス・パターンを
示し、状態自体が第2の値を維持している場合に非移行
データ・アクセス・パターンを示す状態を、前記コヒー
レンシ単位のホーム・ノードにあるディレクトリ内に記
憶することと、 前記状態が前記第1の値を維持している場合に、前記処
理ノードからの読取りコヒーレンシ要求に応答して、前
記コヒーレンシ単位を、前記移行データ・アクセス・パ
ターンおよび前記非移行データ・アクセス・パターンの
表示を除外する読取り/書込みアクセス権と共に、前記
処理ノードに与えることとを含むことを特徴とする方
法。 - 【請求項2】 さらに、前記状態が前記第2の値を維持
している場合に、前記処理ノードからの読取りコヒーレ
ンシ要求に応答して、前記コヒーレンシ単位を読取りア
クセス権と共に前記処理ノードに与えることとを含むこ
とを特徴とする請求項1に記載の方法。 - 【請求項3】 さらに、前記移行データ・アクセス・パ
ターンを検出することと、それに応答して前記状態を前
記第1の値に設定することとを含むことを特徴とする請
求項1に記載の方法。 - 【請求項4】 前記移行データ・アクセス・パターンの
前記検出が、第1のカウント値のオーバフローを検出す
ることを含み、前記第1のカウント値が、データの移行
が検出されるたびに増分されることを特徴とする請求項
3に記載の方法。 - 【請求項5】 前記第1のカウント値が、前記コヒーレ
ンシ単位のデータの移行が検出されるたびに増分される
ことを特徴とする請求項4に記載の方法。 - 【請求項6】 前記第1のカウント値が、前記コヒーレ
ンシ単位に関連付けられるように前記ディレクトリに記
憶され、前記第1のカウント値が、前記状態が前記第2
の値を維持している場合に増分されることを特徴とする
請求項5に記載の方法。 - 【請求項7】 第2のカウント値のオーバフロー時に前
記状態を前記第2の値に設定することを含み、前記第2
のカウント値が、前記状態が前記第1の値を維持してい
る間に前記コヒーレンシ単位の前記データの移行が検出
されるたびに増分されることを特徴とする請求項6に記
載の方法。 - 【請求項8】 処理ノードにコヒーレンシ単位を与える
方法であって、 前記コヒーレンシ単位に対応し、前記状態自体が第1の
値を維持している場合に移行データ・アクセス・パター
ンを示し、前記状態自体が第2の値を維持している場合
に非移行データ・アクセス・パターンを示す状態を、前
記コヒーレンシ単位のホーム・ノードにあるディレクト
リ内に記憶することと、 前記状態が前記第1の値を維持している場合に、前記処
理ノードからの読取りコヒーレンシ要求に応答して、前
記コヒーレンシ単位を読取り/書込みアクセス権と共に
前記処理ノードに与えることとを含み、 前記状態が、前記ディレクトリ内にのみ記憶されること
を特徴とする方法。 - 【請求項9】 さらに、前記状態が前記第2の値を維持
している場合に、前記処理ノードからの読取りコヒーレ
ンシ要求に応答して、前記コヒーレンシ単位を読取りア
クセス権と共に前記処理ノードに与えることとを含むこ
とを特徴とする請求項8に記載の方法。 - 【請求項10】 多重処理コンピュータ・システムにお
いて処理ノードにコヒーレンシ単位を与える方法であっ
て、 前記コヒーレンシ単位に関して移行データ・アクセス・
パターンが検出された場合に第1の値を維持し、非移行
データ・アクセス・パターンが検出された場合に第2の
値を維持する、前記コヒーレンシ単位に関するアクセス
・パターン状態を記憶するように構成されたディレクト
リと、 前記ディレクトリに結合され、コヒーレンシ読取り要求
を受け取るように結合され、前記アクセス・パターン状
態が前記第1の値を維持している場合に、前記読取りコ
ヒーレンシ要求の発送側に前記コヒーレンシ単位への読
取り/書込みアクセス権を受け取らせる前記第1のコヒ
ーレンシ・デマンドを生成するように構成され、前記ア
クセス・パターン状態が前記第2の値を維持している場
合に、前記発送側に前記コヒーレンシ単位への読取り専
用アクセス権を受け取らせる前記第2のコヒーレンシ・
デマンドを生成するように構成された、ホーム・エージ
ェントとを備えることを特徴とする装置。 - 【請求項11】 前記第1のコヒーレンシ・デマンド
が、リード・ツー・オウン・デマンドを含むことを特徴
とする請求項10に記載の装置。 - 【請求項12】 前記第2のコヒーレンシ・デマンド
が、リード・ツー・シェア・デマンドを含むことを特徴
とする請求項11に記載の装置。 - 【請求項13】 前記読取りコヒーレンシ要求が、リー
ド・ツー・シェア要求を含むことを特徴とする請求項1
2に記載の装置。 - 【請求項14】 前記ディレクトリがさらに、第1のカ
ウント値を記憶するように構成され、前記ホーム・エー
ジェントが、前記アクセス・パターン状態が前記第2の
値を維持しており前記コヒーレンシ単位に関してデータ
の移行が検出された場合に前記第1のカウント値を増分
するように構成されることを特徴とする請求項10に記
載の装置。 - 【請求項15】 前記ホーム・エージェントがさらに、
前記第1のカウント値のオーバフロー時に前記アクセス
・パターン状態を前記第1の値に設定するように構成さ
れることを特徴とする請求項14に記載の装置。 - 【請求項16】 前記ディレクトリがさらに、第2のカ
ウント値を記憶するように構成され、前記ホーム・エー
ジェントが、前記アクセス・パターン状態が前記第1の
値を維持しており前記データの移行が検出された場合に
前記第2のカウント値を増分するように構成されること
を特徴とする請求項15に記載の装置。 - 【請求項17】 前記ホーム・エージェントがさらに、
前記第2のカウント値のオーバフロー時に前記アクセス
・パターン状態を前記第2の値に設定するように構成さ
れることを特徴とする請求項16に記載の装置。 - 【請求項18】 コンピュータ・システムであって、 コヒーレンシ読取り要求を搬送するように構成された第
1の処理ノードと、 前記第1の処理ノードから前記コヒーレンシ読取り要求
を受け取るように結合され、前記コヒーレンシ読取り要
求の影響を受けるコヒーレンシ単位に対応するデータ・
アクセス・パターン状態を記憶するように構成されたデ
ィレクトリを備え、前記コヒーレンシ読取り要求および
前記データ・アクセス・パターン状態に応答してコヒー
レンシ・デマンドを発行するように構成された、第2の
処理ノードと、 前記第2の処理ノードから前記コヒーレンシ・デマンド
を受け取るように結合され、前記第1の処理ノードへ前
記コヒーレンシ単位を搬送するように構成され、さら
に、前記コヒーレンシ単位へのアクセス権の表示を前記
第1の処理ノードに与えるように構成された、第3の処
理ノードとを備えることを特徴とするコンピュータ・シ
ステム。 - 【請求項19】 前記表示が、前記データ・アクセス・
パターン状態が前記コヒーレンシ単位に対する移行デー
タ・アクセスを示している場合に読取り/書込みアクセ
スを示すことを特徴とする請求項18に記載のコンピュ
ータ・システム。 - 【請求項20】 前記表示が、前記データ・アクセス・
パターン状態が前記コヒーレンシ単位に対する非移行デ
ータ・アクセスを示している場合に読取り専用アクセス
を示すことを特徴とする請求項19に記載のコンピュー
タ・システム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US08/674330 | 1996-07-01 | ||
| US08/674,330 US5734922A (en) | 1996-07-01 | 1996-07-01 | Multiprocessing system configured to detect and efficiently provide for migratory data access patterns |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JPH10143483A true JPH10143483A (ja) | 1998-05-29 |
Family
ID=24706184
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP9208225A Pending JPH10143483A (ja) | 1996-07-01 | 1997-06-30 | ミグラトリ・データ・アクセス・パターンを検出し、効果的に提供するように構成されたマルチプロセスシステム |
Country Status (4)
| Country | Link |
|---|---|
| US (1) | US5734922A (ja) |
| EP (1) | EP0817071B9 (ja) |
| JP (1) | JPH10143483A (ja) |
| DE (1) | DE69724880D1 (ja) |
Cited By (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110055179A (ko) * | 2009-11-19 | 2011-05-25 | 삼성전자주식회사 | 다중 프로세서 및 그것의 캐시 일관성 관리 장치 및 방법 |
Families Citing this family (43)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5968152A (en) * | 1996-04-10 | 1999-10-19 | Apple Computer, Inc. | Method and apparatus for extending key space in a plug and play ROM |
| US6009427A (en) * | 1996-08-02 | 1999-12-28 | Hewlett Packard Company | Method and apparatus for distributed control of a database |
| US6006238A (en) * | 1997-01-31 | 1999-12-21 | Network Computing Devices, Inc. | Method and apparatus for migrating/shadowing data between a server and its clients |
| US6029204A (en) * | 1997-03-13 | 2000-02-22 | International Business Machines Corporation | Precise synchronization mechanism for SMP system buses using tagged snoop operations to avoid retries |
| US6073225A (en) * | 1997-06-24 | 2000-06-06 | Intel Corporation | Method and apparatus for monitoring bus transactions based on cycle type and memory address range |
| US6332165B1 (en) * | 1997-09-05 | 2001-12-18 | Sun Microsystems, Inc. | Multiprocessor computer system employing a mechanism for routing communication traffic through a cluster node having a slice of memory directed for pass through transactions |
| US6052760A (en) * | 1997-11-05 | 2000-04-18 | Unisys Corporation | Computer system including plural caches and utilizing access history or patterns to determine data ownership for efficient handling of software locks |
| US6298419B1 (en) * | 1998-03-26 | 2001-10-02 | Compaq Computer Corporation | Protocol for software distributed shared memory with memory scaling |
| US6067611A (en) | 1998-06-30 | 2000-05-23 | International Business Machines Corporation | Non-uniform memory access (NUMA) data processing system that buffers potential third node transactions to decrease communication latency |
| US6324620B1 (en) * | 1998-07-23 | 2001-11-27 | International Business Machines Corporation | Dynamic DASD data management and partitioning based on access frequency utilization and capacity |
| US6226716B1 (en) * | 1998-12-22 | 2001-05-01 | Unisys Corporation | Test driver for use in validating a circuit design |
| US6374331B1 (en) * | 1998-12-30 | 2002-04-16 | Hewlett-Packard Company | Distributed directory cache coherence multi-processor computer architecture |
| US6839739B2 (en) * | 1999-02-09 | 2005-01-04 | Hewlett-Packard Development Company, L.P. | Computer architecture with caching of history counters for dynamic page placement |
| FR2792745B1 (fr) * | 1999-04-26 | 2001-06-15 | Bull Sa | Architecture d'interconnexion modulaire pour machine multiprocesseur extensible, mettant en oeuvre une hierarchie de bus virtuelle a plusieurs niveaux et la meme brique de base pour tous les niveaux |
| US6651157B1 (en) * | 1999-10-15 | 2003-11-18 | Silicon Graphics, Inc. | Multi-processor system and method of accessing data therein |
| US6557048B1 (en) * | 1999-11-01 | 2003-04-29 | Advanced Micro Devices, Inc. | Computer system implementing a system and method for ordering input/output (IO) memory operations within a coherent portion thereof |
| US6848003B1 (en) | 1999-11-09 | 2005-01-25 | International Business Machines Corporation | Multi-node data processing system and communication protocol that route write data utilizing a destination ID obtained from a combined response |
| US6519649B1 (en) | 1999-11-09 | 2003-02-11 | International Business Machines Corporation | Multi-node data processing system and communication protocol having a partial combined response |
| US6671712B1 (en) * | 1999-11-09 | 2003-12-30 | International Business Machines Corporation | Multi-node data processing system having a non-hierarchical interconnect architecture |
| US6519665B1 (en) | 1999-11-09 | 2003-02-11 | International Business Machines Corporation | Multi-node data processing system and communication protocol in which a stomp signal is propagated to cancel a prior request |
| US6591307B1 (en) * | 1999-11-09 | 2003-07-08 | International Business Machines Corporation | Multi-node data processing system and method of queue management in which a queued operation is speculatively cancelled in response to a partial combined response |
| US6826619B1 (en) | 2000-08-21 | 2004-11-30 | Intel Corporation | Method and apparatus for preventing starvation in a multi-node architecture |
| US6487643B1 (en) | 2000-09-29 | 2002-11-26 | Intel Corporation | Method and apparatus for preventing starvation in a multi-node architecture |
| US6772298B2 (en) | 2000-12-20 | 2004-08-03 | Intel Corporation | Method and apparatus for invalidating a cache line without data return in a multi-node architecture |
| US7234029B2 (en) * | 2000-12-28 | 2007-06-19 | Intel Corporation | Method and apparatus for reducing memory latency in a cache coherent multi-node architecture |
| US6791412B2 (en) * | 2000-12-28 | 2004-09-14 | Intel Corporation | Differential amplifier output stage |
| US6721918B2 (en) | 2000-12-29 | 2004-04-13 | Intel Corporation | Method and apparatus for encoding a bus to minimize simultaneous switching outputs effect |
| US20020087775A1 (en) * | 2000-12-29 | 2002-07-04 | Looi Lily P. | Apparatus and method for interrupt delivery |
| US20020087766A1 (en) * | 2000-12-29 | 2002-07-04 | Akhilesh Kumar | Method and apparatus to implement a locked-bus transaction |
| US6721813B2 (en) * | 2001-01-30 | 2004-04-13 | Advanced Micro Devices, Inc. | Computer system implementing a system and method for tracking the progress of posted write transactions |
| US6971098B2 (en) | 2001-06-27 | 2005-11-29 | Intel Corporation | Method and apparatus for managing transaction requests in a multi-node architecture |
| US6865695B2 (en) * | 2001-07-26 | 2005-03-08 | International Business Machines Corpoation | Robust system bus recovery |
| US8185602B2 (en) | 2002-11-05 | 2012-05-22 | Newisys, Inc. | Transaction processing using multiple protocol engines in systems having multiple multi-processor clusters |
| US7917646B2 (en) * | 2002-12-19 | 2011-03-29 | Intel Corporation | Speculative distributed conflict resolution for a cache coherency protocol |
| GB2416416B (en) * | 2003-04-11 | 2006-11-22 | Sun Microsystems Inc | Multi-node computer system implementing global access state dependent transactions |
| US7185314B2 (en) * | 2003-05-30 | 2007-02-27 | International Business Machines Corporation | Adaptive mechanism for optimally accessing data based upon data access characteristics |
| US7124143B2 (en) * | 2004-05-10 | 2006-10-17 | Hitachi, Ltd. | Data migration in storage system |
| JP4498867B2 (ja) * | 2004-09-16 | 2010-07-07 | 株式会社日立製作所 | データ保存管理方法およびデータライフサイクルマネージメントシステム |
| US7386684B2 (en) * | 2005-03-29 | 2008-06-10 | International Business Machines Corporation | Method and apparatus for detecting a cache wrap condition |
| US8145851B2 (en) | 2005-09-07 | 2012-03-27 | Sony Corporation | Integrated device |
| US7984244B2 (en) * | 2007-12-28 | 2011-07-19 | Intel Corporation | Method and apparatus for supporting scalable coherence on many-core products through restricted exposure |
| CN116662224A (zh) * | 2022-02-17 | 2023-08-29 | 华为技术有限公司 | 内存访问的方法、装置、存储介质及计算机程序产品 |
| CN117194323B (zh) * | 2023-09-06 | 2026-04-17 | 北京陌陌信息技术有限公司 | 分布式存储系统的管理方法、装置和元数据服务器 |
Family Cites Families (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH0625984B2 (ja) * | 1990-02-20 | 1994-04-06 | インターナシヨナル・ビジネス・マシーンズ・コーポレーシヨン | マルチプロセツサ・システム |
| US5537574A (en) * | 1990-12-14 | 1996-07-16 | International Business Machines Corporation | Sysplex shared data coherency method |
| US5544345A (en) * | 1993-11-08 | 1996-08-06 | International Business Machines Corporation | Coherence controls for store-multiple shared data coordinated by cache directory entries in a shared electronic storage |
| US5560027A (en) * | 1993-12-15 | 1996-09-24 | Convex Computer Corporation | Scalable parallel processing systems wherein each hypernode has plural processing modules interconnected by crossbar and each processing module has SCI circuitry for forming multi-dimensional network with other hypernodes |
-
1996
- 1996-07-01 US US08/674,330 patent/US5734922A/en not_active Expired - Lifetime
-
1997
- 1997-06-27 EP EP97304615A patent/EP0817071B9/en not_active Expired - Lifetime
- 1997-06-27 DE DE69724880T patent/DE69724880D1/de not_active Expired - Lifetime
- 1997-06-30 JP JP9208225A patent/JPH10143483A/ja active Pending
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20110055179A (ko) * | 2009-11-19 | 2011-05-25 | 삼성전자주식회사 | 다중 프로세서 및 그것의 캐시 일관성 관리 장치 및 방법 |
| JP2011108233A (ja) * | 2009-11-19 | 2011-06-02 | Samsung Electronics Co Ltd | 多重プロセッサ及びそのキャッシュ一貫性管理装置及び方法 |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0817071A3 (en) | 1998-08-05 |
| US5734922A (en) | 1998-03-31 |
| EP0817071B9 (en) | 2004-08-11 |
| DE69724880D1 (de) | 2003-10-23 |
| EP0817071A2 (en) | 1998-01-07 |
| EP0817071B1 (en) | 2003-09-17 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH10143483A (ja) | ミグラトリ・データ・アクセス・パターンを検出し、効果的に提供するように構成されたマルチプロセスシステム | |
| JPH10143482A (ja) | エフィシェントな書込み動作を実行するマルチプロセッサ・システム | |
| JP3987162B2 (ja) | 読取り−共有トランザクションのための強化ブロッキング・メカニズムを含むマルチプロセス・システム | |
| JPH10340227A (ja) | ローカル・グローバル・アドレス・スペース及びマルチアクセス・モードを用いたマルチプロセッサ・コンピュータ・システム | |
| JPH10187470A (ja) | スピンロック動作を最適化する装置を含むマルチプロセス・システム | |
| JPH10134014A (ja) | 3ホップ通信プロトコルを用いたマルチプロセス・システム | |
| JPH10143476A (ja) | プリフェッチ動作を開始するソフトウエアを実行するマルチプロセス・システム | |
| JPH10171710A (ja) | 効果的なブロック・コピー動作を実行するマルチプロセス・システム | |
| JPH10214230A (ja) | 応答カウントを含むコヒーレンシー・プロトコルを採用したマルチプロセッサ・システム | |
| JPH10149342A (ja) | プリフェッチ動作を実行するマルチプロセス・システム | |
| JPH10187645A (ja) | プロセス・ノードの多数のサブノード内にコヒーレンス状態で格納するように構成されたマルチプロセス・システム | |
| US6141692A (en) | Directory-based, shared-memory, scaleable multiprocessor computer system having deadlock-free transaction flow sans flow control protocol | |
| JPH10133917A (ja) | コヒーレンシー関連エラー・ロッジング能力を有するマルチプロセス・システム | |
| JPH10116253A (ja) | 同期動作を実行するマルチプロセス・システム | |
| JP2001515244A (ja) | スケーリング可能な共用メモリ・マルチプロセッサ・システム | |
| US20050010615A1 (en) | Multi-node computer system implementing memory-correctable speculative proxy transactions | |
| US20050013294A1 (en) | Multi-node computer system with active devices employing promise arrays for outstanding transactions |