JPH02202636A - フォールトトレラントな能力を備えたコンピュータ - Google Patents
フォールトトレラントな能力を備えたコンピュータInfo
- Publication number
- JPH02202636A JPH02202636A JP1322461A JP32246189A JPH02202636A JP H02202636 A JPH02202636 A JP H02202636A JP 1322461 A JP1322461 A JP 1322461A JP 32246189 A JP32246189 A JP 32246189A JP H02202636 A JPH02202636 A JP H02202636A
- Authority
- JP
- Japan
- Prior art keywords
- memory
- cpus
- input
- cpu
- output
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/38—Concurrent instruction execution, e.g. pipeline or look ahead
- G06F9/3861—Recovery, e.g. branch miss-prediction, exception handling
- G06F9/3863—Recovery, e.g. branch miss-prediction, exception handling using multiple copies of the architectural state, e.g. shadow registers
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0706—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment
- G06F11/0721—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment within a central processing unit [CPU]
- G06F11/0724—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation the processing taking place on a specific hardware platform or in a specific software environment within a central processing unit [CPU] in a multiprocessor or a multi-core unit
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1629—Error detection by comparing the output of redundant processing systems
- G06F11/1641—Error detection by comparing the output of redundant processing systems where the comparison is not performed by the redundant processing components
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1658—Data re-synchronization of a redundant component, or initial sync of replacement, additional or spare unit
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1666—Error detection or correction of the data by redundancy in hardware where the redundant component is memory or memory area
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1675—Temporal synchronisation or re-synchronisation of redundant processing components
- G06F11/1683—Temporal synchronisation or re-synchronisation of redundant processing components at instruction level
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1675—Temporal synchronisation or re-synchronisation of redundant processing components
- G06F11/1687—Temporal synchronisation or re-synchronisation of redundant processing components at event level, e.g. by interrupt or result of polling
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1675—Temporal synchronisation or re-synchronisation of redundant processing components
- G06F11/1691—Temporal synchronisation or re-synchronisation of redundant processing components using a quantum
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/18—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/18—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits
- G06F11/183—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits by voting, the voting not being performed by the redundant components
- G06F11/184—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits by voting, the voting not being performed by the redundant components where the redundant components implement processing functionality
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/18—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits
- G06F11/183—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits by voting, the voting not being performed by the redundant components
- G06F11/184—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits by voting, the voting not being performed by the redundant components where the redundant components implement processing functionality
- G06F11/185—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits by voting, the voting not being performed by the redundant components where the redundant components implement processing functionality and the voting is itself performed redundantly
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2017—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements where memory access, memory control or I/O control functionality is redundant
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/38—Concurrent instruction execution, e.g. pipeline or look ahead
- G06F9/3824—Operand accessing
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/38—Concurrent instruction execution, e.g. pipeline or look ahead
- G06F9/3836—Instruction issuing, e.g. dynamic instruction scheduling or out of order instruction execution
- G06F9/3851—Instruction issuing, e.g. dynamic instruction scheduling or out of order instruction execution from multiple instruction streams, e.g. multistreaming
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/30—Arrangements for executing machine instructions, e.g. instruction decode
- G06F9/38—Concurrent instruction execution, e.g. pipeline or look ahead
- G06F9/3885—Concurrent instruction execution, e.g. pipeline or look ahead using a plurality of independent parallel functional units
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/0703—Error or fault processing not based on redundancy, i.e. by taking additional measures to deal with the error or fault not making use of redundancy in operation, in hardware, or in data representation
- G06F11/0751—Error or fault detection not based on redundancy
- G06F11/0754—Error or fault detection not based on redundancy by exceeding limits
- G06F11/0757—Error or fault detection not based on redundancy by exceeding limits by exceeding a time limit, i.e. time-out, e.g. watchdogs
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/08—Error detection or correction by redundancy in data representation, e.g. by using checking codes
- G06F11/10—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's
- G06F11/1008—Adding special bits or symbols to the coded information, e.g. parity check, casting out 9's or 11's in individual solid state devices
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operations
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1405—Saving, restoring, recovering or retrying at machine instruction level
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/14—Error detection or correction of the data by redundancy in operations
- G06F11/1402—Saving, restoring, recovering or retrying
- G06F11/1415—Saving, restoring, recovering or retrying at system level
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/1675—Temporal synchronisation or re-synchronisation of redundant processing components
- G06F11/1679—Temporal synchronisation or re-synchronisation of redundant processing components at clock signal level
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/18—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits
- G06F11/181—Eliminating the failing redundant component
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/18—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits
- G06F11/182—Error detection or correction of the data by redundancy in hardware using passive fault-masking of the redundant circuits based on mutual exchange of the output between redundant processing components
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F11/00—Error detection; Error correction; Monitoring
- G06F11/07—Responding to the occurrence of a fault, e.g. fault tolerance
- G06F11/16—Error detection or correction of the data by redundancy in hardware
- G06F11/20—Error detection or correction of the data by redundancy in hardware using active fault-masking, e.g. by switching out faulty elements or by switching in spare elements
- G06F11/2015—Redundant power supplies
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2201/00—Indexing scheme relating to error detection, to error correction, and to monitoring
- G06F2201/85—Active fault masking without idle spares
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11C—STATIC STORES
- G11C29/00—Checking stores for correct operation ; Subsequent repair; Testing stores during standby or offline operation
- G11C29/70—Masking faults in memories by using spares or by reconfiguring
- G11C29/74—Masking faults in memories by using spares or by reconfiguring using duplex memories, i.e. using dual copies
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Quality & Reliability (AREA)
- Software Systems (AREA)
- Multimedia (AREA)
- Hardware Redundancy (AREA)
- Multi Processors (AREA)
- Techniques For Improving Reliability Of Storages (AREA)
- Memory System (AREA)
- Memory System Of A Hierarchy Structure (AREA)
Abstract
(57)【要約】本公報は電子出願前の出願データであるた
め要約のデータは記録されません。
め要約のデータは記録されません。
Description
(産業上の利用分野)
この発明は、コンピュータシステムに関し、より詳細に
は、フォールトトレラント(faulL−tolera
nt)多重プロセッサシステムにおける■10(すなわ
ち入力/出力)プロセッサ制御に関する。 (従来の技術と発明が解決しようとする課題)高信頼性
のデジタル処理、冗長性を用いた様々なコンピュータア
ーキテクチャにおいて達成される。例えば、TMR(3
重・モジュラ・冗長性)システムは、同じ命令のストリ
ーム(流れ)を実行す企3個のCPUを、機能を重複す
る3個の分離した主メモリユニットと分離したI10装
置と共に使用できる。そのため、もし各タイプの要素の
中の1つが誤りをしても、システムは動作し続ける。他
のフォールトトレラントタイプのシステムが、カッラマ
ン等に対して発行されタンデム・コンピューターズ・イ
ンコーホレイテッドに対して譲渡された「多重プロセッ
サシステム」と題する米国特許第4.228.496号
に示される。 様々な方法が、冗長性システムにおいて装置を同期させ
るために使用されて来た。例えば、「多重プロセッサを
同期させるための方法と装置」と題するアール・ダブリ
ユウ・ホーストにより1987年11月9日に出願され
、同様にタンデム・コンピューターズ・インコーホレイ
テッドに譲渡された米国特許出願第118,503号に
おいて、「緩い」同期法が開示されているが、これは、
「フォールトトレラント計算のための中央処理装置」と
題されストラス・コンピュータ・インコーホレイテッド
に譲渡された米国特許第4.453.215号において
示されているような単独のクロックを用いたロック・ス
テップ同期を使用した他のシステムと対照的である。「
同期ボーティング(synchronization
voting) Jと呼ばれる技法がデビス(Davi
es)及びウェイカリ(lfakarly)著[冗長性
システムにおける同期とマツチングJ (IEEE)
ランザクションズ・オン・コンピュータ(IEEE T
ransactions on computer)
、 1978年6月号531−539ページ)に開示さ
れている。 冗長性のフォールトトレラントシステムにおける割り込
み同期の方法が、ヨンディ(Yondea)ほか著[緩
く同期したTMRシステムのための割り込み取り扱いの
実行」 (フォールトトレラント計算についての第15
回年次シンポジウムのクロシーディング(1985年6
月’り246−251ページ)に開示されている。「フ
ォールトトレラントリアルタイムクロック」と題する米
国特許第4゜644.498号は、TMRコンピュータ
システムにおける使用のための3重モジュラ冗長性クロ
ック構成を開示している。「多重に冗長なコンピュータ
のフレーム同期」と題する米国特許第4,733.35
3号は、同期フレームを実行することにより周期的に同
期される別々のクロックで動作するCPUを用いる同期
法を開示している。 25MH2で動作するインテル80386やモトローラ
68030のような高性能マイクロプロセッサ装置が、
高速クロックと大きな能力を備えて使用できるようにな
った。また、メモリ、ディスクドライブなどのコンピュ
ータシステムの他の要素もこれに対応してより安価にか
つより大きな能力を備えるようになった。このため、高
信頼性のプロセッサが同じ傾向に追随することが要求さ
れている。さらに、コンピュータ産業におけるいくつか
のオペレーティングシステムでの標準化は、アプリケー
ションソフトウェアの利用性を大きく拡大した。そのた
め、同様な要求が高信頼性システムの分野でもなされ、
すなわち、標準的オペレーティングシステムを利用でき
る必要がある。 したがって、この発明の主な目的は、特にフォールトト
レラントタイプの改良された高信頼性コンピユータシス
テムを提供することである。この発明の他の目的は、改
良された冗長性でフォールトトレラントタイプのコンピ
ュータシステムであって、高性能と低コストが両立する
ものを提供することである。特に、改良されたシステム
が、高度に冗長なシステムにおいて通常生じる実行負荷
を避けることが好ましい。この発明の別の目的は、速度
とソフトウェアの両立性とともに信頼性について測定さ
れる場合に、性能が改良されている一方、コストも他の
より低い性能のコンピュータシステムと同じぐらいであ
る高信頼性コンピユータシステムを提供することである
。この発明のさらに他の目的は、デマンドページングを
用いた仮想メモリ管理を使用し、保護された(上位から
の監視、すなわち「核(カーネル: kernel)
J )モードを備えたオペレーティングシステムを実行
できる高信頼性コンピユータシステムを提供することで
ある。とくに、オペレーティングシステムは、多重プロ
セスの実行が、すべて高レベルの性能で可能でなければ
ならない。この発明のさらに別の目的は、故障システム
部品を検出できオフラインでそれらを交換でき、システ
ムをダウンさせることなく補修されたシステム部品を再
統合できる高信頼性冗長性コンピュータシステムを提供
することである。 (課題を解決するための手段、作用及び発明の効果) この発明の一実施例によれば、コンピュータシステムは
、典型的には同じ命令ストリームを実行する3個の同一
のCPUを使用し、同じデータの複製を格納する2(!
lの同一の自己診断メモリモジュールを備える。したが
って、古典的TMRシステムにおけるような3個のCP
Uと3個のメモリよりはむしろ、3個のCPUと2個の
メモリの構成か使用される。3個のCPUによるメモリ
参照(a+emory reference)は、2個
のメモリの各の3個の別のボートに接続された3個のバ
スにより行われる。フォールトトレラント動作の実行負
荷を全CPU自身に課することを避けるため、また、フ
ォールトトレラントクロツタ動作の費用、複雑さ及びタ
イミングの問題を課することを避けるため、3個のCP
Uはそれぞれ、それ自身のために独立したクロックを別
々に備えるが、メモリ参照のようなイベント(even
t)を検出することにより、すべてのCPUが、同時に
機能を実行するまで他のCPUの前にある任意のCPU
をストールすることにより、緩く同期されている。割り
込みもまた、全CPUIこ同期され、全CPUが命令ス
トリームの同じ点で割り込みを実行することを保証する
。別々のCPU−メモリ・バスを介しての3個の非同期
のメモリ参照は、メモリ要求のときに各メモリモジュー
ルの3個の別々のポートでポートされるが、リードデー
タは、全CPUに戻されたときにポートされない。 2個のメモリは、共に、全CPUまたは全l10(すな
わち入力/出力)バスから受け取ったすべてのライト要
求を実行するので、両メモリは、最新に保たれる。しか
し、ただ1個のメモリモジュールは、リード要求に対応
して全CPUまたはI10バスに戻る。リードデータを
作る1個のメモリモジュールが「プライマリ」(「主」
)と呼ばれ、他方はバックアップである。従って、入っ
て来るデータは、ただ1つのソースからであり、ポート
されない。2個のメモリモジュールへのメモリ要求は、
ポート続行中は実行されるが、従って、リードデータは
、最後のCPUが要求を行った後で少し遅れて全CPU
に対し利用できる。これらのメモリモジュールのために
使用されるDRAMが単にリード動作を行いリフレッシ
ュするためにライトサイクルの大部分を使用するので、
ライトサイクルでさえも実質的に重複し得る。そこで、
ライトサイクルの最後の部分のためにストローブされな
いならば、リード動作は非破壊的でない。 従って、ライトサイクルは、最初のCPUが要求をする
と直ちに開始されるが、最後の要求が受信され、良好で
あるとポートされるまで完了しない。 ポートされないリードデータの戻りと重なったアクセス
の特徴は、高性能の7オ一ルトトレラント動作を、最小
の複雑さと費用で可能にする。 110機能は、2つの同一のI10バス(各バスはただ
1個のメモリモジュールと別々に接続される)を用いて
実行される。多数のI10プロセッサが2つのI10バ
スに接続され、I10装置は、複数の対のI10プロセ
ッサに接続されるが、ただ1個のI10プロセッサによ
ってアクセスされる。1個のメモリモジュールがプライ
マリとして表されるので、このモジュールのだめのただ
1個のI10バスが、全110プロセツサを制御する。 そして、メモリモジュールとIloとの間のトラフィッ
クは、ポート(vote)されない。全CPUは全I1
0プロセッサをメモリモジュールを介してアクセスでき
る。(ここで、各アクセスは、まさにメモリアクセスが
ポートされるようにポートされるa)しかし、全I10
プロセッサは、全メモリモジュールをアクセスできるだ
けであり、全CPUをアクセスできない。全110プロ
セツサは、全CPUに割り込みを送ることができるだけ
であり、この割り込みは、全CPtJに示される前にメ
モリモジュール内に集められる。こうして、I10装置
アクセスのための同期オーバヘッドは、全CPUにとっ
て重荷にならず、フォールトトレラント性が備えられる
。もしl#のI10プロセッサが誤ったならば、その対
の他方のI10プロセッサが、オペレーティングシステ
ムにより維持されるI10ページテーブル内のI10装
置に対して用いられるアドレスを単に変えるだけで、こ
のI10プロセッサのためのI10装置の制御を代わっ
て行うことができる。このように、■10装置のフォー
ルトトレラント性と再統合は、システムシャットダウン
なしに、そしてさらに、これらのI10バスにおけるボ
ーティングに伴うハードウェア費用と実行ペナルティな
しに可能である。 説明された実施例において使用されるメモリシステムは
、複数のレベルで階層的である。各CPUは、それ自身
のキャシュ(cache)を備え、本質的にCPUのク
ロック速度で動作する。そこで、各CPUは、他のCP
Uによりアクセスできないローカルメモリを備え、仮想
メモリ管理は、オペレーティングシステムの核と現在の
タスクのページを全3個のCPUのためのローカルメモ
リの中にあることを許可し、課されたボーティングまた
は同期のようなフォールトトレラント性のオーバヘッド
なしに高速でアクセス可能にする。次に、グローバルメ
モリとして呼ばれるメモリモジュールレベルがあり、こ
こで、ボーティングと同期化が行われ、アクセスタイム
の負荷が導入される。 しかし、グローバルメモリの速度は、ディスクアクセス
よりもずっと速い。従って、このレベルは、デマンドペ
ージングの第ルベルのためにディスクを使用するためよ
りはむしろ、最速のエリアに最も使用されるデータを保
つためのローカルメモリとの、ページのスワツピングの
ために使用される。 この発明の開示された実施例の1つの特徴は、システム
をシャットダウンすることなしにCPUモジュールやメ
モリモジュールのような故障部品を交換する能力である
。こうして、このシステムは、部品が故障し、取り換え
ねばならない場合でさえも、連続的な使用ができる。さ
らに、高レベルのフォールトトレラント性がより少ない
部品で達成できる。例えば、フォールトトレラントなり
ロック動作が必要でなく、3個でなく2個のメモリモジ
ュールだけが必要であり、ボーティング回路が最小にで
きる。このことは、故障する部品が少なく、信頼性が増
大したことを意味する。すなわち、部品がより少ないの
で、故障がより少なく、故障があるとき、システムをラ
ンさせたまま、その部品が分離され、システムシャット
ダウンなしに取り換えできる。 このシステムのCPUは、好ましくは、UNIX(登録
商標)のようなオペレーティングシステムが使用可能な
市販の高性能マイクロプロセッサチップを使用する。シ
ステムをフォールトトレラントにする部分は、オペレー
ティングシステムに対して透明であるか、またはオペレ
ーティングシステムに対して容易に適合できる。従って
、高性能なフォールトトレラントシステムは、−時的に
広く使用されるマルチタスクのオペレーティングシステ
ムとアプリケーションソフトウェアとの同等性を可能に
して提供される。 (以下余白) (実施例) 以下、添付の図面を参照して本発明の詳細な説明する。 第1図を参照して、本発明の特徴を用いたコンピュータ
システムは、一実施例において、論理プロセッサとして
動作する3個の同一のプロセッサ1112及び13(以
下、それぞれCPU−A。 CPU−B及びCPU−Cという。)を備え、これら3
個は、典型的には同じ命令ストリームを実行する。3個
のプロセッサが同じ命令ストリームを実行しない唯一の
時間は、システム起動自己テスト、診断などの動作であ
る。3個のプロセッサは、2個のメモリモジュール14
と15(メモリ#11メモリ#2と呼ばれる)と接続さ
れ、各メモリは、同じアドレス空間に同一のデータを格
納する。好ましい実施例においては、各プロセッサti
、i2及び13は、その固有のローカルメモリ16を含
み、このメモリを含むプロセッサによってのみアクセス
可能である。 各プロセッサ11,12及び13は、各メモリモジュー
ル14と15と同様に、それ自身の固有の別々のクロッ
ク発振器17を備える。この実施例において、全プロセ
ッサは、「ロックステップ」でランされず、その代わり
、上述の米国出願第118.503号で明らかにされた
ような方法により、すなわち、これらのCPUを同期化
させる外部メモリ参照のようなイベントを使用して、緩
く同期される。外部の割り込みは、各プロセッサから他
の2個のプロセッサへ割り込み要求とスティタスを結合
するための1組のバスを使用する技法によって、3個の
CPUの間で同期化される。各プロセッサCPLJ−A
%CPU−B及びCPU−Cは、それ自身と他の2例と
の3個の割り込み要求に対して応答的であり、命令スト
リームの同じ点においてこれらのCPUに割り込み要求
を示す。 メモリモジュール14と15は、メモリ参照をポートし
、全3個のCPUが同じ要求(故障に対する準備ととも
に)を行ったときにのみ、メモリ参照が進むことを許可
する。このように、これらのプロセッサは、外部のイベ
ント(メモリ参照)の時に同期化され、その結果、プロ
セッサは、典型的には、同じ命令ストリームを、同じシ
ーケンスで、ただし必ずしも同期イベントの間の時間に
おける平行した時間サイクルの間ではないが、実行する
。さらに、外部の割り込みは、同期化されて、各CPU
の命令ストリームにおける同一の点で実行される。 CP U−Aプロセッサ11は、バス21を介して、メ
モリ#lモジュール14とメモリ#2モジュール15に
接続される。同様に、CPU−Bプロセッf12は、バ
ス22を介して、メモリ#1モジュール14とメモリ#
2モジュール15に接続される。そして、CPU−Cプ
ロセッサ13は、バス23を介して、メモリモジュール
14.15に接続される。これらのバス21.22.2
3は、32ビット多重アドレス/データバス、コマンド
バス、及びアドレスとデータのストローブのための制御
ラインを含む。これらのCPUは、これらのバス21,
22及び23の制御を備え、そのため、アービトレーシ
ョン(arbitration)またはバス要求やバス
使用承認(bus grant)はない。 各メモリモジュール14と15は、それぞれの入出力バ
ス24又は25に別々に接続され、各バスは、2個(ま
たはそれ以上)の入出カプロセッサに接続される。この
システムは、個々のシステム構成のために必要なI10
装置を収容するために必要な多数のI10プロセッサを
備えることができる。各入出カプロセッサ26.27は
、バス28に接続される。バス28は、vMEバス(登
録商標)のような標準の構成であってもよい。そして、
各バス28は、標準のI10コントローラ30とのイン
ターフェースのための1個以上のバスインター7エース
モジユール(BIM)29に接続されている。各バスイ
ンター7エースモジユール29は、2個のバス28に接
続され、従って、1個のI10プロセッサ26または2
7の故障、または1個のバスチャンネル28の故障は、
許容される。I10プロセッサ26と27を、CPU1
112及び13によってメモリモジュール14と15を
通してアドレス指定することができ、I10プロセッサ
26.27はメモリモジュールを介して全CPUに割り
込み信号を出力することができる。ディスクドライブ、
CRTスクリーンとキーボードを備えたターミナル、及
びネットワークアダプタは、I10コントローラ3oに
より作動される典型的な周辺装置である。I10コント
ローラ30は、データブロックのような転送のためにメ
モリモジュール14と15に対しDMAタイプの参照を
することができる。各I10プロセッサ26.27など
は、バス要求、バス使用承認等のために各メモリモジュ
ールに直接に接続された個々のラインを備える。これら
の点から点への接続ラインは、「ラジアル」と呼ばれ、
ラジアルライン31のグループに含まれる。 システムスティタスバス32は、各素子のスティタス情
報を与える目的のために、上記各cPU11.12.1
3、各メモリモジュール14.15、各110プロセツ
サ26.27に、個々に接続される。このスティタスバ
スは、システムに現在存在し適当に動作しているCPU
、メモリモジュール及びI10プロセッサについての情
報を提供する。 3個のCPUと2個のメモリモジュールヲ接続する肯定
応答/スティタスバス33は、メモリ要求が全CPUに
よって行われたときにモジュール14.15が全CPU
に肯定応答信号を送信する個々のラインを含む。同時に
、スティタスフィールドが、コマンドのスティタスとコ
マンドが正しく実行されたか否かとについて報告するた
めに送信される。メモリモジュールは、グローバルメモ
リから読み出されたデータまたは書き込まれたデータの
パリティを検査するだけでなく、メモリモジュールを介
してI10バス24と25へまたはバス24.25から
のデータのパリティを検査し、またコマンドの正当性を
検査する。これらの検査がCPUl1112及び13に
報告されるのは、バス33のスティタスラインを介して
であり、もし誤りが発生すると、故障ルーチンを、故障
部品を分離するためにエンターすることができる。 2個のメモリモジュール14と15がグローバルメモリ
に同じデータを格納し、すべてのメモリ参照を2重に行
うように動作しているが、任意の与えられた時間では、
1個のメモリモジュールがプライマリと指定され、他方
は、バックアップと指定される。メモリライト動作は、
両メモリモジュールにより実行されるので、両方とも使
用可能状態(current)であり、またメモリリー
ド動作も両方により実行される。しかし、プライマリの
メモリモジュールのみが、バス21,22及び23に実
際にリードデータをロードし、そして、プライマリのメ
モリモジュールのみがマルチマスタバス24と25のた
めのアービトレーションを制御する。プライマリのメモ
リモジュールとバックアップのメモリモジュールに同じ
動作の実行を続けるために、バス34がプライマリから
バックアップへ制御情報を伝送する。どちらかのメモリ
モジュールが、プートアップにおいてプライマリの役割
を取り、この役割は、ソフトウェアの制御の下に動作の
間に交換できる。当該役割は、選択されたエラー条件が
全CPUまたはシステムの他のエラ一応答性部分によっ
て検出されるときに、交換できる。 全CPUにおいて発生されたある割り込みは、また、メ
モリモジュール14と15によってポートされる。全C
PUがそのような割り込み状態となったとき(及びスト
ールされないとき)、全CPUは割り込みバス35の個
々のラインによって全メモリモジュールに割り込み要求
を出力する。 そこで、3個のCPUからの3個の割り込み要求をポー
トすることができる。すべての割り込みがポートされた
とき、メモリモジュールは、それぞれバス35を介して
3個のCPUにポートされた割り込み要求信号を送信す
る。この割り込みのボーティングは、また、全CPUの
動作についての検査のために機能する。3個のCPUは
、CPU間バス18を介してこのポートされた割り込み
をCPU割り込み信号に同期し、命令ストリームの共通
の点で全プロセッサに割り込みを示す。この割り込み同
期は、とのCPUもストールせずに達成される。 <cpuモジュール〉 第2図を参照して、1個のプロセッサ11,12又は1
3がさらに詳細に示される。全3個のCPUモジュール
は、好ましい実施例では、同じ構成であり、従って、C
PU−Aのみがここで説明される。価格を競争力のある
範囲内に保つために、そして、既に発展されているソフ
トウェアとオペレーティングシステムへのアクセスをた
だちに提供するために、好ましくは、市販のマイクロプ
ロセッサチップが使用され、多数のデバイスの中の任意
の1個が選択できる。RISC(縮小命令セット)アー
キテクチャは、後述する緩い同期を実行することにおい
て利点がある。しかし、モトローラ68030デバイス
やインテル80386デバイス(20MHzと25MH
zで使用できる)などのより通常的なCl5C(複雑な
命令セット)マイクロプロセッサが使用できる。高速3
2ビツトRISCマイクロプロセツサデバイスは、3個
の基本的なタイプで複数の製造者から入手できる。 すなわち、モトローラは、部品番号88000としてデ
バイスを製造し、MIPSコンピュータ・システムズ・
インコーホレイテッドなどは、MIPSタイプと呼ばれ
るチップセットを製造し、サン・マイクロシステムズは
、いわゆる5PARC(登録商標)タイプ(スケール可
能なプロセッサアーキテクチャ)を発表している。カリ
フォルニア州すンホセのサイプレス・セミコンダクタは
、例えば、部品番号CY7C601と呼ばれるマイクロ
プロセッサ(SPARC標準をサポートし、33MHz
のクロックを用い、20MIPSの(1秒当たり100
万命令)を与える)を製造し、富士通は、同様に5PA
RC標準をサポートするCMO3RISOマイクロプロ
セッサ(部品番号S−25)を製造している。 図示された実施例におけるCPUボードすなわちモジュ
ールは、−例として使用され、マイクロプロセッサチッ
プ40を用いる。このチップ40は、この場合MIPS
コンピュータ・システムズ・インコーホレイテッドによ
り設計されたR2000デバイスであり、また、インチ
グレイテッド・デバイス・テクノロジー・インコーホレ
イテッドによって製造される。このR2000デバイス
は、RISCアーキテクチャを用いた32ビツトプロセ
ツサであり、例えば、16−67MHzのクロックで1
2MIPsの高性能を示す。25MHzのクロックで2
0MIPSを示すR3000のようなこのデバイスのよ
り高速のバージョンを代わりに用いても良い。プロセッ
サ40はまた、論理アドレスから物理アドレスへの翻訳
をキャッシュするためのトランスレーションルックアサ
イドバッファを含むメモリ管理のために使用されるコプ
ロセッサを備える。プロセッサ40は、データバス、ア
ドレスバス、および制御バスを備えたローカルバスに接
続される。別々の命令とデータのキャシュメモリ44と
45が、このローカルバスに接続される。これらのキャ
シュは、それぞれ64にバイトサイズであり、プロセッ
サ40の1つのクロックサイクル内でアクセスされる。 もし追加の性能がこれらのタイプの計算のために必要な
らば、数値計算用すなわち浮動小数点コプロセッサ46
が、このローカルバスに接続される。この数値計算用プ
ロセッサデバイスも、MIPSコンピュータ・システム
ズ・インコーホレイテッドから部品番号R2010とし
て市販されている。ローカルバス41.42.43は、
ライトバッファ50とリードバッファ51を介して内部
バス構造に接続される。このライトバッファは、入手可
能なデバイス(部品番号R2020)であり、ライト動
作のためにライトバッファ50にデータとアドレスを格
納した後に、ライトが実行されている間にストールサイ
クルを実行しなければならないことよりはむしろ、プロ
セッサ40にラン(Run)サイクルを実行し続けさせ
るように機能する。 ライトバッファ50を通るバスに加え、プロセッサ40
がライトバッファ50をバイパスしてライト動作を実行
することを可能にするためのバスが設けられる。このバ
スは、ソフトウェアの選択の下で、プロセッサに同期の
ライト動作を行うことを可能にする。もしライトバッフ
ァバイパス52がイネーブルされ(ライトバッファ50
がイネーブルされず)、プロセッサがライト動作を実行
するならば、プロセッサは、ライト動作が完了するまで
ストール(−時停止)する。対照的に、ライトバッファ
がディスエーブルの状態でライト動作が実行されるとき
、データがライトバッファ50に書き込まれるので(ラ
イトバッファが満杯でないならば)、プロセッサはスト
ールしない。もしプロセッサ40がライト動作を実行す
るときにライトバッファがイネーブルされるならば、ラ
イトバッファ50は、バス43からの制御と同様に、バ
ス41からの出力データとバス42からのアドレスを捕
捉する。ライトバッファ50は、主メモリへのデータの
通過を待機する間に最大4個のそのようなデーターアド
レスセットを保持できる。 ライトバッフ7はプロセッサチップ40のクロック17
と同期して動作し、このため、プロセッサからバッファ
への転送は同期状態でかつプロセッサのマシンサイクル
速度で行われる。ライトバッファ50は、もし満杯であ
ってデータを収容できないならば、プロセッサに信号を
送信する。プロセッサ40によるリード動作は、フォー
ディープ・ライトバッファ50に含まれるアドレスに対
して検査され、そこで、もしメモリ16すなわちグロー
バルメモリに書き込まれるためにライトバッファで待機
しているデータに対してリード動作が試みられるならば
、リード動作は、ライト動作が完了するまでストールさ
れる。 ライトバッファ50とリードバッファ51は、データバ
ス53、アドレスバス54および制御バス55を備えた
内部バス構造に接続される。ローカルメモリ16は、こ
の内部バスによってアクセスされ、この内部バスに接続
されたバスインターフェース56は、システムバス21
(または他のCPUのためのバス22または23)をア
クセスするために使用される。この内部バスの別々のデ
ータバス53とアドレスバス54(ローカルバスのバス
41と42から得られる)は、システムバス21内の多
重化アドレス/データバス57に変換され、コマンドラ
インと制御ラインは、対応して、この外部バス内のコマ
ンドライン58と制御ライン59に変換される。 バスインターフェースユニット56は、また、メモリモ
ジュール14と15から肯定応答/スティタスライン3
3を受信する。これらのライン33において、別々のス
ティタスライン33−1または33−2は、モジュール
14及び15のそれぞれから接続され、その結果、両メ
モリジュールからの応答を、後述するように、複数のC
PUとグローバルメモリの間の転送(リードまたはライ
ト)の発生の場合に評価できる。 一実施例においては、ローカルメモリ16は、約8Mバ
イトのRAMからなり、プロセッサ40の約3個または
4個のマシンサイクル内でアクセスでき、このアクセス
は、このCPUのクロック17と同期している。これに
反し、モジュール14と15へのメモリアクセスタイム
は、ローカルメモリへのそれに比べて非常に長く、メモ
リモジュール14.15へのこのアクセスは、非同期で
あり、すべてのCPUが要求とボーティングとを行うこ
とを待機することにより課される同期のオーバーヘッド
をこうむる。比較のため、I10プロセッサ26.27
、及び29を介しての典型的な市販のディスクメモリへ
のアクセスは、ミリ秒で測定され、すなわち、モジュー
ル14と15へのアクセスよりもかなり遅い。こうして
、CPUチップ40によるメモリアクセスの階層構造が
ある。 最高は、命令キャシュ44とデータキャシュ45であり
、64にバイトのキャシュサイズと適当なフィルアルゴ
リズム(fill algorithm)を使用したと
きに多分95%のヒツト率を示す。最高の次は、ローカ
ルメモリ16であり、再び一時的仮想メモリ管理アルゴ
リズムを使用することにより、ローカルメモリのサイズ
が約8Mバイトである場合に、キャシュミスが発生し、
ローカルメモリにおけるヒツトが見いだされ、おそらく
95%のヒツト率が、メモリ参照に対して得られる。プ
ロセッサチップの観点からの正味の結果は、メモリ参照
Cl10参照でなく)のおそらく99%以上が同期し、
同じマシンサイクルまたは3個または4個のマシンサイ
クル内に起こることである。 ローカルメモリ16は、メモリコントローラ60によっ
て内部バスからアクセスされる。このメモリコントロー
ラ60は、アドレスバス54からのアドレスと制御バス
55からのアドレスストローブを受信し、例えば、もし
ローカルメモリ16が通常のように多重アドレス指定で
DRAMを使用するならば、別々の行と列のアドレスと
、RASとCASの制御を発生する。データは、データ
バス53を介してローカルメモリに書き込まれ、読み出
される。さらに、オペレーティングシステムによって使
用可能なので、NVRAMや高速FROMのような不揮
発性メモリ62と同様に、数個のローカルレジスタ61
が、内部バスによってアクセスされる。メモリのこの部
分のいくつかが電源投入のためにのみ使用され、いくつ
かがオペレーティングシステムによって使用され、キャ
シュ44内でほとんど連続的であり、他は、メモリマツ
プのキャシュでない部分内に有り得る。 外部割り込みは、第2図のCPUモジュールの割り込み
回路65から制御バス43または55でビンの中の1本
によってプロセッサ40に印加される。このタイプの割
り込みは、回路65でボートされるので、割り込みがプ
ロセッサ40によって実行される前に、全3個のCPU
が割り込みを示されるか否かが決定される。この目的の
ために、回路65は、他の2個のCPU12と13から
割り込み未決定(pend ing)入力を受信し、こ
の他の2個のCPUにライン67を介して割り込み未決
定信号を送信する。これらのラインは、3個のCPU1
1% 12及びI3をともに接続するバス18の一部で
ある。また、他のタイプの割り込み例えばCPUにより
発生された割り込みをボートするために、回路65は、
このCPUから両メモリモジュール14,15ヘバス3
5のライン68により割り込み要求信号を送信すること
ができ、そして、ライン69と70を介してメモリモジ
ュールから別々のボートされた割り込み信号を受信する
。両メモリモジュールは、行われるべき外部割り込みを
与える。1個の!10チャンネル28でのキーボードま
たはディスクドライブのような外部ソースにて発生され
た割り込みは、例えば、各CPUII、12又は13が
、後述されるように、命令ストリーム内の同じ点にある
まで、回路65からチップ40の割り込みビンに印加さ
れない。 プロセッサ40は別々のクロック発生器17によってク
ロックが供給されるので、周期的にプロセッサ40を同
期状態に戻すためのいくつかのメカニズムが必要である
。クロック発生器17が名目上同じ周波数でありこれら
のデバイスの許容誤差が約25 p p m (par
ts per m1llion)であったとしても、こ
れらのプロセッサは、周期的に同期に戻されないならば
、位相が多くのサイクルでずれてしまう可能性がある。 もちろん、外部割り込みが発生する毎に、全CPUは、
(割り込み同期メカニズムによって)その命令ストリー
ムの同じ点で割り込まれるという意味で、同期化される
。 しかし、これは、サイクル計数値を同期化させることを
援助しない。メモリモジュール14と15内のメモリ参
照をボートするメカニズムは、後述されるように全CP
Uをリアルタイムで同期状態にする。しかし、ある条件
は、長い周期においてメモリ参照が起こらないという結
果を生じ、そこで、別のメカニズムが、プロセッサ40
を同期に戻すためのストールサイクルを導入するために
使用される。サイクルカウンタ71は、ランサイクル(
ストールサイクルでなく)であるマシンサイクルを計数
するために、クロック17とプロセッサ40の制御ビン
に制御バス43を介して接続される。このカウンタ71
は、全CPUの間の最大の許容可能なドリフトが発生す
る周期(結晶発振子の特定の許容誤差を考慮して)を表
すように選択された最大計数値を有するカウントレジス
タを含む。このカウントレジスタがオーバーフローする
と、より遅いプロセッサが追い付くまで、より速いプロ
セッサをストールする動作が開始される。 このカウンタ71は、メモリモジュール14と15への
メモリ参照によって同期がなされるときはいつでもリセ
ットされる。また、す7レツシユカウンタ72は、後述
されるように、ローカルメモリ16でリフレッシュサイ
クルを実行するために使用される。さらに、カウンタ7
3は、カウンタ71のように、ランサイクルであってス
トールサイクルでないマシンサイクルを計数する。しか
し、このカウンタ73は、メモリ参照によってリセット
されない。カウンタ73は、以下に説明されるように、
割り込み同期のために使用され、この目的のために、割
り込み同期回路65に出力信号CC−4とCC−8を発
生する。 プロセッサ40は、RISC命令セットを備え、このセ
ットは、メモリからメモリへの命令をサポートしないが
、その代わり、メモリからレジスタへの命令またはレジ
スタからメモリへの命令(たとえばロードまたはストア
)をサポートする。ローカルメモリにしばしば使用され
るデータや現在実行中のコードを保持することは重要で
ある。従って、ブロック転送動作は、バスインターフェ
ース56に結合されたDMAステートマシン74により
なされる。プロセッサ40は、コマンドとして機能させ
るためにDMA回路74のレジスタにlワードを書き込
み、この回路74のレジスタにブロックのスタートアド
レスと長さを書き込む。 実施例では、DMA回路がブロック転送を引き継ぎ実行
する間に、マイクロプロセッサはストールをして、バス
53−55及び21によって必要なアドレス、コマンド
及びストローブを発生する。 このブロック転送を開始するためにプロセッサ40によ
って実行されるコマンドは、DMA回路74のレジスタ
からのリードであってもよい。UNIXオペレーティン
グシステムにおけるメモリ管理はデマンドページングを
当てにしているので、これらのブロック転送は、最もし
ばしばグローバルメモリとローカルメモリとI10トラ
フィックの間に動かされるページである。1ページは4
にバイトである。もちろん、バス21,22及び23は
、CPUとグローバルメモリの間の1ワードのリード転
送とライト転送をサポートする。参照されるブロック転
送は、ローカルメモリとグローバルのメモリの間でのみ
可能である。 くプロセッサ〉 第3図を参照して、実施例のR2000タイプまたはR
3000タイプのプロセッサ40がさらに詳細に示され
る。このデバイスは、32個の32ビツトの一般目的の
レジスタ76.32ビツトのALU77、Oビットから
64ビツトへのシフタ78、および32X32の多!!
/分割回路79を備える32ビツトのメインCPU75
を備える。 このCPUは、また、プロセッサバス構造81に接続さ
れ、このプロセッサバス構造81は、ローカルデータバ
ス41に接続され、データバス41を介してフェッチさ
れる命令を実行するための関連する制御ロジックを備え
た命令デコーダ82に接続される。32ビツトのローカ
ルアドレスバス42は、オンチップメモリ管理コプロセ
ッサ内のトランスレージ3ンルツタアサイドバツフア(
TLB)83を含む仮想メモリ管理装置によって駆動さ
れる。TLB83は、仮想アドレスバス84を介してマ
イクロプロセッサブロック75から受け取られた仮想ア
ドレスと比較されるべき64個のエントリを備える。バ
ス42の下位の16ビツトの部分85は、この仮想アド
レスバス84の下位部分によって駆動され、上位部分は
、もし仮想アドレスが物理的アドレスとして使用される
ならば、バス84からであり、あるいは、もし仮想アド
レス指定が使用され、ヒツトが起こるならば、出力86
を介してのTLB83からのタダエントリである。ロー
カルバスの制御ライン43は、パイプライン及びバス制
御回路87に接続され、内部バス構造81と制御ロジッ
ク82から駆動される。 プロセッサ40のマイクロプロセッサブロック75は、
RISCタイプであり、多くの命令が1マシンサイクル
で実行され、命令セットは、ALU動作に伴うメモリ参
照を含む複雑な命令を含むよりはむしろ、レジスタから
レジスタへの命令やロード/ストア命令を使用する。複
雑なアドレス指定スキーム(例えば、レジスタAIとレ
ジスタA2の内容の和であるアドレスのオペランドを、
レジスタBの内容によりアドレスされる主メモリの位置
に見いだされるアドレスのオペランドに加え、レジスタ
Cに見いだされるアドレスの位置に主メモリにその和の
結果をストアせよ。)は、命令セットの一部として含ま
れない。その代わり、この動作は、次の多数の単純なレ
ジスタからレジスタへの命令やロード/ストア命令にて
な査れる。 すなわち、レジスタA2をレジスタAIに加算せよ、レ
ジスタB内のアドレスのメモリ位置からレジスタBlを
ロードせよ、レジスタAIとレジスタBlを加算せよ、
レジスタCによりアドレスされたメモリ位置にレジスタ
B1をストアせよ。 コンパイラ技法は、32個のレジスタ76の使用を最大
にするために使用され、すなわち、大部分の動作が既に
レジスタセットにあるオペランドを見いだすことを保証
する。ロード命令は、実際に、lマシンサイクルより長
くかかる。このためl命令の潜在(1atency)が
導入される。ロード命令によってフェッチされるデータ
は、12サイクルまで使用されず、もし可能ならば、そ
の間に入るサイクルが、ある他の命令のために使用され
る。 メインCPU75は、マシンサイクル当たりの命令実行
を平均化する目的を容易にするために高度にパイプライ
ン化されている。第4図を参照して、1つの命令が5マ
シンサイクルを含む周期にわたって実行される。ここで
、lマシンサイクルは、16.67MHzのクロック1
7に対してlクロック周期すなわち60nsecである
。この5サイクルすなわちパイプステージは、IF(1
キヤシユ44からの命令フェッチ)、RD(レジスタセ
ット76からのリードオペランド)、ALU(ALU7
7での要求される命令を実行)、MEM(もし要求され
たならDキャシュ45をアクセスせよ)、及びWB (
ALUの結果をレジスタファイル76に書け)として呼
ばれる。第5図かられかるように、これらの5個のパイ
プステージは、重なっているので、与えられたマシンサ
イクル、例えばサイクル5において、命令I#5は、そ
の第1パイプステージすなわちIFパイプステージにあ
り、命令■#lは、その最後のステージすなわちWBス
テージにあり、その他の命令は、その間に入るパイグス
テージにある。 〈メモリモジュール〉 第6図を参照して、1個のメモリモジュール14または
15が詳細に示される。両メモリモジュールは、好まし
い実施例において、同じ構成であるので、メモリ#1モ
ジュールのみが示される。 メモリモジュールは、それぞれ、CPUl1112.1
3から来る3個のバス2122.23に接続される3個
の入力/出力ポート91,92.93を含む。これらの
ポートへの入力は、レジスタ94.95.96にラッチ
され、各ラッチは、データ、アドレス、コマンド、及び
ライト動作のためのストローブ、または、アドレス、コ
マンド、及びリード動作のためのストローブをストアす
るための別々のセクションを備える。これらの3個のレ
ジスタの内容は、全3個のレジスタのみがすべてのセク
ションに接続される入力を備えたポート回路100によ
ってポートされる。もし全3個のCPUII、12.1
3が同じメモリ要求(同じアドレス、同じコマンド)を
行うならば(全CPUは典型的には同じ命令ストリーム
を実行するのでそのような場合がありうる)、メモリ要
求は完了することを許容される。しかし、第1メモリ要
求が、3個のラッチ94.95.96のいずれかにラッ
チされると直ちにメモリアクセスを開始するために通過
される。この目的のために、アクセス、データ及びコマ
ンドは、データバス101゜アドレスバス102および
コマンF/<ス103を含む内部バスに印加される。こ
の内部バスから、メモリ要求は、アドレスに依存して、
そしてシステム構成に依存して様々なリソースにアクセ
スする。 一実施例において、大きなりRAM104が、メモリコ
ントローラ105を用いて、内部バスによってアクセス
される。このメモリコントローラ105は、アクセスバ
ス102からアドレスと制御バス103からメモリ要求
とストローブとを受信し、データ入力とデータ出力がデ
ータバスlO1に出力されるようにDRAMのための多
重の行と列のアドレスを発生する。このDRAM104
はまた、グローバルメモリと呼ばれ、一実施例において
は多分32Mバイトのサイズである。さらに、内部バス
101−103は、制御・スティタスレジスタ106、
多数の不揮発性RAM107及びライトプロテクト10
8をアクセスできる。 CPUによるメモリ参照は、また、メモリモジュール1
4または15内のメモリをバイパスでき、内部バス10
1−103に接続される入力を備えたバスインターフェ
ースによってI10バス24.25にアクセスできる。 もしメモリモジュールがプライマリメモリモジュールで
あるならば、各メモリモジュール内のバスアービトレー
タ110は、バスインターフェース109を制御する。 もしメモリモジュールがバックアップモジュールである
ならば、バス34はバスインターフェース109を制御
する。 DRAM104へのメモリアクセスは、第1の要求が1
個のラッチ94.95、又は96にラッチされると直ち
に開始されるが、故障に備えて、多数の要求が同じであ
ることをポート回路100が決定されなければ、完了を
許容されない。3mの要求の中の第1の要求の到達は、
DRAM入力4へのアクセスを開始させる。リードに対
して、DRAM104がアドレス指定され、センスアン
プがストローブされ、データ出力がDRAM入力で生じ
る。そして、もし第3の要求が受信された後でポートが
良いならば、要求されたデータはCPUに直ちに転送す
るために用意される。このように、ボーティングの動作
はDRAMアクセス動作と重なる。 第7図を参照して、バス21,22.23は、図示され
たフォーマットにてメモリモジュール14.15のポー
ト91,92.93にメモリ要求を与える。これらのバ
スの各々は、32本の双方向多重アドレス/データライ
ン、13本の1方向コマンドライン及び2本のストロー
ブからなる。 コマンドラインは、リード、ライト、ブロック転送、単
独転送、I10リードまたはI10ライトなどのバスア
クティビティのタイプを特定するフィールドを含む。ま
た、lフィールドは、4バイトに対するバイトイネーブ
ルとして機能する。上記のストローブは、AS(アドレ
スストローブ)とDS(データストローブ)である。C
PUII。 12.13は、それぞれ、自分自身のバス21゜22又
は23を制御する。この実施例において、これらは、マ
ルチマスタバスではなく、争いすなわちアービトレーシ
ョンはない。ライトに対して、CPUは、アドレススト
ローブAS(アクティブでローレベル)で1サイクル内
でバスにアドレスとコマンドを送り、続くサイクル(お
そらく次のサイクル、しかし必ずしもそうでなくてもよ
い)でデータストローブと同時にバスのアドレス/デー
タラインにデータを送信する。各CPUからのアドレス
ストローブASは、ストローブが現れたとき、ボート9
1,92又は93にアドレスとコマンドを生じさせて、
レジスタ94.95.96のアドレス・コマンドセクシ
ョンにラッチさせ、次に、データストローブDSがデー
タをラッチさせる。バス21,22.23の多数(この
実施例では3の中の2)が同じメモリ要求をラッチ94
.95.96に送信するとき、ボート回路100は、バ
ス103に最後のコマンドを通過させ、メモリアクセス
が実行される。もしコマンドがライトならば、ライトが
実行されると直ちに、肯定応答ACK信号がライン11
2(特にメモリ#lのラインl 12−1とメモリ#2
のライン112−2)によって各CPUに送り返され、
同時にスティタスピットが、第7図の時間T3に各CP
Uに肯定応答/スティタスバス33(特にメモリ#lの
ライン33−1とメモリ#2のライン33−2)を介し
て送信される。最後のストローブDS(もしリードなら
ばAS)とT3でのACKの間の遅延T4は、メモリ要
求のときにCPUが何サイクル同期位置からずれている
かに依存して、また、ボーティング回路における遅延と
CPUクロック17に比べてメモリモジュール14又は
15の内部の独立なりロック17の位相に依存して、変
わり得る。 もしCPUにより出力されるメモリ要求がリードである
と、次に、ライン112−1と112−2のACK信号
とライン33−1と33−2のスティタスピットが、時
間T3の間に、データがアドレス/データバスに出され
るのと同時に送信される。 これは、CPUにストールをリリースし、こうして同一
の命令に対してCPUチップ40を同期させる。すなわ
ち、最速のCPUは、より遅いCPUが追い付くのを待
っているので、より多くのストールサイクル(stal
l cycle)を実行し、こうして、クロック17が
たぶん位相がずれているが、全3個が同時にリリースさ
れる。全3個のCPUがストールから出て来たとき、こ
れらのCPUによって最初に実行される命令は同じであ
る。 メモリモジュール14又は15からCPUII。 12.13に送信されるすべてのデータは、そのデータ
がDRAM104から又はメモリ位置106−108か
らのり一ドデータであるか、バス24.25からのI1
0データであるかに拘わらず、レジスタ114を通過す
る。このレジスタ114は、内部データバスlotから
ロードされ、このレジスタからの出力は、時間T3にボ
ート91192.93でバス21,22.23のための
アドレス/データラインに印加される。パリティは、デ
ータがこのレジスタにロードされたときに検査される。 DRAM104に書き込まれたすべてのデータと、■1
0バスのすべてのデータは、それに関連したパリティビ
ットを持つ。しかし、パリティビットは、バス21,2
2.23でcpuモジュールに転送されない。リードレ
ジスタ114で検出されたパリティエラーは、スティタ
スバス33−1,33−2を介してCPUによって報告
される。プライマリとして指定されたメモリモジュール
14又は15のみが、そのレジスタ114内のデータを
バス21,22.23に出力する。バックアップ又はセ
カンダリとして指定されたメモリモジュールは、レジス
タ114をロードする点まで連続して行われるリード動
作とパリティチエツクを完了し、バックアップ33−1
と33−2にスティタスを報告する。しかし、データは
、バス21122.23に出力されない。 各メモリモジュール14又は15内のコントローラ11
7は、このモジュールのためのクロック発振器17によ
りステートマシーンとして動作し、バス103とバス2
1−23から様々なコマンドラインからのデータ(例え
ばレジスタとバスをロードするための制御ビットの発生
、外部制御信号の発生など)を受信する。現在プライマ
リとして指定されているモジュール14又は15内のこ
のコントローラ117は、共通のバス1ot−103へ
のアクセスのためにI10側(インターフェース)とC
PU側(ポート9l−93)の間でアービトレータ11
0を介してアービトレートする。 プライマリメモリモジュール14又は15のコントロー
ラ117によるこの決定は、ライン34によって他のメ
モリモジュールのコントローラ117に伝送されて、他
のメモリモジュールに同じアクセスを実行させる。 (以下余白) 各メモリモジュール内のコントローラ117はまたこの
モジュールのためのクロック発振器17からパルスを受
信するりフレッシュカウンタ118に基づいて、DRA
MI 04にりフレッシュサイクルを導入する。DRA
Mは8ミリ秒毎に512リフレツシユサイクルを受信し
なければならず、従って平均して約15ミリ秒毎にリフ
レッシュサイクルが導入される。こうして、カウンタ1
18は、15ミリ秒毎にコントローラ117にオーバー
フロー信号を発生する。そして、もしアイドル条件(c
PUアクセスまたはI10アクセスが実行されない)が
存在するならば、リフレッシュサイクルがバス103に
出力されたコマンドによって実施される。もし動作が進
行中ならば、現在の動作が完了したときに、リフレッシ
ュが実行される。メモリのページングに使用されるブロ
ック転送のような長い動作のために、数個のリフレッシ
ュサイクルがバックアップでき、転送が完了した後でバ
ーストモードで実行される。この目的のために、最後の
リフレッシュサイクルがカウンタ118に関連したレジ
スタに格納されるので、カウンタ118のオーバー70
−の数が用いられる。 CPUによって発生された割り込み要求は、割り込みバ
ス35のライン68によって個々に各CPu1l、12
.13から受信される。これらの割り込み要求は、各メ
モリモジュール14.15に送信される。バス35のこ
れらの要求ライン68は、割り込みポート回路119に
接続されて、この回路119はこれらの要求を比較し、
バス35の出力ライン69にポートされた割り込み信号
を出力する。CPUはそれぞれ、バス35を介して2本
のライン(各モジュール14.15から1本)にポート
された割り込み信号を受信する。各メモリモジュール1
4.15からのポートされた割り込み信号に対して論理
和の演算が行われ、その演算結果が割り込み同期回路6
5に出力される。 ソフトウェアの制御の下に、CPUはどのCPUが割り
込みをするかを決定する。I10プロセッサ又はI10
コントローラで発生される外部割り込みはまた、バス3
5のライン69.70を介してメモリモジュール14.
15を介してCPUに信号として送信される。同様に、
CPUはただプライマリモジュール14又は15からの
割り込みに応答する。 〈■10プロセッサ〉 第8図において、1個のI10プロセッサ26又は27
が詳細に示される。I10プロセッサは2個の同じポー
ト(I10バス24への1個のポート121とI10バ
ス25への他のポート122)を備える。各I10バス
24.25は、32ビット双方向多重アドレス/データ
バス123(32ビツトの外に4ビツトのパリティを含
む)、リード、ライト、ブロックリード、ブロックライ
トなどの実行される動作のタイプを定義する双方向コマ
ンドバス124、内部からI10プロセッサへの又はバ
ス28のどのロケーションにアドレス指定するかを示す
アドレスライン、バイトマスク、及び最後に、アドレス
ストローブ、データストローブ、アドレス肯定応答及び
データ肯定応答を含む制御ラインから構成される。バス
31のラジアルラインは、各I10プロセッサから各メ
モリモジュールへの個々のラインを含む。すなわち、I
10プロセッサからメモリモジュールへのバス要求、メ
モリモジュールからI10プロセッサへのバスグランド
、■10プロセッサからメモリモジュールへの割り込み
要求ライン、及びメモリモジュールからI10プロセッ
サへのリセットラインである。どのメモリモジュールが
プライマリであるかを示すラインは、システムスティタ
スバス32を介して各110プロセツサに接続される。 第8図のI10プロセッサのコントローラすなわちステ
ートマシーン126は、コマンドライン、?t制御ライ
ン、スティタスライン、ラジアルラインからのデータ、
内部データ、及びバス28からのコマンドラインからの
データを受信し、さらに、バス24.25の内容を受信
し情報をバスに伝送するために保持するラッチ127,
128の動作を含むI10プロセッサの内部動作を定義
する。 メモリモジュールからI10プロセッサへのバス24.
25での転送は、別々に肯定応答されたアドレスとデー
タを用いて第9図に示されるプロトコルを使用する。プ
ライマリと指定されたメモリモジュール内のアービトレ
ータ回路110は、I10バス24.25の所有権(o
wnership)のためのアービトレーションを行う
。CPUかう■10への転送が必要なとき、CPU要求
がメモリモジュールのアービトレーション論理回路11
0に出力される。アービトレーション論理回路110が
この要求を承認したとき、メモリモジュールは、アドレ
スとコマンドを(両バス24.25の)バス123.1
24に、アドレスストローブが(2つのバス24と25
の)第9図の時間TIに主張されたときと同時に、バス
125に印加する。コントローラ126がアドレスをラ
ッチ127又は128にラッチさせたとき、アドレス肯
定応答がバス125に主張され、次に、メモリモジュー
ルは時間T2にデータを(両バス24.25を介して)
バス123に出力し、ライン125にデータストローブ
を出力する。時間T2の後で、コントローラは、2個の
ラッチ127.128にデータをラッチさせ、データ肯
定応答信号がライン125に出力され、そうして、デー
タ肯定応答の受信の際に、両メモリモジュールは、アド
レスストローブ信号の主張をやめることによりバス24
.25をリリースする。 I10プロセッサからメモリモジュールへの転送におい
て、I10プロセッサがI10バスを使う必要があるき
き、I10プロセッサは、両バス24.25に、ラジア
ルバス31にラインによってバス要求を主張し、次に、
プライマリメモリモジュール14又は15にアービトレ
ータ回路110からバス使用承認信号を待つ。バス使用
承認ラインもラジアルラインの1本である。バス使用承
認が主張されたとき、コントローラ126は、前の転送
が完了されたことを(誤って)意味する、バス125上
でアドレスストローブとアドレス肯定応答信号の主張が
解除されるまで待機する。そのとき、コントローラ12
6は、ラッチ127.12gからライン123ヘアドレ
スを出力させ、コマンドをライン124に出力させ、ア
ドレスストローブを両バス24.25のバス125に出
力させる。アドレス肯定応答が両バス24.25から受
信されたとき、データがアドレス/データバスにデータ
ストローブとともに出力され、転送は、メモリモジュー
ルからI10プロセッサへのデータ肯定応答信号で完了
される。 ラッチ127と128は、アドレスバス129a、デー
タバス129b、及び制御バス129cを含む内部バス
129に接続される。内部バス129は、バス32によ
って供給されるスティタスを保持するなどのために、コ
ントローラステートマシーン126によって実行される
コマンドをセットアツプするために用いられる内部ステ
ィタス・制御レジスタ130をアドレス指定することが
できる。これらのレジスタ130は、CPUのアドレス
空間においてCPUからリードまたはライトのためにア
ドレス指定可能である。バスインターフェース131は
、コントローラ131の制御の下に、VMEバス28と
通信する。バス28は、アドレスバス28a、データバ
ス28bllll/<ス28c及びラジアル28dを備
え、これらの全ラインは、バスインターフェースモジュ
ール29を介してI10コントローラ30に接続される
。 バスインターフェースモジュール29は、一方又は他方
の又は両方のI10プロセッサからの、1セツトだけの
パスライン28をコントローラ30に駆動させるための
マルチプレクサ132を備える。コントローラ30の内
部で、コマンド、制御、スティタス、データのレジスタ
133があり、(このタイプの周辺コントローラにおい
て標準的プラクティスとして)CPUI l、12.1
3から、開始するべきリードとライトのためにアドレス
指定可能であり、I10装置における動作を制御する。 VMEバス28上での各I10コントローラ30は、B
IM29のマルチプレクサ132を介して両I10プロ
セッサ26.27との接続機能を備え、いずれか1個に
よって制御されるが、CPUによって実行されるプログ
ラムによって一方または他方に限られる。特定のアドレ
ス(又1組のアドレス)は、各コントローラ30を示す
制御・データ転送レジスタ133のために確定され、こ
れらのアドレスは、オペレーティングシステムによりI
10ページテーブル(通常は、ローカルメモリの核デー
タ区分)に維持される。これらのアドレスは、両方では
なく、どちらかのI10プロセッサ#lまたは#2を介
してのみアドレス指定が可能であるように、各コントロ
ーラ30を関連づける。すなわち、I10プロセッサ2
7と比較すると、ある異なったアドレスは、I10プロ
セッサ26を介して特定のレジスタ133に到達させる
ために使用される。バスインターフェース131 (及
びコントローラ126)は、マルチプレクサ132を切
り換えて一方または他方からバス28上のデータを受信
する。これは、CPUから■10プロセッサのレジスタ
130へのライトによってなされる。こうして、デバイ
スドライバがこのコントローラ30をアクセスするため
にコールされたとき、オペレーティングシステムはペー
ジテーブルにおけるこのアドレスをそのために使用する
。プロセッサ40は、ライトバッファ50を介してより
もむしろ、バイバスバッファパス52を用いてこれらの
コントローラの制御・データ転送レジスタ133へのI
10ライトによってコントローラ30をアクセスする。 従って、これらは、これは、回路100によってボート
され、メモリモジュールを通してバス24又は25へ、
従って選択されたバス28への同期化されたライト動作
である。プロセッサ40は、このライト動作が完了する
までストールする。第8図のI10プロセッサボードは
、ある誤り(例えば不適当なコマンド、VMEバス28
で応答が受信しないまま期限がすぎたこと、実行された
ときのパリティチエツク)を検出するように形成され、
1個の誤りが検出されると、I10プロセッサは、バス
トラフィックへの応答を止め、すなわち、glK9図に
関連して上述されたアドレス肯定応答とデータ肯定応答
を送信することを中止する。これは、バスインターフェ
ース56によってバスフォールトとして検出され、後述
されるように割り込みを生じ、可能ならば自己訂正作用
がなされる。 くエラーリカバリ〉 上記バス21122.23を介しての転送のだめのメモ
リモジュール14と15による応答を評価するために、
CPU11% 12.13によって用いられるシーケン
スは、次に説明される。このシーケンスは、バスインタ
ーフェースユニット56におけるステートマシンによっ
て定義されかつCPTJによって実行されるコードにお
いて定義される。 第1の場合、リード転送において、データの誤りがプラ
イマリのメモリからのライン33にスティタスビットに
示されないと仮定する。ここで、メモリ参照によって始
められるストールは、各マイクロプロセッサ40で命令
実行を続けることを可能にするために、制御バス55と
43を介してレディ信号を主張することにより終了する
。しかし、肯定応答がライン112において他の(プラ
イマリでない)メモリモジュールから受信されるまで(
または時間切れになるまで)、開始されない。もしいず
れかのスティタスフィールド(ライン33−1または3
3−2)においてエラーが検出されたなら、又はもしプ
ライマリでないメモリが時間切れになったならば、割り
込みはポスト(post)される。 第2の場合、リード転送において、データエラーがプラ
イマリメモリからスティタスライン33に指示されたこ
と、あるいは、プライマリメモリから応答が受信されな
かったことが仮定される。 CPUは、他方のメモリから肯定応答を待ち、もし他の
メモリからのスティタスビットにデータエラーが見いだ
されないならば、バスインターフェース56の回路が所
有権(プライマリのメモリスティタス)の変化を起こさ
せ、従って、データが新しいプライマリから正しくリー
ドされたか否かを確認するために、リトライが設定され
る。もし良好なスティタスが新しいプライマリから受信
されたなら、次にストールは前のように終了して、割り
込みはシステムを更新するために(1個のメモリを悪い
と気付き、異なったメモリをプライマリとし)ポストさ
れる。しかしながら、もしデータエラー又は時間切れが
新しいプライマリからリードをするという試みから生じ
たなら、次に割り込みが制御バス55と43を介してプ
ロセッサ40に主張される。 ライトバッファ50がバイパスされたライト転送におい
て、第1の場合では、どちらのメモリからもスティタス
ビットにエラーが示されない。ストールは終了され命令
の続行が許可される。再び、もしエラーがどちらかのス
ティタスフィールドに検出されたならば割り込みがボス
トされる。 ライトバッファ50がバイパスされたライン転送におい
て、第2の場合では、データエラーがプライマリメモリ
からスティタスに指示されるか、または、応答が、プラ
イマリメモリから受け取られない。各CPUのインター
フェースコントローラは、他のメモリモジュールからの
肯定応答を待つ。そして、もしデータエラーが他のメモ
リからのステータスに見いだされないならば、所有権の
変化が強制され、割り込みがボストされる。しかし、も
しデータエラー又は時間切れが他方の(新しいプライマ
リの)メモリモジュールのために起こるならば、次に割
り込みがプロセッサ40に対して主張される。 ライトバッファ50がイネーブルされたライト転送にお
いて、CPUチップはライト動作によってストールされ
ず、第1の場合は、どちらのメモリモジュールからもス
ティタスにエラーが指示されない。転送は終えられて、
他のバス転送が開始される。 ライトバッファ50をイネーブルとしたライト転送にお
いて、第2の場合、データエラーは主メモリからのステ
ィタスに示されるか、又は、応答が主メモリから受信さ
れない。メカニズムは、他のメモリからの肯定応答を待
つ。そして、もし他のメモリからのスティタスにデータ
エラーが見い出されないならば、次に所有権の変化が強
行され、割り込みはポストされる。しかし、もしデータ
エラー又は時間切れが他のメモリにおいて生じるならば
、次に割り込みがボストされる。 メモリモジュールI4又は15は、いま説明しj;メカ
ニズムによって一旦決定されると、フォールト条件がオ
ペレータに対し信号として示されるが、システムは動作
を続けることができる。オペレータは、おそらく故障の
モジュールを含むメモリボードを交換することを希望す
るだろう。これは、システムが起動され動作している間
に行うことができる。次に、システムは、停止せずに新
しいメモリボードを再統合できる。このメカニズムは、
ソフトのエラーによってライトを実行できないがテスト
で良好なとされ物理的に交換する必要がないメモリモジ
ュールを再生するためにも役立つ。タスクは、データが
他方のメモリモジュールと同じである状態にそのメモリ
モジュールを戻すことである。この再生モードは、2ス
テツプのプロセスである。まず、メモリがイニシャライ
ズされておらず、パリティエラーを含むかも知れないこ
とを仮定する。そこで良好なパリティの良好なデータが
、すべてのロケーションに書き込まなけれ、ばならない
。これは、この点ですべてゼロである。しかし、すべて
のライト動作が2個のメモリで実行されるので、この第
1ステツプが達成サレる方法は、良好なメモリモジュー
ルのロケーションをリードし、次にこのデータを両メモ
リモジュール14と15の同じロケーションにライトす
ることである。これは、通常の動作が進行中に、実行中
のタスクに挿入されて行われる。I10バス24又は2
5から生じるライトは、第1ステツプでのこの再生ルー
チンにおいて無視される。こうしてすべてのロケ−シラ
ンにライトされた後は、次のステップは、I10アクセ
スもまたライトされることを除いて第1ステツプと同じ
である。すなわち、I10バス24又は25からのI1
0ライトは、実行するタスクにおいて通常のトラフィッ
クにおいて発生するときに、良好なメモリのすべてのロ
ケーションをリードしこの同じデータを両メモリモジュ
ールの同じロケーションにライトすることを挿入して実
行される。この第2ステツプでモジュールがゼロから最
大アドレスまでアドレス指定されたときに、両メモリは
同一になる。この第2の再生ステップの間に、CPUと
I10プロセッサの両方が、エラーなしに全ての動作を
行うようにメモリモジュールが再生されることを期待す
る。I10プロセッサ26.27は、データリード転送
の間に再生されるメモリモジュールによって示されるデ
ータを使用しない。再生プロセスが完了した後で、再生
されたメモリは、(必要ならば)プライマリと指定でき
る。 同様な再プロセスがCPUモジュールに対しても備えら
れる。1個のCPUが(メモリポート回路100による
場合等のように)故障と検出されるとき、他の2個のC
PUは動作を続けるが、悪いCPUボードは、システム
を停止せずに交換できる。新しいCPUボードがオンボ
ードROM63から起動自己テストルーチンを実行する
とき、他のCPUにこのことを示す信号を出力して、再
生ルーチンが実行される。まず、2個の良好なCPUが
その状態をグローバルメモリにコピーし、次に全3個の
CPUが「ソフトリセット」を実行する。ここで、CP
UはROM内のイニシャライズルーチンから実行をリセ
ットし開始する。そうして、全CPUは、命令ストリー
ムの正確に同じ点に来て、同期化され、次Iこ、保存さ
れていた状態が全3個のCPUにコピーして戻され、前
に実行されていたタスクが続行される。 上述したように、各メモリモジュール内のポート回路1
00は、全3個のCPUが同一のメモリ参照をしている
か否かを決定する。もしそうならば、メモリ動作は、完
了まで進むことを許可される。もしそうでなければ、C
PU故障モードに入る。ボート回路100によって検出
されるように、異なったメモリ参照を送信するCPUは
、バス33−1及び/又は33−2で戻されるスティタ
スで同定される。割り込みはポストされ、ソフトウェア
は引き続いて故障CPUをオフラインとする。 このオフラインスティタスは、スティタスバス32に反
映される。故障が検出されているメモリ参照は、3つか
ら2つを選択するポートに基づき完了することを許可さ
れる。つぎに、悪いCPUボードが交換されるまで、ボ
ート回路100は、メモリ参照の進行を許可する前に、
2個の良好なCPUからの2個の同一のメモリ要求を必
要とする。 システムは、通常は、1個の(2個でなく) cpUオ
フラインで動作を続けるように構成されている。しかし
、1個の良好なCPUだけで動作することが希望される
ならば、別の方法が利用できる。 CPUは、もし異なったデータがメモリ要求で検出され
るならばボート回路100によって、又は時間切れによ
って、故障とポートされる。もし2個のCPUが同一の
メモリ要求を送信するが、第3のCPUがあらかじめ選
択された時間切れ期間にどんな信号も送信しないならば
、CPUは故障と仮定され、前のようにオフラインとさ
れる。 システムのI10装置は故障の場合にソフトウェア再統
合のためのメカニズムを備える。すなわち、CPUとメ
モリモジュールコアは、いま説明したように、故障に対
して保護されたハードウェアである。しかし、システム
の110部分は故障に対して保護されたソフトウェアで
ある。1mのI10プロセッサ26または27が誤ると
、上述したようにソフトウェアによってI10プロセッ
サに限定されたコントローラ30は、ソフトウェアによ
って他方のI10プロセッサヘスイッチされる。オペレ
ーティングシステムは、同じコントローラに対する新し
いアドレスを用いてI10ページテーブルのアドレスを
書き直し、その後は、コントローラは他方のI10コン
トローラ26又は27に限定される。エラーすなわち故
障は、バスインターフェース56でバスサイクルを終え
るバスエラーによって検出でき、例外の原因を決定する
例外処理ルーチンを通して核内に急送される例外を発生
し、次に、I10テーブルのアドレスを書き換えること
により)全コントローラ30を、誤ったI10プロセッ
サ26又は27から他方へ動かす。 バスインターフェース56はいま説明したようにバスエ
ラーを検出すると、故障は、再統合スキームが使用され
る前に分離されねばならない。1個のI10プロセッサ
26または27へ、あるいは1個のバス28の1個のI
10コントローラ30へ(すなわち1個のI10素子に
おける1個の制御レジスタ又はスティタスレジスタ、又
はデータレジスタへ)のいずれかにCPUがライト動作
を行うとき、これは、メモリモジュールにおけるバイパ
ス動作であり、両メモリモジュールは動作を実行して、
2個のI10バス24と25にそれを通過させる。2個
のI10プロセッサ26と27は、ともにバス24と2
5をモニタし、パリティをチエツクし、コントローラ1
26を介して適正なシンタックスでコマンドをチエツク
する。例えば、もしCPUがI10プロセッサ26また
は27内のレジスタにライトを実行するならば、もしど
ちらかのメモリモジュールが正当なアドレス、正当なコ
マンド及び正当なデータを示すならば(パリティエラー
がないことと適正なプロトコルによって証明されるよう
に)、アドレス指定された■10プロセッサは、アドレ
ス指定されたロケーシ町ンにデータをライトし、ライト
動作が成功して完了したという肯定応答指示でメモリモ
ジュールに応答する。両メモリモジュール14と15は
、I10プロセッサ26又は27からの応答(第9図の
アドレスとデータの肯定応答信号)をモニタしていて、
両メモリモジュールは、ライン33−1と33−2の動
作スティタスでCPUに応答する。 (もしこれがリードであるならば、プライマリのメモリ
モジュールのみがデータを戻すが、しかし両方がスティ
タスを戻す。)CPUは、両方がライトを正しく実行し
たか、1個だけであったか、無しであったかを決定でき
る。もし1個だけが良好なスティタスを戻し、それがプ
ライマリならば、所有権を変える必要は無い。しかしも
しバックアップが良好に戻され、プライマリが悪く戻さ
れるならば、所有権の変更が強行され、正しく実行した
ものをプライマリにする。どちらの場合も、割り込みが
故障を報告するために入れられる。この点で、CPUは
、悪いのがメモリモジュールであるか、メモリモジュー
ルの下流側の何かであるかを知らない。それで、同様な
ライトがI10プロセッサに対して試みられる。しかし
、これが成功するならば、メモリモジュールが悪いこと
を必ずしも証明する必要が無い。なぜなら、初めにアド
レス指定されたI10プロセッサが例えばバス24また
は25のラインに接続され、パリティエラーを起こした
からである。それで、システムは、選択的に、I10プ
ロセッサのシャットオフと操作のりトライを行い、両メ
モリモジュールが同じI10プロセッサにライト動作を
正しく実行できるかを見る。もしそうならば、システム
は、交換され再統合されるまで悪いI10プロセッサを
オフラインにして動作を実行できる。しかし、もしリト
ライが1個のメモリから悪いスティタスをなお与えるな
らば、メモリをオフラインにでき、あるいは、他の要素
において故障がメモリにあるか無いかを確実にするため
に故障分離ステップがさらに採られる。これは、全コン
トローラ30を1個の110プロセツサ26又は27に
切り換えてオフのI10プロセッサにリセットコマンド
を送り、生きている両メモリモジュールでオンラインの
I10プロセッサとのりトライの通信を出力することを
含む。そして、もしリセットI10プロセッサがバス2
4又は25を悪化させているならば、そのバスドライバ
は、リセットによって切られ、そうして、もしオンライ
ンI10プロセッサへの通信のりトライが(ri6バス
24と25を介して)良好なスティタスを返すならば、
リセットI10プロセッサが故障であることが分かる。 とにかく、各バスエラーに対して、あるタイプの故障分
離シーケンスが実行され、どのシステム部品がオフライ
ンにしなければならないかを決定する。 〈同期〉 図示される実施例において使用されるプロセッサ40は
、第4図aSS図を参照して上に説明したように、重な
った命令実行を行うパイプラインアーキテクチャである
。この実施例において使用される同期技法は、サイクル
計数、すなわち、命令が実行される毎に第2図のカウン
タ71とカウンタ73をインクリメントすることによる
ので(米国出願第118,503号に一般的に開示され
ているように)、何がプロセッサ40における命令の実
行であるかを定義しなければならない。まっすぐな定義
は、パイプラインが進むごとに命令が実行されることで
ある。コントロールバス43の1本のコントロールライ
ンは、パイプラインがストールされることを示す信号ラ
ン#である。ラン#が高レベルであるときは、パイプラ
インはストールされ、ラン#が低レベル(論理0)であ
るときは、パイプラインは各マシンサイクル毎に進む。 このラン#信号は、数値プロセッサ46においてプロセ
ッサ40のパイプラインをモニタするために用いられ、
そうして、このプロセッサ46は、関連するプロセッサ
40とともにロックステップでランすることができる。 コントロールバス43でのこのラン#信号は、クロック
17とともにランサイクルを計数するためにカウンタ7
1と73によって用いられる。 好ましい実施例において、カウンタレジスタ71のサイ
ズは、4096すなわち21!に選ばれる。 これが選択された理由は、クロック17に使用される結
晶発振子の許容範囲が、平均して約4にランサイクルに
おけるドリフトがプロセッサチップ40によってランさ
れるサイクル数において1個のスキューすなわち差を生
じるようなものだからである。この差は、以下に説明さ
れるように割り込み同期の正しい動作を正当に許容する
ようなものである。1つの同期メカニズムは、カウンタ
71がオーバー70−するときはいつでもCPUに同期
を起こさせるように作用を強いることである。 1つのそのような作用は、カウンタ71からのオーバー
フロー信号0VFLに対応してキャシュミスを強いるこ
とである。これは、次の■キャシュのためのコントロー
ルバス43の誤ったミス信号(例えばセットされないタ
ダバリッドビット(TagValid bit)を単に
発生することによって行うことができ、こうしてキャシ
ュミス例外ルーチンをエンターさせ、その結果生じたメ
モリ参照は、任意のメモリ参照が行われるように同期を
確立させる。カウンタ71のオーバーフローに対して同
期させる他の方法は、プロセッサ40にストールをさせ
ることである。これは第2図の論理回路71aを介して
コントロールバス43にCPビジー(コプロセッサビジ
ー)信号を発生するオーバーフロー信号0VFLを用い
て行うことができる。 このCPビジー信号はCPビジーが主張されなくなるま
で、常にプロセッサ40にストールをエンターすること
になる。全3個のプロセッサは、同じコードを実行して
いてそのカウンタ71に同じサイクルを計数するので、
このストールをエンターする。しかし、CPUがストー
ルをエンターする実際の時間は変化する。論理回路71
aは、入力R#を介して他の2個のプロセッサのバス4
3からラン#を受信し、そうして全3個がストールした
ときに、CPビジー信号がリリースされ、プロセッサは
、再び同期してストールから出る。 こうして、2つの同期技法が説明された。第2の技法で
は、同期はメモリモジュールの回路100におけるメモ
リ参照から生じ、第2の技法では、いま説明したように
、カウンタ71のオーバーフローによって生じる。さら
に、以下に説明されるように、割り込みが同期化される
。しかし、注意するべき重要なことは、プロセッサ40
は、基本的にはそれ自身のクロックで自由にランしてい
て、同期イベントが発生する場合を除いて、実質的に相
互に結合されていない。マイクロプロセッサが第4図と
第5図に示されたように使用される事実は、単独のクロ
ックを用いてのロックステップ同期をより困難にしてい
て、性能を低下させている。 また、ライトバッファ50の使用は、プロセッサを結合
しないように役立ち、ましてプロセッサの密接な結合に
有効ではないであろう。同様に、命令キャシュとデータ
キャシュ及びTLB83を用いた仮想メモリ管理からな
る高性能は、密接な結合が使用されたならばさらに困難
になり、性能は悪影響を受けるだろう。 割り込み同期技法は、リアルタイムといわゆる「仮想タ
イム」を区別しなければならない。リアルタイムは、外
部の実際の時間、壁の時計の時間であり、秒単位で測定
され、又はり室上例えば6Qnsecの分割であるマシ
ンサイクルで測定される。もちろん、クロック発生器1
7はそれぞれリアルタイムでクロックパルスを発生する
。仮想タイムは、各プロセッサチップ40の内部サイク
ル計数タイムであり、各のサイクルカウンタ71と73
で測定される。すなわち、プロセッサチップによって実
行される命令の命令数であり、ある任意の開始点からの
命令において測定される。第10図を参照して、リアル
タイム(toからtlmとして示される)と仮想タイム
(命令数(カウントレジスタ73のモジューロ16計数
)!。からIIBとして示される)との間の関係が図示
される。 第10図の各行は、1個のCPU−A、−B又は−Cの
サイクル計数であり、各列は、リアルタイムでの「点」
である。CPUに対するクロックは、位相がずれ易い。 そこで、実際の時間の相関は、第10a図に示されるよ
うなものであり、ここで、命令数(列)は完全には並ん
でおらず、すなわち、サイクル計数は、並べられたリア
ルタイムマシンサイクルの境界で変化しない。しかし、
fllO図の図示は、説明の目的には十分である。第1
0図において、リアルタイムt、でCPU−Aは第3の
命令にあり、CP U−Bは計数9にあり9番目の命令
を実行していて、CP U−Cは4番目の命令にある。 リアルタイムも仮想タイムも進むことが可能なだけであ
ることに注意する。 CPUのプロセッサチップ40は、リソースが利用出来
ないある条件の下でストールする。例えば、ロードまた
は命令7エツチの間のDキャシュ45または■キャシュ
44のミス、ライトバッファ50がストア動作の間に一
杯であるという信号、コプロセッサ46がビジーである
(コプロセッサが、データ依存性又は制限された処理リ
ソースにより取り扱えない命令を受信した)というコン
トロールバス43を介しての「CPビジーJ信号、また
はマルチグライア/デバイダ79がビジーである(内部
のマルチグライア/デバイダ回路が、プロセッサが結果
レジスタをアクセスしようとしたときに動作を完了して
いなかった)ことである。 もちろん、キャシュ44と45は、プロセッサ40によ
る介在なしに状態を変化しない「パッシブリソース」で
ある。しかし、残りのものは、プロセッサがなんら作用
しなくても状態を変化出来るアクティブリソースである
。例えば、ライトバッファ50は、(プロセッサが他の
ストア動作を行わない限り)プロセッサによる作用なし
にフルからエンプティに変化する。そこでストールに、
パッシブリソースのストールとアクティブリソースのス
トールの2つのタイプがある。アクティブリソースのス
トールは、インターロックストールと呼ばれる。 CPU−A、−B、−Cで実行されるコードストリーム
が同一であるので、3個のcPUのキャシュ44と45
のようなパッシブリソースの状態は、仮想タイムの総て
の点で必然的に同じである。もしストールがパッシブリ
ソース(例えばデータキャシュ45)での衝突の結果で
あれば、全3個のプロセッサはストールを行い、ただ1
つの変数は、ストールの長さである。第11図を参照し
て、キャシュミスが■、で発生し、このミスの結果のグ
ローバルメモリ14又は15へのアクセスが8クロツク
(実際には8クロツク以上であってもよい)の時間がか
かったと仮定する。この場合、CPU−Cは、tlでグ
ローバルメモリ14又は15へのアクセスを開始し、グ
ローバルメモリのコントローラ117は、第1のプロセ
ッサCPU−Cがメモリアクセスの開始を信号するとき
にメモリアクセスを開始する。コントローラ117は、
cPU−Bとc p u−cがそれぞれメモリアクセス
に必要な8クロツクより少なくストールするけれども、
アクセス8クロツク遅れてt、で完了する。その結果、
全CPUは、リアルタイムでも仮想タイムでも同期され
る。この例は、また、DRAMIO4へのアクセスの重
複と回路100でのボーティングとの利点を示す。 インターロックストールは、パッシブリソースストール
から異なった状況を示す。1個のCPUは、他のCPU
が全くストールをしないときにインターロックストール
をすることが出来る。第12図を参照して、ライトバッ
ファ50によって起こされるインターロックストールが
図示される。 CPU−A、!−CPU−Bのサイクル計数が示され、
CPU−AとCP U−Bのライトバッファ50からの
フル(full) 7ラグA。とBwbが、サイクル計
数の下に示される(ハイレベルすなわち論理lはフルを
意味し、ローレベルすなわち論理0はエンプティを意味
する)。CPUはストア動作が実行される毎に、フルフ
ラグの状態をチエツクする。 もしフルフラグがセットされるならば、CPUは、フル
フラグがクリアされストア動作を完了するまでストール
する。ライトバッファ50は、もしストア動作がバッフ
ァを満たすならば、フルフラグをセットし、ストア動作
がバッファから1ワードを流出して次のCPUストア動
作のための位置をフリーにするときはいつでもフルフラ
グをクリアする。時間t、で、CPU−Bは、3クロッ
クCPU−Aの先にあり、ライトバッファは共にフルで
ある。ライトバッファがグローバルメモリにライト動作
を行っていると仮定すると、このライトが
は、フォールトトレラント(faulL−tolera
nt)多重プロセッサシステムにおける■10(すなわ
ち入力/出力)プロセッサ制御に関する。 (従来の技術と発明が解決しようとする課題)高信頼性
のデジタル処理、冗長性を用いた様々なコンピュータア
ーキテクチャにおいて達成される。例えば、TMR(3
重・モジュラ・冗長性)システムは、同じ命令のストリ
ーム(流れ)を実行す企3個のCPUを、機能を重複す
る3個の分離した主メモリユニットと分離したI10装
置と共に使用できる。そのため、もし各タイプの要素の
中の1つが誤りをしても、システムは動作し続ける。他
のフォールトトレラントタイプのシステムが、カッラマ
ン等に対して発行されタンデム・コンピューターズ・イ
ンコーホレイテッドに対して譲渡された「多重プロセッ
サシステム」と題する米国特許第4.228.496号
に示される。 様々な方法が、冗長性システムにおいて装置を同期させ
るために使用されて来た。例えば、「多重プロセッサを
同期させるための方法と装置」と題するアール・ダブリ
ユウ・ホーストにより1987年11月9日に出願され
、同様にタンデム・コンピューターズ・インコーホレイ
テッドに譲渡された米国特許出願第118,503号に
おいて、「緩い」同期法が開示されているが、これは、
「フォールトトレラント計算のための中央処理装置」と
題されストラス・コンピュータ・インコーホレイテッド
に譲渡された米国特許第4.453.215号において
示されているような単独のクロックを用いたロック・ス
テップ同期を使用した他のシステムと対照的である。「
同期ボーティング(synchronization
voting) Jと呼ばれる技法がデビス(Davi
es)及びウェイカリ(lfakarly)著[冗長性
システムにおける同期とマツチングJ (IEEE)
ランザクションズ・オン・コンピュータ(IEEE T
ransactions on computer)
、 1978年6月号531−539ページ)に開示さ
れている。 冗長性のフォールトトレラントシステムにおける割り込
み同期の方法が、ヨンディ(Yondea)ほか著[緩
く同期したTMRシステムのための割り込み取り扱いの
実行」 (フォールトトレラント計算についての第15
回年次シンポジウムのクロシーディング(1985年6
月’り246−251ページ)に開示されている。「フ
ォールトトレラントリアルタイムクロック」と題する米
国特許第4゜644.498号は、TMRコンピュータ
システムにおける使用のための3重モジュラ冗長性クロ
ック構成を開示している。「多重に冗長なコンピュータ
のフレーム同期」と題する米国特許第4,733.35
3号は、同期フレームを実行することにより周期的に同
期される別々のクロックで動作するCPUを用いる同期
法を開示している。 25MH2で動作するインテル80386やモトローラ
68030のような高性能マイクロプロセッサ装置が、
高速クロックと大きな能力を備えて使用できるようにな
った。また、メモリ、ディスクドライブなどのコンピュ
ータシステムの他の要素もこれに対応してより安価にか
つより大きな能力を備えるようになった。このため、高
信頼性のプロセッサが同じ傾向に追随することが要求さ
れている。さらに、コンピュータ産業におけるいくつか
のオペレーティングシステムでの標準化は、アプリケー
ションソフトウェアの利用性を大きく拡大した。そのた
め、同様な要求が高信頼性システムの分野でもなされ、
すなわち、標準的オペレーティングシステムを利用でき
る必要がある。 したがって、この発明の主な目的は、特にフォールトト
レラントタイプの改良された高信頼性コンピユータシス
テムを提供することである。この発明の他の目的は、改
良された冗長性でフォールトトレラントタイプのコンピ
ュータシステムであって、高性能と低コストが両立する
ものを提供することである。特に、改良されたシステム
が、高度に冗長なシステムにおいて通常生じる実行負荷
を避けることが好ましい。この発明の別の目的は、速度
とソフトウェアの両立性とともに信頼性について測定さ
れる場合に、性能が改良されている一方、コストも他の
より低い性能のコンピュータシステムと同じぐらいであ
る高信頼性コンピユータシステムを提供することである
。この発明のさらに他の目的は、デマンドページングを
用いた仮想メモリ管理を使用し、保護された(上位から
の監視、すなわち「核(カーネル: kernel)
J )モードを備えたオペレーティングシステムを実行
できる高信頼性コンピユータシステムを提供することで
ある。とくに、オペレーティングシステムは、多重プロ
セスの実行が、すべて高レベルの性能で可能でなければ
ならない。この発明のさらに別の目的は、故障システム
部品を検出できオフラインでそれらを交換でき、システ
ムをダウンさせることなく補修されたシステム部品を再
統合できる高信頼性冗長性コンピュータシステムを提供
することである。 (課題を解決するための手段、作用及び発明の効果) この発明の一実施例によれば、コンピュータシステムは
、典型的には同じ命令ストリームを実行する3個の同一
のCPUを使用し、同じデータの複製を格納する2(!
lの同一の自己診断メモリモジュールを備える。したが
って、古典的TMRシステムにおけるような3個のCP
Uと3個のメモリよりはむしろ、3個のCPUと2個の
メモリの構成か使用される。3個のCPUによるメモリ
参照(a+emory reference)は、2個
のメモリの各の3個の別のボートに接続された3個のバ
スにより行われる。フォールトトレラント動作の実行負
荷を全CPU自身に課することを避けるため、また、フ
ォールトトレラントクロツタ動作の費用、複雑さ及びタ
イミングの問題を課することを避けるため、3個のCP
Uはそれぞれ、それ自身のために独立したクロックを別
々に備えるが、メモリ参照のようなイベント(even
t)を検出することにより、すべてのCPUが、同時に
機能を実行するまで他のCPUの前にある任意のCPU
をストールすることにより、緩く同期されている。割り
込みもまた、全CPUIこ同期され、全CPUが命令ス
トリームの同じ点で割り込みを実行することを保証する
。別々のCPU−メモリ・バスを介しての3個の非同期
のメモリ参照は、メモリ要求のときに各メモリモジュー
ルの3個の別々のポートでポートされるが、リードデー
タは、全CPUに戻されたときにポートされない。 2個のメモリは、共に、全CPUまたは全l10(すな
わち入力/出力)バスから受け取ったすべてのライト要
求を実行するので、両メモリは、最新に保たれる。しか
し、ただ1個のメモリモジュールは、リード要求に対応
して全CPUまたはI10バスに戻る。リードデータを
作る1個のメモリモジュールが「プライマリ」(「主」
)と呼ばれ、他方はバックアップである。従って、入っ
て来るデータは、ただ1つのソースからであり、ポート
されない。2個のメモリモジュールへのメモリ要求は、
ポート続行中は実行されるが、従って、リードデータは
、最後のCPUが要求を行った後で少し遅れて全CPU
に対し利用できる。これらのメモリモジュールのために
使用されるDRAMが単にリード動作を行いリフレッシ
ュするためにライトサイクルの大部分を使用するので、
ライトサイクルでさえも実質的に重複し得る。そこで、
ライトサイクルの最後の部分のためにストローブされな
いならば、リード動作は非破壊的でない。 従って、ライトサイクルは、最初のCPUが要求をする
と直ちに開始されるが、最後の要求が受信され、良好で
あるとポートされるまで完了しない。 ポートされないリードデータの戻りと重なったアクセス
の特徴は、高性能の7オ一ルトトレラント動作を、最小
の複雑さと費用で可能にする。 110機能は、2つの同一のI10バス(各バスはただ
1個のメモリモジュールと別々に接続される)を用いて
実行される。多数のI10プロセッサが2つのI10バ
スに接続され、I10装置は、複数の対のI10プロセ
ッサに接続されるが、ただ1個のI10プロセッサによ
ってアクセスされる。1個のメモリモジュールがプライ
マリとして表されるので、このモジュールのだめのただ
1個のI10バスが、全110プロセツサを制御する。 そして、メモリモジュールとIloとの間のトラフィッ
クは、ポート(vote)されない。全CPUは全I1
0プロセッサをメモリモジュールを介してアクセスでき
る。(ここで、各アクセスは、まさにメモリアクセスが
ポートされるようにポートされるa)しかし、全I10
プロセッサは、全メモリモジュールをアクセスできるだ
けであり、全CPUをアクセスできない。全110プロ
セツサは、全CPUに割り込みを送ることができるだけ
であり、この割り込みは、全CPtJに示される前にメ
モリモジュール内に集められる。こうして、I10装置
アクセスのための同期オーバヘッドは、全CPUにとっ
て重荷にならず、フォールトトレラント性が備えられる
。もしl#のI10プロセッサが誤ったならば、その対
の他方のI10プロセッサが、オペレーティングシステ
ムにより維持されるI10ページテーブル内のI10装
置に対して用いられるアドレスを単に変えるだけで、こ
のI10プロセッサのためのI10装置の制御を代わっ
て行うことができる。このように、■10装置のフォー
ルトトレラント性と再統合は、システムシャットダウン
なしに、そしてさらに、これらのI10バスにおけるボ
ーティングに伴うハードウェア費用と実行ペナルティな
しに可能である。 説明された実施例において使用されるメモリシステムは
、複数のレベルで階層的である。各CPUは、それ自身
のキャシュ(cache)を備え、本質的にCPUのク
ロック速度で動作する。そこで、各CPUは、他のCP
Uによりアクセスできないローカルメモリを備え、仮想
メモリ管理は、オペレーティングシステムの核と現在の
タスクのページを全3個のCPUのためのローカルメモ
リの中にあることを許可し、課されたボーティングまた
は同期のようなフォールトトレラント性のオーバヘッド
なしに高速でアクセス可能にする。次に、グローバルメ
モリとして呼ばれるメモリモジュールレベルがあり、こ
こで、ボーティングと同期化が行われ、アクセスタイム
の負荷が導入される。 しかし、グローバルメモリの速度は、ディスクアクセス
よりもずっと速い。従って、このレベルは、デマンドペ
ージングの第ルベルのためにディスクを使用するためよ
りはむしろ、最速のエリアに最も使用されるデータを保
つためのローカルメモリとの、ページのスワツピングの
ために使用される。 この発明の開示された実施例の1つの特徴は、システム
をシャットダウンすることなしにCPUモジュールやメ
モリモジュールのような故障部品を交換する能力である
。こうして、このシステムは、部品が故障し、取り換え
ねばならない場合でさえも、連続的な使用ができる。さ
らに、高レベルのフォールトトレラント性がより少ない
部品で達成できる。例えば、フォールトトレラントなり
ロック動作が必要でなく、3個でなく2個のメモリモジ
ュールだけが必要であり、ボーティング回路が最小にで
きる。このことは、故障する部品が少なく、信頼性が増
大したことを意味する。すなわち、部品がより少ないの
で、故障がより少なく、故障があるとき、システムをラ
ンさせたまま、その部品が分離され、システムシャット
ダウンなしに取り換えできる。 このシステムのCPUは、好ましくは、UNIX(登録
商標)のようなオペレーティングシステムが使用可能な
市販の高性能マイクロプロセッサチップを使用する。シ
ステムをフォールトトレラントにする部分は、オペレー
ティングシステムに対して透明であるか、またはオペレ
ーティングシステムに対して容易に適合できる。従って
、高性能なフォールトトレラントシステムは、−時的に
広く使用されるマルチタスクのオペレーティングシステ
ムとアプリケーションソフトウェアとの同等性を可能に
して提供される。 (以下余白) (実施例) 以下、添付の図面を参照して本発明の詳細な説明する。 第1図を参照して、本発明の特徴を用いたコンピュータ
システムは、一実施例において、論理プロセッサとして
動作する3個の同一のプロセッサ1112及び13(以
下、それぞれCPU−A。 CPU−B及びCPU−Cという。)を備え、これら3
個は、典型的には同じ命令ストリームを実行する。3個
のプロセッサが同じ命令ストリームを実行しない唯一の
時間は、システム起動自己テスト、診断などの動作であ
る。3個のプロセッサは、2個のメモリモジュール14
と15(メモリ#11メモリ#2と呼ばれる)と接続さ
れ、各メモリは、同じアドレス空間に同一のデータを格
納する。好ましい実施例においては、各プロセッサti
、i2及び13は、その固有のローカルメモリ16を含
み、このメモリを含むプロセッサによってのみアクセス
可能である。 各プロセッサ11,12及び13は、各メモリモジュー
ル14と15と同様に、それ自身の固有の別々のクロッ
ク発振器17を備える。この実施例において、全プロセ
ッサは、「ロックステップ」でランされず、その代わり
、上述の米国出願第118.503号で明らかにされた
ような方法により、すなわち、これらのCPUを同期化
させる外部メモリ参照のようなイベントを使用して、緩
く同期される。外部の割り込みは、各プロセッサから他
の2個のプロセッサへ割り込み要求とスティタスを結合
するための1組のバスを使用する技法によって、3個の
CPUの間で同期化される。各プロセッサCPLJ−A
%CPU−B及びCPU−Cは、それ自身と他の2例と
の3個の割り込み要求に対して応答的であり、命令スト
リームの同じ点においてこれらのCPUに割り込み要求
を示す。 メモリモジュール14と15は、メモリ参照をポートし
、全3個のCPUが同じ要求(故障に対する準備ととも
に)を行ったときにのみ、メモリ参照が進むことを許可
する。このように、これらのプロセッサは、外部のイベ
ント(メモリ参照)の時に同期化され、その結果、プロ
セッサは、典型的には、同じ命令ストリームを、同じシ
ーケンスで、ただし必ずしも同期イベントの間の時間に
おける平行した時間サイクルの間ではないが、実行する
。さらに、外部の割り込みは、同期化されて、各CPU
の命令ストリームにおける同一の点で実行される。 CP U−Aプロセッサ11は、バス21を介して、メ
モリ#lモジュール14とメモリ#2モジュール15に
接続される。同様に、CPU−Bプロセッf12は、バ
ス22を介して、メモリ#1モジュール14とメモリ#
2モジュール15に接続される。そして、CPU−Cプ
ロセッサ13は、バス23を介して、メモリモジュール
14.15に接続される。これらのバス21.22.2
3は、32ビット多重アドレス/データバス、コマンド
バス、及びアドレスとデータのストローブのための制御
ラインを含む。これらのCPUは、これらのバス21,
22及び23の制御を備え、そのため、アービトレーシ
ョン(arbitration)またはバス要求やバス
使用承認(bus grant)はない。 各メモリモジュール14と15は、それぞれの入出力バ
ス24又は25に別々に接続され、各バスは、2個(ま
たはそれ以上)の入出カプロセッサに接続される。この
システムは、個々のシステム構成のために必要なI10
装置を収容するために必要な多数のI10プロセッサを
備えることができる。各入出カプロセッサ26.27は
、バス28に接続される。バス28は、vMEバス(登
録商標)のような標準の構成であってもよい。そして、
各バス28は、標準のI10コントローラ30とのイン
ターフェースのための1個以上のバスインター7エース
モジユール(BIM)29に接続されている。各バスイ
ンター7エースモジユール29は、2個のバス28に接
続され、従って、1個のI10プロセッサ26または2
7の故障、または1個のバスチャンネル28の故障は、
許容される。I10プロセッサ26と27を、CPU1
112及び13によってメモリモジュール14と15を
通してアドレス指定することができ、I10プロセッサ
26.27はメモリモジュールを介して全CPUに割り
込み信号を出力することができる。ディスクドライブ、
CRTスクリーンとキーボードを備えたターミナル、及
びネットワークアダプタは、I10コントローラ3oに
より作動される典型的な周辺装置である。I10コント
ローラ30は、データブロックのような転送のためにメ
モリモジュール14と15に対しDMAタイプの参照を
することができる。各I10プロセッサ26.27など
は、バス要求、バス使用承認等のために各メモリモジュ
ールに直接に接続された個々のラインを備える。これら
の点から点への接続ラインは、「ラジアル」と呼ばれ、
ラジアルライン31のグループに含まれる。 システムスティタスバス32は、各素子のスティタス情
報を与える目的のために、上記各cPU11.12.1
3、各メモリモジュール14.15、各110プロセツ
サ26.27に、個々に接続される。このスティタスバ
スは、システムに現在存在し適当に動作しているCPU
、メモリモジュール及びI10プロセッサについての情
報を提供する。 3個のCPUと2個のメモリモジュールヲ接続する肯定
応答/スティタスバス33は、メモリ要求が全CPUに
よって行われたときにモジュール14.15が全CPU
に肯定応答信号を送信する個々のラインを含む。同時に
、スティタスフィールドが、コマンドのスティタスとコ
マンドが正しく実行されたか否かとについて報告するた
めに送信される。メモリモジュールは、グローバルメモ
リから読み出されたデータまたは書き込まれたデータの
パリティを検査するだけでなく、メモリモジュールを介
してI10バス24と25へまたはバス24.25から
のデータのパリティを検査し、またコマンドの正当性を
検査する。これらの検査がCPUl1112及び13に
報告されるのは、バス33のスティタスラインを介して
であり、もし誤りが発生すると、故障ルーチンを、故障
部品を分離するためにエンターすることができる。 2個のメモリモジュール14と15がグローバルメモリ
に同じデータを格納し、すべてのメモリ参照を2重に行
うように動作しているが、任意の与えられた時間では、
1個のメモリモジュールがプライマリと指定され、他方
は、バックアップと指定される。メモリライト動作は、
両メモリモジュールにより実行されるので、両方とも使
用可能状態(current)であり、またメモリリー
ド動作も両方により実行される。しかし、プライマリの
メモリモジュールのみが、バス21,22及び23に実
際にリードデータをロードし、そして、プライマリのメ
モリモジュールのみがマルチマスタバス24と25のた
めのアービトレーションを制御する。プライマリのメモ
リモジュールとバックアップのメモリモジュールに同じ
動作の実行を続けるために、バス34がプライマリから
バックアップへ制御情報を伝送する。どちらかのメモリ
モジュールが、プートアップにおいてプライマリの役割
を取り、この役割は、ソフトウェアの制御の下に動作の
間に交換できる。当該役割は、選択されたエラー条件が
全CPUまたはシステムの他のエラ一応答性部分によっ
て検出されるときに、交換できる。 全CPUにおいて発生されたある割り込みは、また、メ
モリモジュール14と15によってポートされる。全C
PUがそのような割り込み状態となったとき(及びスト
ールされないとき)、全CPUは割り込みバス35の個
々のラインによって全メモリモジュールに割り込み要求
を出力する。 そこで、3個のCPUからの3個の割り込み要求をポー
トすることができる。すべての割り込みがポートされた
とき、メモリモジュールは、それぞれバス35を介して
3個のCPUにポートされた割り込み要求信号を送信す
る。この割り込みのボーティングは、また、全CPUの
動作についての検査のために機能する。3個のCPUは
、CPU間バス18を介してこのポートされた割り込み
をCPU割り込み信号に同期し、命令ストリームの共通
の点で全プロセッサに割り込みを示す。この割り込み同
期は、とのCPUもストールせずに達成される。 <cpuモジュール〉 第2図を参照して、1個のプロセッサ11,12又は1
3がさらに詳細に示される。全3個のCPUモジュール
は、好ましい実施例では、同じ構成であり、従って、C
PU−Aのみがここで説明される。価格を競争力のある
範囲内に保つために、そして、既に発展されているソフ
トウェアとオペレーティングシステムへのアクセスをた
だちに提供するために、好ましくは、市販のマイクロプ
ロセッサチップが使用され、多数のデバイスの中の任意
の1個が選択できる。RISC(縮小命令セット)アー
キテクチャは、後述する緩い同期を実行することにおい
て利点がある。しかし、モトローラ68030デバイス
やインテル80386デバイス(20MHzと25MH
zで使用できる)などのより通常的なCl5C(複雑な
命令セット)マイクロプロセッサが使用できる。高速3
2ビツトRISCマイクロプロセツサデバイスは、3個
の基本的なタイプで複数の製造者から入手できる。 すなわち、モトローラは、部品番号88000としてデ
バイスを製造し、MIPSコンピュータ・システムズ・
インコーホレイテッドなどは、MIPSタイプと呼ばれ
るチップセットを製造し、サン・マイクロシステムズは
、いわゆる5PARC(登録商標)タイプ(スケール可
能なプロセッサアーキテクチャ)を発表している。カリ
フォルニア州すンホセのサイプレス・セミコンダクタは
、例えば、部品番号CY7C601と呼ばれるマイクロ
プロセッサ(SPARC標準をサポートし、33MHz
のクロックを用い、20MIPSの(1秒当たり100
万命令)を与える)を製造し、富士通は、同様に5PA
RC標準をサポートするCMO3RISOマイクロプロ
セッサ(部品番号S−25)を製造している。 図示された実施例におけるCPUボードすなわちモジュ
ールは、−例として使用され、マイクロプロセッサチッ
プ40を用いる。このチップ40は、この場合MIPS
コンピュータ・システムズ・インコーホレイテッドによ
り設計されたR2000デバイスであり、また、インチ
グレイテッド・デバイス・テクノロジー・インコーホレ
イテッドによって製造される。このR2000デバイス
は、RISCアーキテクチャを用いた32ビツトプロセ
ツサであり、例えば、16−67MHzのクロックで1
2MIPsの高性能を示す。25MHzのクロックで2
0MIPSを示すR3000のようなこのデバイスのよ
り高速のバージョンを代わりに用いても良い。プロセッ
サ40はまた、論理アドレスから物理アドレスへの翻訳
をキャッシュするためのトランスレーションルックアサ
イドバッファを含むメモリ管理のために使用されるコプ
ロセッサを備える。プロセッサ40は、データバス、ア
ドレスバス、および制御バスを備えたローカルバスに接
続される。別々の命令とデータのキャシュメモリ44と
45が、このローカルバスに接続される。これらのキャ
シュは、それぞれ64にバイトサイズであり、プロセッ
サ40の1つのクロックサイクル内でアクセスされる。 もし追加の性能がこれらのタイプの計算のために必要な
らば、数値計算用すなわち浮動小数点コプロセッサ46
が、このローカルバスに接続される。この数値計算用プ
ロセッサデバイスも、MIPSコンピュータ・システム
ズ・インコーホレイテッドから部品番号R2010とし
て市販されている。ローカルバス41.42.43は、
ライトバッファ50とリードバッファ51を介して内部
バス構造に接続される。このライトバッファは、入手可
能なデバイス(部品番号R2020)であり、ライト動
作のためにライトバッファ50にデータとアドレスを格
納した後に、ライトが実行されている間にストールサイ
クルを実行しなければならないことよりはむしろ、プロ
セッサ40にラン(Run)サイクルを実行し続けさせ
るように機能する。 ライトバッファ50を通るバスに加え、プロセッサ40
がライトバッファ50をバイパスしてライト動作を実行
することを可能にするためのバスが設けられる。このバ
スは、ソフトウェアの選択の下で、プロセッサに同期の
ライト動作を行うことを可能にする。もしライトバッフ
ァバイパス52がイネーブルされ(ライトバッファ50
がイネーブルされず)、プロセッサがライト動作を実行
するならば、プロセッサは、ライト動作が完了するまで
ストール(−時停止)する。対照的に、ライトバッファ
がディスエーブルの状態でライト動作が実行されるとき
、データがライトバッファ50に書き込まれるので(ラ
イトバッファが満杯でないならば)、プロセッサはスト
ールしない。もしプロセッサ40がライト動作を実行す
るときにライトバッファがイネーブルされるならば、ラ
イトバッファ50は、バス43からの制御と同様に、バ
ス41からの出力データとバス42からのアドレスを捕
捉する。ライトバッファ50は、主メモリへのデータの
通過を待機する間に最大4個のそのようなデーターアド
レスセットを保持できる。 ライトバッフ7はプロセッサチップ40のクロック17
と同期して動作し、このため、プロセッサからバッファ
への転送は同期状態でかつプロセッサのマシンサイクル
速度で行われる。ライトバッファ50は、もし満杯であ
ってデータを収容できないならば、プロセッサに信号を
送信する。プロセッサ40によるリード動作は、フォー
ディープ・ライトバッファ50に含まれるアドレスに対
して検査され、そこで、もしメモリ16すなわちグロー
バルメモリに書き込まれるためにライトバッファで待機
しているデータに対してリード動作が試みられるならば
、リード動作は、ライト動作が完了するまでストールさ
れる。 ライトバッファ50とリードバッファ51は、データバ
ス53、アドレスバス54および制御バス55を備えた
内部バス構造に接続される。ローカルメモリ16は、こ
の内部バスによってアクセスされ、この内部バスに接続
されたバスインターフェース56は、システムバス21
(または他のCPUのためのバス22または23)をア
クセスするために使用される。この内部バスの別々のデ
ータバス53とアドレスバス54(ローカルバスのバス
41と42から得られる)は、システムバス21内の多
重化アドレス/データバス57に変換され、コマンドラ
インと制御ラインは、対応して、この外部バス内のコマ
ンドライン58と制御ライン59に変換される。 バスインターフェースユニット56は、また、メモリモ
ジュール14と15から肯定応答/スティタスライン3
3を受信する。これらのライン33において、別々のス
ティタスライン33−1または33−2は、モジュール
14及び15のそれぞれから接続され、その結果、両メ
モリジュールからの応答を、後述するように、複数のC
PUとグローバルメモリの間の転送(リードまたはライ
ト)の発生の場合に評価できる。 一実施例においては、ローカルメモリ16は、約8Mバ
イトのRAMからなり、プロセッサ40の約3個または
4個のマシンサイクル内でアクセスでき、このアクセス
は、このCPUのクロック17と同期している。これに
反し、モジュール14と15へのメモリアクセスタイム
は、ローカルメモリへのそれに比べて非常に長く、メモ
リモジュール14.15へのこのアクセスは、非同期で
あり、すべてのCPUが要求とボーティングとを行うこ
とを待機することにより課される同期のオーバーヘッド
をこうむる。比較のため、I10プロセッサ26.27
、及び29を介しての典型的な市販のディスクメモリへ
のアクセスは、ミリ秒で測定され、すなわち、モジュー
ル14と15へのアクセスよりもかなり遅い。こうして
、CPUチップ40によるメモリアクセスの階層構造が
ある。 最高は、命令キャシュ44とデータキャシュ45であり
、64にバイトのキャシュサイズと適当なフィルアルゴ
リズム(fill algorithm)を使用したと
きに多分95%のヒツト率を示す。最高の次は、ローカ
ルメモリ16であり、再び一時的仮想メモリ管理アルゴ
リズムを使用することにより、ローカルメモリのサイズ
が約8Mバイトである場合に、キャシュミスが発生し、
ローカルメモリにおけるヒツトが見いだされ、おそらく
95%のヒツト率が、メモリ参照に対して得られる。プ
ロセッサチップの観点からの正味の結果は、メモリ参照
Cl10参照でなく)のおそらく99%以上が同期し、
同じマシンサイクルまたは3個または4個のマシンサイ
クル内に起こることである。 ローカルメモリ16は、メモリコントローラ60によっ
て内部バスからアクセスされる。このメモリコントロー
ラ60は、アドレスバス54からのアドレスと制御バス
55からのアドレスストローブを受信し、例えば、もし
ローカルメモリ16が通常のように多重アドレス指定で
DRAMを使用するならば、別々の行と列のアドレスと
、RASとCASの制御を発生する。データは、データ
バス53を介してローカルメモリに書き込まれ、読み出
される。さらに、オペレーティングシステムによって使
用可能なので、NVRAMや高速FROMのような不揮
発性メモリ62と同様に、数個のローカルレジスタ61
が、内部バスによってアクセスされる。メモリのこの部
分のいくつかが電源投入のためにのみ使用され、いくつ
かがオペレーティングシステムによって使用され、キャ
シュ44内でほとんど連続的であり、他は、メモリマツ
プのキャシュでない部分内に有り得る。 外部割り込みは、第2図のCPUモジュールの割り込み
回路65から制御バス43または55でビンの中の1本
によってプロセッサ40に印加される。このタイプの割
り込みは、回路65でボートされるので、割り込みがプ
ロセッサ40によって実行される前に、全3個のCPU
が割り込みを示されるか否かが決定される。この目的の
ために、回路65は、他の2個のCPU12と13から
割り込み未決定(pend ing)入力を受信し、こ
の他の2個のCPUにライン67を介して割り込み未決
定信号を送信する。これらのラインは、3個のCPU1
1% 12及びI3をともに接続するバス18の一部で
ある。また、他のタイプの割り込み例えばCPUにより
発生された割り込みをボートするために、回路65は、
このCPUから両メモリモジュール14,15ヘバス3
5のライン68により割り込み要求信号を送信すること
ができ、そして、ライン69と70を介してメモリモジ
ュールから別々のボートされた割り込み信号を受信する
。両メモリモジュールは、行われるべき外部割り込みを
与える。1個の!10チャンネル28でのキーボードま
たはディスクドライブのような外部ソースにて発生され
た割り込みは、例えば、各CPUII、12又は13が
、後述されるように、命令ストリーム内の同じ点にある
まで、回路65からチップ40の割り込みビンに印加さ
れない。 プロセッサ40は別々のクロック発生器17によってク
ロックが供給されるので、周期的にプロセッサ40を同
期状態に戻すためのいくつかのメカニズムが必要である
。クロック発生器17が名目上同じ周波数でありこれら
のデバイスの許容誤差が約25 p p m (par
ts per m1llion)であったとしても、こ
れらのプロセッサは、周期的に同期に戻されないならば
、位相が多くのサイクルでずれてしまう可能性がある。 もちろん、外部割り込みが発生する毎に、全CPUは、
(割り込み同期メカニズムによって)その命令ストリー
ムの同じ点で割り込まれるという意味で、同期化される
。 しかし、これは、サイクル計数値を同期化させることを
援助しない。メモリモジュール14と15内のメモリ参
照をボートするメカニズムは、後述されるように全CP
Uをリアルタイムで同期状態にする。しかし、ある条件
は、長い周期においてメモリ参照が起こらないという結
果を生じ、そこで、別のメカニズムが、プロセッサ40
を同期に戻すためのストールサイクルを導入するために
使用される。サイクルカウンタ71は、ランサイクル(
ストールサイクルでなく)であるマシンサイクルを計数
するために、クロック17とプロセッサ40の制御ビン
に制御バス43を介して接続される。このカウンタ71
は、全CPUの間の最大の許容可能なドリフトが発生す
る周期(結晶発振子の特定の許容誤差を考慮して)を表
すように選択された最大計数値を有するカウントレジス
タを含む。このカウントレジスタがオーバーフローする
と、より遅いプロセッサが追い付くまで、より速いプロ
セッサをストールする動作が開始される。 このカウンタ71は、メモリモジュール14と15への
メモリ参照によって同期がなされるときはいつでもリセ
ットされる。また、す7レツシユカウンタ72は、後述
されるように、ローカルメモリ16でリフレッシュサイ
クルを実行するために使用される。さらに、カウンタ7
3は、カウンタ71のように、ランサイクルであってス
トールサイクルでないマシンサイクルを計数する。しか
し、このカウンタ73は、メモリ参照によってリセット
されない。カウンタ73は、以下に説明されるように、
割り込み同期のために使用され、この目的のために、割
り込み同期回路65に出力信号CC−4とCC−8を発
生する。 プロセッサ40は、RISC命令セットを備え、このセ
ットは、メモリからメモリへの命令をサポートしないが
、その代わり、メモリからレジスタへの命令またはレジ
スタからメモリへの命令(たとえばロードまたはストア
)をサポートする。ローカルメモリにしばしば使用され
るデータや現在実行中のコードを保持することは重要で
ある。従って、ブロック転送動作は、バスインターフェ
ース56に結合されたDMAステートマシン74により
なされる。プロセッサ40は、コマンドとして機能させ
るためにDMA回路74のレジスタにlワードを書き込
み、この回路74のレジスタにブロックのスタートアド
レスと長さを書き込む。 実施例では、DMA回路がブロック転送を引き継ぎ実行
する間に、マイクロプロセッサはストールをして、バス
53−55及び21によって必要なアドレス、コマンド
及びストローブを発生する。 このブロック転送を開始するためにプロセッサ40によ
って実行されるコマンドは、DMA回路74のレジスタ
からのリードであってもよい。UNIXオペレーティン
グシステムにおけるメモリ管理はデマンドページングを
当てにしているので、これらのブロック転送は、最もし
ばしばグローバルメモリとローカルメモリとI10トラ
フィックの間に動かされるページである。1ページは4
にバイトである。もちろん、バス21,22及び23は
、CPUとグローバルメモリの間の1ワードのリード転
送とライト転送をサポートする。参照されるブロック転
送は、ローカルメモリとグローバルのメモリの間でのみ
可能である。 くプロセッサ〉 第3図を参照して、実施例のR2000タイプまたはR
3000タイプのプロセッサ40がさらに詳細に示され
る。このデバイスは、32個の32ビツトの一般目的の
レジスタ76.32ビツトのALU77、Oビットから
64ビツトへのシフタ78、および32X32の多!!
/分割回路79を備える32ビツトのメインCPU75
を備える。 このCPUは、また、プロセッサバス構造81に接続さ
れ、このプロセッサバス構造81は、ローカルデータバ
ス41に接続され、データバス41を介してフェッチさ
れる命令を実行するための関連する制御ロジックを備え
た命令デコーダ82に接続される。32ビツトのローカ
ルアドレスバス42は、オンチップメモリ管理コプロセ
ッサ内のトランスレージ3ンルツタアサイドバツフア(
TLB)83を含む仮想メモリ管理装置によって駆動さ
れる。TLB83は、仮想アドレスバス84を介してマ
イクロプロセッサブロック75から受け取られた仮想ア
ドレスと比較されるべき64個のエントリを備える。バ
ス42の下位の16ビツトの部分85は、この仮想アド
レスバス84の下位部分によって駆動され、上位部分は
、もし仮想アドレスが物理的アドレスとして使用される
ならば、バス84からであり、あるいは、もし仮想アド
レス指定が使用され、ヒツトが起こるならば、出力86
を介してのTLB83からのタダエントリである。ロー
カルバスの制御ライン43は、パイプライン及びバス制
御回路87に接続され、内部バス構造81と制御ロジッ
ク82から駆動される。 プロセッサ40のマイクロプロセッサブロック75は、
RISCタイプであり、多くの命令が1マシンサイクル
で実行され、命令セットは、ALU動作に伴うメモリ参
照を含む複雑な命令を含むよりはむしろ、レジスタから
レジスタへの命令やロード/ストア命令を使用する。複
雑なアドレス指定スキーム(例えば、レジスタAIとレ
ジスタA2の内容の和であるアドレスのオペランドを、
レジスタBの内容によりアドレスされる主メモリの位置
に見いだされるアドレスのオペランドに加え、レジスタ
Cに見いだされるアドレスの位置に主メモリにその和の
結果をストアせよ。)は、命令セットの一部として含ま
れない。その代わり、この動作は、次の多数の単純なレ
ジスタからレジスタへの命令やロード/ストア命令にて
な査れる。 すなわち、レジスタA2をレジスタAIに加算せよ、レ
ジスタB内のアドレスのメモリ位置からレジスタBlを
ロードせよ、レジスタAIとレジスタBlを加算せよ、
レジスタCによりアドレスされたメモリ位置にレジスタ
B1をストアせよ。 コンパイラ技法は、32個のレジスタ76の使用を最大
にするために使用され、すなわち、大部分の動作が既に
レジスタセットにあるオペランドを見いだすことを保証
する。ロード命令は、実際に、lマシンサイクルより長
くかかる。このためl命令の潜在(1atency)が
導入される。ロード命令によってフェッチされるデータ
は、12サイクルまで使用されず、もし可能ならば、そ
の間に入るサイクルが、ある他の命令のために使用され
る。 メインCPU75は、マシンサイクル当たりの命令実行
を平均化する目的を容易にするために高度にパイプライ
ン化されている。第4図を参照して、1つの命令が5マ
シンサイクルを含む周期にわたって実行される。ここで
、lマシンサイクルは、16.67MHzのクロック1
7に対してlクロック周期すなわち60nsecである
。この5サイクルすなわちパイプステージは、IF(1
キヤシユ44からの命令フェッチ)、RD(レジスタセ
ット76からのリードオペランド)、ALU(ALU7
7での要求される命令を実行)、MEM(もし要求され
たならDキャシュ45をアクセスせよ)、及びWB (
ALUの結果をレジスタファイル76に書け)として呼
ばれる。第5図かられかるように、これらの5個のパイ
プステージは、重なっているので、与えられたマシンサ
イクル、例えばサイクル5において、命令I#5は、そ
の第1パイプステージすなわちIFパイプステージにあ
り、命令■#lは、その最後のステージすなわちWBス
テージにあり、その他の命令は、その間に入るパイグス
テージにある。 〈メモリモジュール〉 第6図を参照して、1個のメモリモジュール14または
15が詳細に示される。両メモリモジュールは、好まし
い実施例において、同じ構成であるので、メモリ#1モ
ジュールのみが示される。 メモリモジュールは、それぞれ、CPUl1112.1
3から来る3個のバス2122.23に接続される3個
の入力/出力ポート91,92.93を含む。これらの
ポートへの入力は、レジスタ94.95.96にラッチ
され、各ラッチは、データ、アドレス、コマンド、及び
ライト動作のためのストローブ、または、アドレス、コ
マンド、及びリード動作のためのストローブをストアす
るための別々のセクションを備える。これらの3個のレ
ジスタの内容は、全3個のレジスタのみがすべてのセク
ションに接続される入力を備えたポート回路100によ
ってポートされる。もし全3個のCPUII、12.1
3が同じメモリ要求(同じアドレス、同じコマンド)を
行うならば(全CPUは典型的には同じ命令ストリーム
を実行するのでそのような場合がありうる)、メモリ要
求は完了することを許容される。しかし、第1メモリ要
求が、3個のラッチ94.95.96のいずれかにラッ
チされると直ちにメモリアクセスを開始するために通過
される。この目的のために、アクセス、データ及びコマ
ンドは、データバス101゜アドレスバス102および
コマンF/<ス103を含む内部バスに印加される。こ
の内部バスから、メモリ要求は、アドレスに依存して、
そしてシステム構成に依存して様々なリソースにアクセ
スする。 一実施例において、大きなりRAM104が、メモリコ
ントローラ105を用いて、内部バスによってアクセス
される。このメモリコントローラ105は、アクセスバ
ス102からアドレスと制御バス103からメモリ要求
とストローブとを受信し、データ入力とデータ出力がデ
ータバスlO1に出力されるようにDRAMのための多
重の行と列のアドレスを発生する。このDRAM104
はまた、グローバルメモリと呼ばれ、一実施例において
は多分32Mバイトのサイズである。さらに、内部バス
101−103は、制御・スティタスレジスタ106、
多数の不揮発性RAM107及びライトプロテクト10
8をアクセスできる。 CPUによるメモリ参照は、また、メモリモジュール1
4または15内のメモリをバイパスでき、内部バス10
1−103に接続される入力を備えたバスインターフェ
ースによってI10バス24.25にアクセスできる。 もしメモリモジュールがプライマリメモリモジュールで
あるならば、各メモリモジュール内のバスアービトレー
タ110は、バスインターフェース109を制御する。 もしメモリモジュールがバックアップモジュールである
ならば、バス34はバスインターフェース109を制御
する。 DRAM104へのメモリアクセスは、第1の要求が1
個のラッチ94.95、又は96にラッチされると直ち
に開始されるが、故障に備えて、多数の要求が同じであ
ることをポート回路100が決定されなければ、完了を
許容されない。3mの要求の中の第1の要求の到達は、
DRAM入力4へのアクセスを開始させる。リードに対
して、DRAM104がアドレス指定され、センスアン
プがストローブされ、データ出力がDRAM入力で生じ
る。そして、もし第3の要求が受信された後でポートが
良いならば、要求されたデータはCPUに直ちに転送す
るために用意される。このように、ボーティングの動作
はDRAMアクセス動作と重なる。 第7図を参照して、バス21,22.23は、図示され
たフォーマットにてメモリモジュール14.15のポー
ト91,92.93にメモリ要求を与える。これらのバ
スの各々は、32本の双方向多重アドレス/データライ
ン、13本の1方向コマンドライン及び2本のストロー
ブからなる。 コマンドラインは、リード、ライト、ブロック転送、単
独転送、I10リードまたはI10ライトなどのバスア
クティビティのタイプを特定するフィールドを含む。ま
た、lフィールドは、4バイトに対するバイトイネーブ
ルとして機能する。上記のストローブは、AS(アドレ
スストローブ)とDS(データストローブ)である。C
PUII。 12.13は、それぞれ、自分自身のバス21゜22又
は23を制御する。この実施例において、これらは、マ
ルチマスタバスではなく、争いすなわちアービトレーシ
ョンはない。ライトに対して、CPUは、アドレススト
ローブAS(アクティブでローレベル)で1サイクル内
でバスにアドレスとコマンドを送り、続くサイクル(お
そらく次のサイクル、しかし必ずしもそうでなくてもよ
い)でデータストローブと同時にバスのアドレス/デー
タラインにデータを送信する。各CPUからのアドレス
ストローブASは、ストローブが現れたとき、ボート9
1,92又は93にアドレスとコマンドを生じさせて、
レジスタ94.95.96のアドレス・コマンドセクシ
ョンにラッチさせ、次に、データストローブDSがデー
タをラッチさせる。バス21,22.23の多数(この
実施例では3の中の2)が同じメモリ要求をラッチ94
.95.96に送信するとき、ボート回路100は、バ
ス103に最後のコマンドを通過させ、メモリアクセス
が実行される。もしコマンドがライトならば、ライトが
実行されると直ちに、肯定応答ACK信号がライン11
2(特にメモリ#lのラインl 12−1とメモリ#2
のライン112−2)によって各CPUに送り返され、
同時にスティタスピットが、第7図の時間T3に各CP
Uに肯定応答/スティタスバス33(特にメモリ#lの
ライン33−1とメモリ#2のライン33−2)を介し
て送信される。最後のストローブDS(もしリードなら
ばAS)とT3でのACKの間の遅延T4は、メモリ要
求のときにCPUが何サイクル同期位置からずれている
かに依存して、また、ボーティング回路における遅延と
CPUクロック17に比べてメモリモジュール14又は
15の内部の独立なりロック17の位相に依存して、変
わり得る。 もしCPUにより出力されるメモリ要求がリードである
と、次に、ライン112−1と112−2のACK信号
とライン33−1と33−2のスティタスピットが、時
間T3の間に、データがアドレス/データバスに出され
るのと同時に送信される。 これは、CPUにストールをリリースし、こうして同一
の命令に対してCPUチップ40を同期させる。すなわ
ち、最速のCPUは、より遅いCPUが追い付くのを待
っているので、より多くのストールサイクル(stal
l cycle)を実行し、こうして、クロック17が
たぶん位相がずれているが、全3個が同時にリリースさ
れる。全3個のCPUがストールから出て来たとき、こ
れらのCPUによって最初に実行される命令は同じであ
る。 メモリモジュール14又は15からCPUII。 12.13に送信されるすべてのデータは、そのデータ
がDRAM104から又はメモリ位置106−108か
らのり一ドデータであるか、バス24.25からのI1
0データであるかに拘わらず、レジスタ114を通過す
る。このレジスタ114は、内部データバスlotから
ロードされ、このレジスタからの出力は、時間T3にボ
ート91192.93でバス21,22.23のための
アドレス/データラインに印加される。パリティは、デ
ータがこのレジスタにロードされたときに検査される。 DRAM104に書き込まれたすべてのデータと、■1
0バスのすべてのデータは、それに関連したパリティビ
ットを持つ。しかし、パリティビットは、バス21,2
2.23でcpuモジュールに転送されない。リードレ
ジスタ114で検出されたパリティエラーは、スティタ
スバス33−1,33−2を介してCPUによって報告
される。プライマリとして指定されたメモリモジュール
14又は15のみが、そのレジスタ114内のデータを
バス21,22.23に出力する。バックアップ又はセ
カンダリとして指定されたメモリモジュールは、レジス
タ114をロードする点まで連続して行われるリード動
作とパリティチエツクを完了し、バックアップ33−1
と33−2にスティタスを報告する。しかし、データは
、バス21122.23に出力されない。 各メモリモジュール14又は15内のコントローラ11
7は、このモジュールのためのクロック発振器17によ
りステートマシーンとして動作し、バス103とバス2
1−23から様々なコマンドラインからのデータ(例え
ばレジスタとバスをロードするための制御ビットの発生
、外部制御信号の発生など)を受信する。現在プライマ
リとして指定されているモジュール14又は15内のこ
のコントローラ117は、共通のバス1ot−103へ
のアクセスのためにI10側(インターフェース)とC
PU側(ポート9l−93)の間でアービトレータ11
0を介してアービトレートする。 プライマリメモリモジュール14又は15のコントロー
ラ117によるこの決定は、ライン34によって他のメ
モリモジュールのコントローラ117に伝送されて、他
のメモリモジュールに同じアクセスを実行させる。 (以下余白) 各メモリモジュール内のコントローラ117はまたこの
モジュールのためのクロック発振器17からパルスを受
信するりフレッシュカウンタ118に基づいて、DRA
MI 04にりフレッシュサイクルを導入する。DRA
Mは8ミリ秒毎に512リフレツシユサイクルを受信し
なければならず、従って平均して約15ミリ秒毎にリフ
レッシュサイクルが導入される。こうして、カウンタ1
18は、15ミリ秒毎にコントローラ117にオーバー
フロー信号を発生する。そして、もしアイドル条件(c
PUアクセスまたはI10アクセスが実行されない)が
存在するならば、リフレッシュサイクルがバス103に
出力されたコマンドによって実施される。もし動作が進
行中ならば、現在の動作が完了したときに、リフレッシ
ュが実行される。メモリのページングに使用されるブロ
ック転送のような長い動作のために、数個のリフレッシ
ュサイクルがバックアップでき、転送が完了した後でバ
ーストモードで実行される。この目的のために、最後の
リフレッシュサイクルがカウンタ118に関連したレジ
スタに格納されるので、カウンタ118のオーバー70
−の数が用いられる。 CPUによって発生された割り込み要求は、割り込みバ
ス35のライン68によって個々に各CPu1l、12
.13から受信される。これらの割り込み要求は、各メ
モリモジュール14.15に送信される。バス35のこ
れらの要求ライン68は、割り込みポート回路119に
接続されて、この回路119はこれらの要求を比較し、
バス35の出力ライン69にポートされた割り込み信号
を出力する。CPUはそれぞれ、バス35を介して2本
のライン(各モジュール14.15から1本)にポート
された割り込み信号を受信する。各メモリモジュール1
4.15からのポートされた割り込み信号に対して論理
和の演算が行われ、その演算結果が割り込み同期回路6
5に出力される。 ソフトウェアの制御の下に、CPUはどのCPUが割り
込みをするかを決定する。I10プロセッサ又はI10
コントローラで発生される外部割り込みはまた、バス3
5のライン69.70を介してメモリモジュール14.
15を介してCPUに信号として送信される。同様に、
CPUはただプライマリモジュール14又は15からの
割り込みに応答する。 〈■10プロセッサ〉 第8図において、1個のI10プロセッサ26又は27
が詳細に示される。I10プロセッサは2個の同じポー
ト(I10バス24への1個のポート121とI10バ
ス25への他のポート122)を備える。各I10バス
24.25は、32ビット双方向多重アドレス/データ
バス123(32ビツトの外に4ビツトのパリティを含
む)、リード、ライト、ブロックリード、ブロックライ
トなどの実行される動作のタイプを定義する双方向コマ
ンドバス124、内部からI10プロセッサへの又はバ
ス28のどのロケーションにアドレス指定するかを示す
アドレスライン、バイトマスク、及び最後に、アドレス
ストローブ、データストローブ、アドレス肯定応答及び
データ肯定応答を含む制御ラインから構成される。バス
31のラジアルラインは、各I10プロセッサから各メ
モリモジュールへの個々のラインを含む。すなわち、I
10プロセッサからメモリモジュールへのバス要求、メ
モリモジュールからI10プロセッサへのバスグランド
、■10プロセッサからメモリモジュールへの割り込み
要求ライン、及びメモリモジュールからI10プロセッ
サへのリセットラインである。どのメモリモジュールが
プライマリであるかを示すラインは、システムスティタ
スバス32を介して各110プロセツサに接続される。 第8図のI10プロセッサのコントローラすなわちステ
ートマシーン126は、コマンドライン、?t制御ライ
ン、スティタスライン、ラジアルラインからのデータ、
内部データ、及びバス28からのコマンドラインからの
データを受信し、さらに、バス24.25の内容を受信
し情報をバスに伝送するために保持するラッチ127,
128の動作を含むI10プロセッサの内部動作を定義
する。 メモリモジュールからI10プロセッサへのバス24.
25での転送は、別々に肯定応答されたアドレスとデー
タを用いて第9図に示されるプロトコルを使用する。プ
ライマリと指定されたメモリモジュール内のアービトレ
ータ回路110は、I10バス24.25の所有権(o
wnership)のためのアービトレーションを行う
。CPUかう■10への転送が必要なとき、CPU要求
がメモリモジュールのアービトレーション論理回路11
0に出力される。アービトレーション論理回路110が
この要求を承認したとき、メモリモジュールは、アドレ
スとコマンドを(両バス24.25の)バス123.1
24に、アドレスストローブが(2つのバス24と25
の)第9図の時間TIに主張されたときと同時に、バス
125に印加する。コントローラ126がアドレスをラ
ッチ127又は128にラッチさせたとき、アドレス肯
定応答がバス125に主張され、次に、メモリモジュー
ルは時間T2にデータを(両バス24.25を介して)
バス123に出力し、ライン125にデータストローブ
を出力する。時間T2の後で、コントローラは、2個の
ラッチ127.128にデータをラッチさせ、データ肯
定応答信号がライン125に出力され、そうして、デー
タ肯定応答の受信の際に、両メモリモジュールは、アド
レスストローブ信号の主張をやめることによりバス24
.25をリリースする。 I10プロセッサからメモリモジュールへの転送におい
て、I10プロセッサがI10バスを使う必要があるき
き、I10プロセッサは、両バス24.25に、ラジア
ルバス31にラインによってバス要求を主張し、次に、
プライマリメモリモジュール14又は15にアービトレ
ータ回路110からバス使用承認信号を待つ。バス使用
承認ラインもラジアルラインの1本である。バス使用承
認が主張されたとき、コントローラ126は、前の転送
が完了されたことを(誤って)意味する、バス125上
でアドレスストローブとアドレス肯定応答信号の主張が
解除されるまで待機する。そのとき、コントローラ12
6は、ラッチ127.12gからライン123ヘアドレ
スを出力させ、コマンドをライン124に出力させ、ア
ドレスストローブを両バス24.25のバス125に出
力させる。アドレス肯定応答が両バス24.25から受
信されたとき、データがアドレス/データバスにデータ
ストローブとともに出力され、転送は、メモリモジュー
ルからI10プロセッサへのデータ肯定応答信号で完了
される。 ラッチ127と128は、アドレスバス129a、デー
タバス129b、及び制御バス129cを含む内部バス
129に接続される。内部バス129は、バス32によ
って供給されるスティタスを保持するなどのために、コ
ントローラステートマシーン126によって実行される
コマンドをセットアツプするために用いられる内部ステ
ィタス・制御レジスタ130をアドレス指定することが
できる。これらのレジスタ130は、CPUのアドレス
空間においてCPUからリードまたはライトのためにア
ドレス指定可能である。バスインターフェース131は
、コントローラ131の制御の下に、VMEバス28と
通信する。バス28は、アドレスバス28a、データバ
ス28bllll/<ス28c及びラジアル28dを備
え、これらの全ラインは、バスインターフェースモジュ
ール29を介してI10コントローラ30に接続される
。 バスインターフェースモジュール29は、一方又は他方
の又は両方のI10プロセッサからの、1セツトだけの
パスライン28をコントローラ30に駆動させるための
マルチプレクサ132を備える。コントローラ30の内
部で、コマンド、制御、スティタス、データのレジスタ
133があり、(このタイプの周辺コントローラにおい
て標準的プラクティスとして)CPUI l、12.1
3から、開始するべきリードとライトのためにアドレス
指定可能であり、I10装置における動作を制御する。 VMEバス28上での各I10コントローラ30は、B
IM29のマルチプレクサ132を介して両I10プロ
セッサ26.27との接続機能を備え、いずれか1個に
よって制御されるが、CPUによって実行されるプログ
ラムによって一方または他方に限られる。特定のアドレ
ス(又1組のアドレス)は、各コントローラ30を示す
制御・データ転送レジスタ133のために確定され、こ
れらのアドレスは、オペレーティングシステムによりI
10ページテーブル(通常は、ローカルメモリの核デー
タ区分)に維持される。これらのアドレスは、両方では
なく、どちらかのI10プロセッサ#lまたは#2を介
してのみアドレス指定が可能であるように、各コントロ
ーラ30を関連づける。すなわち、I10プロセッサ2
7と比較すると、ある異なったアドレスは、I10プロ
セッサ26を介して特定のレジスタ133に到達させる
ために使用される。バスインターフェース131 (及
びコントローラ126)は、マルチプレクサ132を切
り換えて一方または他方からバス28上のデータを受信
する。これは、CPUから■10プロセッサのレジスタ
130へのライトによってなされる。こうして、デバイ
スドライバがこのコントローラ30をアクセスするため
にコールされたとき、オペレーティングシステムはペー
ジテーブルにおけるこのアドレスをそのために使用する
。プロセッサ40は、ライトバッファ50を介してより
もむしろ、バイバスバッファパス52を用いてこれらの
コントローラの制御・データ転送レジスタ133へのI
10ライトによってコントローラ30をアクセスする。 従って、これらは、これは、回路100によってボート
され、メモリモジュールを通してバス24又は25へ、
従って選択されたバス28への同期化されたライト動作
である。プロセッサ40は、このライト動作が完了する
までストールする。第8図のI10プロセッサボードは
、ある誤り(例えば不適当なコマンド、VMEバス28
で応答が受信しないまま期限がすぎたこと、実行された
ときのパリティチエツク)を検出するように形成され、
1個の誤りが検出されると、I10プロセッサは、バス
トラフィックへの応答を止め、すなわち、glK9図に
関連して上述されたアドレス肯定応答とデータ肯定応答
を送信することを中止する。これは、バスインターフェ
ース56によってバスフォールトとして検出され、後述
されるように割り込みを生じ、可能ならば自己訂正作用
がなされる。 くエラーリカバリ〉 上記バス21122.23を介しての転送のだめのメモ
リモジュール14と15による応答を評価するために、
CPU11% 12.13によって用いられるシーケン
スは、次に説明される。このシーケンスは、バスインタ
ーフェースユニット56におけるステートマシンによっ
て定義されかつCPTJによって実行されるコードにお
いて定義される。 第1の場合、リード転送において、データの誤りがプラ
イマリのメモリからのライン33にスティタスビットに
示されないと仮定する。ここで、メモリ参照によって始
められるストールは、各マイクロプロセッサ40で命令
実行を続けることを可能にするために、制御バス55と
43を介してレディ信号を主張することにより終了する
。しかし、肯定応答がライン112において他の(プラ
イマリでない)メモリモジュールから受信されるまで(
または時間切れになるまで)、開始されない。もしいず
れかのスティタスフィールド(ライン33−1または3
3−2)においてエラーが検出されたなら、又はもしプ
ライマリでないメモリが時間切れになったならば、割り
込みはポスト(post)される。 第2の場合、リード転送において、データエラーがプラ
イマリメモリからスティタスライン33に指示されたこ
と、あるいは、プライマリメモリから応答が受信されな
かったことが仮定される。 CPUは、他方のメモリから肯定応答を待ち、もし他の
メモリからのスティタスビットにデータエラーが見いだ
されないならば、バスインターフェース56の回路が所
有権(プライマリのメモリスティタス)の変化を起こさ
せ、従って、データが新しいプライマリから正しくリー
ドされたか否かを確認するために、リトライが設定され
る。もし良好なスティタスが新しいプライマリから受信
されたなら、次にストールは前のように終了して、割り
込みはシステムを更新するために(1個のメモリを悪い
と気付き、異なったメモリをプライマリとし)ポストさ
れる。しかしながら、もしデータエラー又は時間切れが
新しいプライマリからリードをするという試みから生じ
たなら、次に割り込みが制御バス55と43を介してプ
ロセッサ40に主張される。 ライトバッファ50がバイパスされたライト転送におい
て、第1の場合では、どちらのメモリからもスティタス
ビットにエラーが示されない。ストールは終了され命令
の続行が許可される。再び、もしエラーがどちらかのス
ティタスフィールドに検出されたならば割り込みがボス
トされる。 ライトバッファ50がバイパスされたライン転送におい
て、第2の場合では、データエラーがプライマリメモリ
からスティタスに指示されるか、または、応答が、プラ
イマリメモリから受け取られない。各CPUのインター
フェースコントローラは、他のメモリモジュールからの
肯定応答を待つ。そして、もしデータエラーが他のメモ
リからのステータスに見いだされないならば、所有権の
変化が強制され、割り込みがボストされる。しかし、も
しデータエラー又は時間切れが他方の(新しいプライマ
リの)メモリモジュールのために起こるならば、次に割
り込みがプロセッサ40に対して主張される。 ライトバッファ50がイネーブルされたライト転送にお
いて、CPUチップはライト動作によってストールされ
ず、第1の場合は、どちらのメモリモジュールからもス
ティタスにエラーが指示されない。転送は終えられて、
他のバス転送が開始される。 ライトバッファ50をイネーブルとしたライト転送にお
いて、第2の場合、データエラーは主メモリからのステ
ィタスに示されるか、又は、応答が主メモリから受信さ
れない。メカニズムは、他のメモリからの肯定応答を待
つ。そして、もし他のメモリからのスティタスにデータ
エラーが見い出されないならば、次に所有権の変化が強
行され、割り込みはポストされる。しかし、もしデータ
エラー又は時間切れが他のメモリにおいて生じるならば
、次に割り込みがボストされる。 メモリモジュールI4又は15は、いま説明しj;メカ
ニズムによって一旦決定されると、フォールト条件がオ
ペレータに対し信号として示されるが、システムは動作
を続けることができる。オペレータは、おそらく故障の
モジュールを含むメモリボードを交換することを希望す
るだろう。これは、システムが起動され動作している間
に行うことができる。次に、システムは、停止せずに新
しいメモリボードを再統合できる。このメカニズムは、
ソフトのエラーによってライトを実行できないがテスト
で良好なとされ物理的に交換する必要がないメモリモジ
ュールを再生するためにも役立つ。タスクは、データが
他方のメモリモジュールと同じである状態にそのメモリ
モジュールを戻すことである。この再生モードは、2ス
テツプのプロセスである。まず、メモリがイニシャライ
ズされておらず、パリティエラーを含むかも知れないこ
とを仮定する。そこで良好なパリティの良好なデータが
、すべてのロケーションに書き込まなけれ、ばならない
。これは、この点ですべてゼロである。しかし、すべて
のライト動作が2個のメモリで実行されるので、この第
1ステツプが達成サレる方法は、良好なメモリモジュー
ルのロケーションをリードし、次にこのデータを両メモ
リモジュール14と15の同じロケーションにライトす
ることである。これは、通常の動作が進行中に、実行中
のタスクに挿入されて行われる。I10バス24又は2
5から生じるライトは、第1ステツプでのこの再生ルー
チンにおいて無視される。こうしてすべてのロケ−シラ
ンにライトされた後は、次のステップは、I10アクセ
スもまたライトされることを除いて第1ステツプと同じ
である。すなわち、I10バス24又は25からのI1
0ライトは、実行するタスクにおいて通常のトラフィッ
クにおいて発生するときに、良好なメモリのすべてのロ
ケーションをリードしこの同じデータを両メモリモジュ
ールの同じロケーションにライトすることを挿入して実
行される。この第2ステツプでモジュールがゼロから最
大アドレスまでアドレス指定されたときに、両メモリは
同一になる。この第2の再生ステップの間に、CPUと
I10プロセッサの両方が、エラーなしに全ての動作を
行うようにメモリモジュールが再生されることを期待す
る。I10プロセッサ26.27は、データリード転送
の間に再生されるメモリモジュールによって示されるデ
ータを使用しない。再生プロセスが完了した後で、再生
されたメモリは、(必要ならば)プライマリと指定でき
る。 同様な再プロセスがCPUモジュールに対しても備えら
れる。1個のCPUが(メモリポート回路100による
場合等のように)故障と検出されるとき、他の2個のC
PUは動作を続けるが、悪いCPUボードは、システム
を停止せずに交換できる。新しいCPUボードがオンボ
ードROM63から起動自己テストルーチンを実行する
とき、他のCPUにこのことを示す信号を出力して、再
生ルーチンが実行される。まず、2個の良好なCPUが
その状態をグローバルメモリにコピーし、次に全3個の
CPUが「ソフトリセット」を実行する。ここで、CP
UはROM内のイニシャライズルーチンから実行をリセ
ットし開始する。そうして、全CPUは、命令ストリー
ムの正確に同じ点に来て、同期化され、次Iこ、保存さ
れていた状態が全3個のCPUにコピーして戻され、前
に実行されていたタスクが続行される。 上述したように、各メモリモジュール内のポート回路1
00は、全3個のCPUが同一のメモリ参照をしている
か否かを決定する。もしそうならば、メモリ動作は、完
了まで進むことを許可される。もしそうでなければ、C
PU故障モードに入る。ボート回路100によって検出
されるように、異なったメモリ参照を送信するCPUは
、バス33−1及び/又は33−2で戻されるスティタ
スで同定される。割り込みはポストされ、ソフトウェア
は引き続いて故障CPUをオフラインとする。 このオフラインスティタスは、スティタスバス32に反
映される。故障が検出されているメモリ参照は、3つか
ら2つを選択するポートに基づき完了することを許可さ
れる。つぎに、悪いCPUボードが交換されるまで、ボ
ート回路100は、メモリ参照の進行を許可する前に、
2個の良好なCPUからの2個の同一のメモリ要求を必
要とする。 システムは、通常は、1個の(2個でなく) cpUオ
フラインで動作を続けるように構成されている。しかし
、1個の良好なCPUだけで動作することが希望される
ならば、別の方法が利用できる。 CPUは、もし異なったデータがメモリ要求で検出され
るならばボート回路100によって、又は時間切れによ
って、故障とポートされる。もし2個のCPUが同一の
メモリ要求を送信するが、第3のCPUがあらかじめ選
択された時間切れ期間にどんな信号も送信しないならば
、CPUは故障と仮定され、前のようにオフラインとさ
れる。 システムのI10装置は故障の場合にソフトウェア再統
合のためのメカニズムを備える。すなわち、CPUとメ
モリモジュールコアは、いま説明したように、故障に対
して保護されたハードウェアである。しかし、システム
の110部分は故障に対して保護されたソフトウェアで
ある。1mのI10プロセッサ26または27が誤ると
、上述したようにソフトウェアによってI10プロセッ
サに限定されたコントローラ30は、ソフトウェアによ
って他方のI10プロセッサヘスイッチされる。オペレ
ーティングシステムは、同じコントローラに対する新し
いアドレスを用いてI10ページテーブルのアドレスを
書き直し、その後は、コントローラは他方のI10コン
トローラ26又は27に限定される。エラーすなわち故
障は、バスインターフェース56でバスサイクルを終え
るバスエラーによって検出でき、例外の原因を決定する
例外処理ルーチンを通して核内に急送される例外を発生
し、次に、I10テーブルのアドレスを書き換えること
により)全コントローラ30を、誤ったI10プロセッ
サ26又は27から他方へ動かす。 バスインターフェース56はいま説明したようにバスエ
ラーを検出すると、故障は、再統合スキームが使用され
る前に分離されねばならない。1個のI10プロセッサ
26または27へ、あるいは1個のバス28の1個のI
10コントローラ30へ(すなわち1個のI10素子に
おける1個の制御レジスタ又はスティタスレジスタ、又
はデータレジスタへ)のいずれかにCPUがライト動作
を行うとき、これは、メモリモジュールにおけるバイパ
ス動作であり、両メモリモジュールは動作を実行して、
2個のI10バス24と25にそれを通過させる。2個
のI10プロセッサ26と27は、ともにバス24と2
5をモニタし、パリティをチエツクし、コントローラ1
26を介して適正なシンタックスでコマンドをチエツク
する。例えば、もしCPUがI10プロセッサ26また
は27内のレジスタにライトを実行するならば、もしど
ちらかのメモリモジュールが正当なアドレス、正当なコ
マンド及び正当なデータを示すならば(パリティエラー
がないことと適正なプロトコルによって証明されるよう
に)、アドレス指定された■10プロセッサは、アドレ
ス指定されたロケーシ町ンにデータをライトし、ライト
動作が成功して完了したという肯定応答指示でメモリモ
ジュールに応答する。両メモリモジュール14と15は
、I10プロセッサ26又は27からの応答(第9図の
アドレスとデータの肯定応答信号)をモニタしていて、
両メモリモジュールは、ライン33−1と33−2の動
作スティタスでCPUに応答する。 (もしこれがリードであるならば、プライマリのメモリ
モジュールのみがデータを戻すが、しかし両方がスティ
タスを戻す。)CPUは、両方がライトを正しく実行し
たか、1個だけであったか、無しであったかを決定でき
る。もし1個だけが良好なスティタスを戻し、それがプ
ライマリならば、所有権を変える必要は無い。しかしも
しバックアップが良好に戻され、プライマリが悪く戻さ
れるならば、所有権の変更が強行され、正しく実行した
ものをプライマリにする。どちらの場合も、割り込みが
故障を報告するために入れられる。この点で、CPUは
、悪いのがメモリモジュールであるか、メモリモジュー
ルの下流側の何かであるかを知らない。それで、同様な
ライトがI10プロセッサに対して試みられる。しかし
、これが成功するならば、メモリモジュールが悪いこと
を必ずしも証明する必要が無い。なぜなら、初めにアド
レス指定されたI10プロセッサが例えばバス24また
は25のラインに接続され、パリティエラーを起こした
からである。それで、システムは、選択的に、I10プ
ロセッサのシャットオフと操作のりトライを行い、両メ
モリモジュールが同じI10プロセッサにライト動作を
正しく実行できるかを見る。もしそうならば、システム
は、交換され再統合されるまで悪いI10プロセッサを
オフラインにして動作を実行できる。しかし、もしリト
ライが1個のメモリから悪いスティタスをなお与えるな
らば、メモリをオフラインにでき、あるいは、他の要素
において故障がメモリにあるか無いかを確実にするため
に故障分離ステップがさらに採られる。これは、全コン
トローラ30を1個の110プロセツサ26又は27に
切り換えてオフのI10プロセッサにリセットコマンド
を送り、生きている両メモリモジュールでオンラインの
I10プロセッサとのりトライの通信を出力することを
含む。そして、もしリセットI10プロセッサがバス2
4又は25を悪化させているならば、そのバスドライバ
は、リセットによって切られ、そうして、もしオンライ
ンI10プロセッサへの通信のりトライが(ri6バス
24と25を介して)良好なスティタスを返すならば、
リセットI10プロセッサが故障であることが分かる。 とにかく、各バスエラーに対して、あるタイプの故障分
離シーケンスが実行され、どのシステム部品がオフライ
ンにしなければならないかを決定する。 〈同期〉 図示される実施例において使用されるプロセッサ40は
、第4図aSS図を参照して上に説明したように、重な
った命令実行を行うパイプラインアーキテクチャである
。この実施例において使用される同期技法は、サイクル
計数、すなわち、命令が実行される毎に第2図のカウン
タ71とカウンタ73をインクリメントすることによる
ので(米国出願第118,503号に一般的に開示され
ているように)、何がプロセッサ40における命令の実
行であるかを定義しなければならない。まっすぐな定義
は、パイプラインが進むごとに命令が実行されることで
ある。コントロールバス43の1本のコントロールライ
ンは、パイプラインがストールされることを示す信号ラ
ン#である。ラン#が高レベルであるときは、パイプラ
インはストールされ、ラン#が低レベル(論理0)であ
るときは、パイプラインは各マシンサイクル毎に進む。 このラン#信号は、数値プロセッサ46においてプロセ
ッサ40のパイプラインをモニタするために用いられ、
そうして、このプロセッサ46は、関連するプロセッサ
40とともにロックステップでランすることができる。 コントロールバス43でのこのラン#信号は、クロック
17とともにランサイクルを計数するためにカウンタ7
1と73によって用いられる。 好ましい実施例において、カウンタレジスタ71のサイ
ズは、4096すなわち21!に選ばれる。 これが選択された理由は、クロック17に使用される結
晶発振子の許容範囲が、平均して約4にランサイクルに
おけるドリフトがプロセッサチップ40によってランさ
れるサイクル数において1個のスキューすなわち差を生
じるようなものだからである。この差は、以下に説明さ
れるように割り込み同期の正しい動作を正当に許容する
ようなものである。1つの同期メカニズムは、カウンタ
71がオーバー70−するときはいつでもCPUに同期
を起こさせるように作用を強いることである。 1つのそのような作用は、カウンタ71からのオーバー
フロー信号0VFLに対応してキャシュミスを強いるこ
とである。これは、次の■キャシュのためのコントロー
ルバス43の誤ったミス信号(例えばセットされないタ
ダバリッドビット(TagValid bit)を単に
発生することによって行うことができ、こうしてキャシ
ュミス例外ルーチンをエンターさせ、その結果生じたメ
モリ参照は、任意のメモリ参照が行われるように同期を
確立させる。カウンタ71のオーバーフローに対して同
期させる他の方法は、プロセッサ40にストールをさせ
ることである。これは第2図の論理回路71aを介して
コントロールバス43にCPビジー(コプロセッサビジ
ー)信号を発生するオーバーフロー信号0VFLを用い
て行うことができる。 このCPビジー信号はCPビジーが主張されなくなるま
で、常にプロセッサ40にストールをエンターすること
になる。全3個のプロセッサは、同じコードを実行して
いてそのカウンタ71に同じサイクルを計数するので、
このストールをエンターする。しかし、CPUがストー
ルをエンターする実際の時間は変化する。論理回路71
aは、入力R#を介して他の2個のプロセッサのバス4
3からラン#を受信し、そうして全3個がストールした
ときに、CPビジー信号がリリースされ、プロセッサは
、再び同期してストールから出る。 こうして、2つの同期技法が説明された。第2の技法で
は、同期はメモリモジュールの回路100におけるメモ
リ参照から生じ、第2の技法では、いま説明したように
、カウンタ71のオーバーフローによって生じる。さら
に、以下に説明されるように、割り込みが同期化される
。しかし、注意するべき重要なことは、プロセッサ40
は、基本的にはそれ自身のクロックで自由にランしてい
て、同期イベントが発生する場合を除いて、実質的に相
互に結合されていない。マイクロプロセッサが第4図と
第5図に示されたように使用される事実は、単独のクロ
ックを用いてのロックステップ同期をより困難にしてい
て、性能を低下させている。 また、ライトバッファ50の使用は、プロセッサを結合
しないように役立ち、ましてプロセッサの密接な結合に
有効ではないであろう。同様に、命令キャシュとデータ
キャシュ及びTLB83を用いた仮想メモリ管理からな
る高性能は、密接な結合が使用されたならばさらに困難
になり、性能は悪影響を受けるだろう。 割り込み同期技法は、リアルタイムといわゆる「仮想タ
イム」を区別しなければならない。リアルタイムは、外
部の実際の時間、壁の時計の時間であり、秒単位で測定
され、又はり室上例えば6Qnsecの分割であるマシ
ンサイクルで測定される。もちろん、クロック発生器1
7はそれぞれリアルタイムでクロックパルスを発生する
。仮想タイムは、各プロセッサチップ40の内部サイク
ル計数タイムであり、各のサイクルカウンタ71と73
で測定される。すなわち、プロセッサチップによって実
行される命令の命令数であり、ある任意の開始点からの
命令において測定される。第10図を参照して、リアル
タイム(toからtlmとして示される)と仮想タイム
(命令数(カウントレジスタ73のモジューロ16計数
)!。からIIBとして示される)との間の関係が図示
される。 第10図の各行は、1個のCPU−A、−B又は−Cの
サイクル計数であり、各列は、リアルタイムでの「点」
である。CPUに対するクロックは、位相がずれ易い。 そこで、実際の時間の相関は、第10a図に示されるよ
うなものであり、ここで、命令数(列)は完全には並ん
でおらず、すなわち、サイクル計数は、並べられたリア
ルタイムマシンサイクルの境界で変化しない。しかし、
fllO図の図示は、説明の目的には十分である。第1
0図において、リアルタイムt、でCPU−Aは第3の
命令にあり、CP U−Bは計数9にあり9番目の命令
を実行していて、CP U−Cは4番目の命令にある。 リアルタイムも仮想タイムも進むことが可能なだけであ
ることに注意する。 CPUのプロセッサチップ40は、リソースが利用出来
ないある条件の下でストールする。例えば、ロードまた
は命令7エツチの間のDキャシュ45または■キャシュ
44のミス、ライトバッファ50がストア動作の間に一
杯であるという信号、コプロセッサ46がビジーである
(コプロセッサが、データ依存性又は制限された処理リ
ソースにより取り扱えない命令を受信した)というコン
トロールバス43を介しての「CPビジーJ信号、また
はマルチグライア/デバイダ79がビジーである(内部
のマルチグライア/デバイダ回路が、プロセッサが結果
レジスタをアクセスしようとしたときに動作を完了して
いなかった)ことである。 もちろん、キャシュ44と45は、プロセッサ40によ
る介在なしに状態を変化しない「パッシブリソース」で
ある。しかし、残りのものは、プロセッサがなんら作用
しなくても状態を変化出来るアクティブリソースである
。例えば、ライトバッファ50は、(プロセッサが他の
ストア動作を行わない限り)プロセッサによる作用なし
にフルからエンプティに変化する。そこでストールに、
パッシブリソースのストールとアクティブリソースのス
トールの2つのタイプがある。アクティブリソースのス
トールは、インターロックストールと呼ばれる。 CPU−A、−B、−Cで実行されるコードストリーム
が同一であるので、3個のcPUのキャシュ44と45
のようなパッシブリソースの状態は、仮想タイムの総て
の点で必然的に同じである。もしストールがパッシブリ
ソース(例えばデータキャシュ45)での衝突の結果で
あれば、全3個のプロセッサはストールを行い、ただ1
つの変数は、ストールの長さである。第11図を参照し
て、キャシュミスが■、で発生し、このミスの結果のグ
ローバルメモリ14又は15へのアクセスが8クロツク
(実際には8クロツク以上であってもよい)の時間がか
かったと仮定する。この場合、CPU−Cは、tlでグ
ローバルメモリ14又は15へのアクセスを開始し、グ
ローバルメモリのコントローラ117は、第1のプロセ
ッサCPU−Cがメモリアクセスの開始を信号するとき
にメモリアクセスを開始する。コントローラ117は、
cPU−Bとc p u−cがそれぞれメモリアクセス
に必要な8クロツクより少なくストールするけれども、
アクセス8クロツク遅れてt、で完了する。その結果、
全CPUは、リアルタイムでも仮想タイムでも同期され
る。この例は、また、DRAMIO4へのアクセスの重
複と回路100でのボーティングとの利点を示す。 インターロックストールは、パッシブリソースストール
から異なった状況を示す。1個のCPUは、他のCPU
が全くストールをしないときにインターロックストール
をすることが出来る。第12図を参照して、ライトバッ
ファ50によって起こされるインターロックストールが
図示される。 CPU−A、!−CPU−Bのサイクル計数が示され、
CPU−AとCP U−Bのライトバッファ50からの
フル(full) 7ラグA。とBwbが、サイクル計
数の下に示される(ハイレベルすなわち論理lはフルを
意味し、ローレベルすなわち論理0はエンプティを意味
する)。CPUはストア動作が実行される毎に、フルフ
ラグの状態をチエツクする。 もしフルフラグがセットされるならば、CPUは、フル
フラグがクリアされストア動作を完了するまでストール
する。ライトバッファ50は、もしストア動作がバッフ
ァを満たすならば、フルフラグをセットし、ストア動作
がバッファから1ワードを流出して次のCPUストア動
作のための位置をフリーにするときはいつでもフルフラ
グをクリアする。時間t、で、CPU−Bは、3クロッ
クCPU−Aの先にあり、ライトバッファは共にフルで
ある。ライトバッファがグローバルメモリにライト動作
を行っていると仮定すると、このライトが
【、の間に完
了するとき、ライトバッファフルフラグはクリアされる
。このクリアは、リアルタイムで(、に同期して起こる
が(第11図に図示される理由により)、仮想タイムで
は同期していない。いま、サイクル計数!、での命令は
、ストア動作であると仮定すると、CPU−Aは、ライ
トバッファフルフラグがクリアされた後でt、でこのス
トアを実行するが、しかし、CP U−Bはt。 でこのストア命令を実行し、そうして、ライトバッファ
フルフラグがなおセットされていることを見いだして3
クロツクの間ストールをしなければならない。こうして
、CPU−Bはストールをするが、CP U−Aはスト
ールをしない。 1個のCPUはストールをするかも知れず他のCPUは
ストールをしないかも知れないという性質は、サイクル
カウンタ71の解釈に制限を課する。第12図において
、割り込みがサイクル計数■7で(cP U−Bが■、
命令からストールをしている間に)複数のCPUに示さ
れたと仮定する。 サイクル計数I、に対するランサイクルは、jFで両C
PUに対して起こる。もしサイクルカウンタだけがCP
Uに割り込みを示すなら、CPU−Aはサイクル計数!
、で割り込みを見るが、CPU−Bはサイクル計数!、
から生じるストールサイクルの間に割り込みを見る。そ
うして、割り込みを示すこの方法が、この2個のCPU
に異なった命令での例外、もし全CPUがストールされ
るか又はストールされていない場合には起こらないよう
な条件が採用される。 サイクルカウンタの解釈についての別の制限は、サイク
ル計数の検出と作用の実行との間に遅れがあってはなら
ないことである。再び第12図を参照して、割り込みが
サイクル計数1.でCPUに示されるが、実行の制限の
ために余分のクロックの遅れがサイクル計数■、の検出
とCPUへの割り込みの提示の間に介在すると仮定する
。その結果は、CPU−Aが、この割り込みをサイクル
計数I7で確認するが、CPU−Bは、サイクル計数■
、からのストールの間に割り込みを確認して、2個のC
PUに異なった命令で例外を採らせる。 再び、リアルタイムで命令パイプラインの状態をモニタ
することの重要性が図示される。 〈割り込み同期〉 第1図から第3図までの3個のCPUは、単独の論理プ
ロセッサとして機能することが要求され、従って、3個
のCPUのプログラミングモデルが単独の論理プログラ
ミングのプログラミングモデルであることを保証するた
めにその内部状態に関しである制限を実行することを要
求する。誤りモードや診断モードを除いて、上記3(I
lのCPUの命令ストリームは同一であることが要求さ
れる。 もし同一でなかったら、第6図のボーティング回路10
0でのグローバルメモリアクセスのボーティングが困難
になるだろう。すなわち、ボートするものは、1個のC
PUが故障しているのか、異なったシーケンスの命令を
実行しているのか分からない。同期スキームは、もし任
意のCPUのコードストリームが、その他のCPUのコ
ードストリームから分岐するならば故障が起こったと仮
定するように設計される。割り込み同期は、単独のCP
Uイメージを維持する1つのメカニズムを提供する。 すべての割り込みは、仮想タイムに同期して起こること
が要求され、3個のプロセッサCPU−A%CPU−B
とCPU−Cの命令ストリームが割り込みの結果として
分岐しないことを保証する(分岐する命令ストリームに
は他の原因もある。例えば、1個のプロセッサが他のプ
ロセッサによってリードされたデータと異なったデータ
をリードすること)。仮想タイムに対して非同期に起こ
る割り込みがコードストリームを分岐させるシナリオは
、いくつかある。例えば、プロセスAが完了する前にフ
ンチクストスイッチをオンにさせるがプロセスAが他の
CPUで完了した後でフンチクストスイッチをオンにさ
せる割り込みは、その後のある点で、1個のCPUがプ
ロセスAの実行を続けるが他方のCPUはプロセスAが
既に完了しているためプロセスAを実行出来ないという
状況をもたらす。もしこの場合に割り込みが仮想タイム
に非同期に起こるならば、例外プログラムカウンタが異
なるという事実が問題を起こすであろう。 例外プログラムカウンタの値をグローバルメモリに書き
込む行為は、ポーターが3個のCPUから異なったデー
タを検出し、ボート7オールトを生じるという結果にな
るだろう。 CPUにおけるあるタイプの例外は、本来仮想タイムに
同期している。1つの例は、ブレークポイント命令の実
行によって生じるブレークポイント例外である。全CP
Uの命令ストリームが同一なので、ブレークポイント例
外は3個のCPUにおける仮想タイムにて同じ点で生じ
る。同様に、全てのそのような内部例外は、本来仮想タ
イムに同期して生じる。例えば、TLB例外は本来同期
する内部例外である。TLB例外は仮想ページ数がTL
B83のどのエントリにも適合しないために生じる。ア
ドレスを解釈するということが(ブレークポイント例外
におけるように正確に)単に命令ストリームの機能なの
で、解釈は、本来仮想タイムに同期する。TLB例外が
仮想タイムに同期することを確実にするために、TLB
83の状態は全3個のCPUII、12.13において
同一でなければならず、これは、TLB83がソフトウ
ェアだけによって変更できるので、保証される。再び、
全CPUが同じ命令ストリームを実行するので、TLB
83の状態は常に仮想タイムに同期して変化される。そ
うして、−殻内経験則として、もし行動がソフトウェア
により実行されるなら、その行動は仮想タイムに同期し
ている。もし行動がサイクルカウンタを用いないハード
ウェアにより実行されるなら、その行動は一般にリアル
タイムに同期である。 外部の例外は、本来仮想タイムに同期していない。I1
0装置26.27又は28は、3個のCPUII、12
、及び13の仮想タイムについて情報を有しない。従っ
て、I10装置によって発生される全ての割り込みは、
以下に説明するように、CPUに示される前に仮想タイ
ムに同期されなければならない。浮動点例外は、浮動点
コプロセッサ46がCPU内でマイクロプロセッサ40
に堅く結合されるので、I10装置割り込みと異なって
いる。 外部装置は、3個のCPUを1つの論理的プロセッサと
して見て、CPU間の同期や同期の欠乏についての情報
を有しない。従って、外部割り込みは、各CPUの個々
の命令ストリーム(仮想タイム)と同期である割り込み
を生成することが出来ない。どのような種類の同期も無
ければ、もしある外部装置がリアルタイム1.の時間に
割り込みを駆動し、その割り込みがその時間に全CPU
に直接水されるならば、3個のCPUは、異なった命令
で例外トラップをとり、3個のCPUのアクセプトされ
ない状態が生じる。これは、リアルタイムに同期である
が仮想タイムに同期しないイベント(割り込みの主張)
の例である。 複数の割り込みは、第1図から第3図までのシステムに
おいて、割り込みについて分散されたポートを実行し、
決定されたサイクル計数でプロセッサに割り込みを示す
ことにより、仮想タイムに同期する。第13図は、第2
図の割り込み同期論理回路65のより詳細なブロック図
を示す。各CPUは、モジュール14又は15から生じ
るライン69又は70からの外部割り込みを捕捉する分
配器135を含む。この捕捉はあらかじめ決定されたサ
イクル計数で、例えばカウンタ71から入力ラインCC
−4上で信号が出力される計数−4で起こる。捕捉され
た割り込みは、020間バス18を介して他の2個のC
PUへ分配される。これらの分配された割り込みは、未
決定割り込みと呼ばれる。各CPUII、12.13か
ら1個の3個の未決定割り込みがある。ポータ回路13
6は、未決定割り込みを捕捉出力、全CPUが外部割り
込み要求を受信したかを確認するポートを行う。 (サイクルカウンタ71で検出される)あらかじめ決定
されたサイクル計数で、この例では入力ラインCG−8
により受け取られたサイクル8で、割り込みポータ13
6は、ライン137とバス55と43を介して各マイク
ロプロセッサ40の割り込みビンに割り込みを示す。割
り込みを示すために用いられるサイクル計数があらかじ
め決定されているので、全マイクロプロセッサ40は、
同じサイクル計数で割り込みを受け取り、こうして、割
り込みが仮想タイムに同期されている。 第14図は、仮想タイムに対して割り込みを同期するた
めのイベントのシーケンスを示す。CPU−A、CPU
−B及びCPU−Cと示された行は、リアルタイムでの
1点での各CPUのカウンタ71におけるサイクル計数
を示す。IRQ A PENDING、IRQ
B PENDING及びIRQ B、PENDIN
Gと示された行は、ポータ136の入カヘCPU間バス
18を介して結合される割り込みの状態を示す(lは、
未決定ビットがセットされていることを意味する)。I
RQA、IRQ B、及びIRQCと示された行は、
マイクロプロセッサ40の割り込み入力ビンの状態(ラ
イン137の信号)を示し、ここで1は割り込みが入力
ビンに存在することを意味する。 第14図で、外部の割り込み(EX IRQ)は、1
、でライン69に主張される。もし割り込み分配器13
5が割り込みを捕捉し、020間バス18にサイクル計
数4で分配するならば、IRQCPENDINGは時間
1.でlになり、IRQ B PENDINGは時
間t2で1になり、IRQ A PENDINGは
時間t、でlになる。もし割り込みポータ136がサイ
クル計数8で割り込み未決定ビットをポートするならば
、IRQ Cは時間t、でlになり、IRQ Bは
時間t6で1になり、IRQ Cは時間t、で1にな
る。その結果、割り込みは、リアルタイムでは異なった
点であるが仮想タイムでは同一の点(すなわちサイクル
計数8)でCPUに示される。 第15図に、第14図に示されたアルゴリズムを必要と
するシナリオを変更して示す。ここではサイクルカウン
タ71がモジューロ8カウンタにより表されることに注
意する。外部割り込み(EX IRQ)は時間t、で
主張される。割り込み分配器135はこの割り込みを捕
捉し、サイクル計数4で020間バス18に割り込みを
分配する。 CPU−BとCPU−Cが時間t3の前にサイクル計数
を実行しているので、その割り込み分配器は外部割り込
みを捕捉することができない。しかし、CPU−Aは時
間t、の前にサイクル計数を実行する。その結果、CP
U−Aは時間t4で外部割り込みを捕捉して分配する。 しかし、もし割り込みポータ136がサイクル計数7で
割り込み未決定ビットを捕捉してボートするならば、C
PU−Aの割り込みボータ136は、他の2個の割り込
み未決定ビットがセットされていないとき、時間t7で
IRQ A PEND信号を捕捉する。CPU−A
の割り込みボータ136は全てのCPUが外部割り込み
を分配していないことを認識し、捕捉された割り込み未
決定ビットを保持レジスタ138に出力されて格納され
る。CPU−BとCPU−Cの割り込みボータ136は
単独の割り込み未決定ビットをそれぞれ時間1.とt4
に捕捉する。CPU−Aの割り込みボータのように、こ
れらのボータは、全ての割り込み未決定ビットがセット
されていないことを認識し、こうして、セットされた単
独の割り込み未決定ビットが保持レジスタ138に出力
されて格納される。各CPUのサイクルカウンタ71は
、サイクル計数7に達するとき、ロールオーバーし、サ
イクル計数0で計数を開始する。外部割り込みはまだ主
張されているので、CPU−BとCPU−Cの割り込み
分配器135は、それぞれ時間t1゜とt、で外部割り
込みを捕捉する。これらの時間は、サイクル計数が4に
等しくなったときに対応する。時間tl!で、CPU−
Cの割り込みボータは、020間バス18に割り込み未
決定ビットを捕捉する。ボータ136は、全C外部割り
込みを捕捉して分配することを決定し、プロセッサチッ
プ40に割り込みを示す。時間【13と時間t’sに、
CP U−BとCPU−Aの割り込みボータ136は、
割り込み未決定ビットを捕捉し、割り込みをプロセッサ
チップ40に示す。その結果、全プロセッサチップが同
じ命令で外部割り込み要求を受信したことになり、保持
レジスタに保存されていた情報は必要で無くなる。 〈保持レジスタ〉 第15図に関して上述に示された割り込みシナリオにお
いて、ボータ136は、若干のステート割り込み情報を
保存するために保持レジスタ138を使用する。特に、
保存されたステートは、全CPUでなくいくつかのCP
Uが外部割り込みを捕捉し分配したことであった。もし
システムが(第15図の状況のように)どんな故障もし
無い場合は、前の例に示したように、外部割り込みが保
持レジスタの使用なしに仮想タイムに同期出来るので、
このステート情報は必要でない。アルゴルズムは、割り
込みボータ136が割り込み未決定ビットをあらかじめ
決定されたサイクル計数で捕えボートすることである。 全ての割り込み未決定ビットが主張されるとき、割り込
みは、そのあらかじめ決定されたサイクル計数でプロセ
ッサチップ◆こ示される。第15図の例において、割り
込みはサイクル計数7でボートされた。 第15図を参照して、もしc p u−cが誤りをし、
誤りモードが割り込み分配器135が正しく機能しない
ようなものであれば、このとき、もしプロセッサチップ
40に割り込みを示す前に全割り込み未決定ビットがセ
ットされるまで割り込みボータ136が待つならば、そ
の結果、割り込みは示されるようになることは無い。こ
うして、ただ1個のCPUのただ1個の誤りが全CF’
Uについての全体の割り込みのチェーンを機能できない
ようにする。 保持レジスタ138は、最後の割り込みボートサイクル
が全部ではないが少なくとも1個の割り込み未決定ビッ
トを捕捉したことをボータ136が知るメカニズムを提
供する。割り込みボートサイクルは、割り込みボータが
割り込み未決定ビットを捕捉しボートするサイクル計数
で起こる。数個の割り込み未決定ビットがセットされる
結果となる2つだけのシナリオがある。1つは、第15
図に関連して示された示されたシナリオであって、ここ
では、外部割り込みは、あるCPUの割り込み分配サイ
クルの前であるがその他のCPUの割り込み分配サイク
ルの後に主張される。vg2のシナリオでは、少なくと
も1個のCPUが、割り込み分配器をディスエーブルに
するような誤りをする。もし数個の割り込み未決定ビッ
トだけが割り込みボートサイクルでセットされる理由が
第1のシナリオであるならば、割り込みボータは、全割
り込み未決定ビットが次の割り込みボートサイクルでセ
ットされることが保証される。従って、もし保持レジス
タがセットされていて全部でない割り込み未決定ビット
がセットされていることを割り込みボータが発見するな
らば、エラーが1個以上のCPUに存在するはずである
。これは、各CPUの保持レジスタ138が割り込みサ
ービス時にクリアされることを仮定する。そのため、保
持レジスタの状態は割り込み未決定ビットについての新
鮮でない状態を表さない。エラーの場合、割り込みボー
タ136は、プロセッサチップ40に割り込みを示すこ
とができ、同時に、エラーが割り込み同期論理回路によ
って検出されたことを示す。 割り込みボータ136は、実際にはどんなボーティング
もせず、その代わり割り込み未決定ビットと保持レジス
タ137の状態を検査して、プロセッサチップ40に割
り込みを示すか否かと割り込み論理回路にエラーを示す
か否かを決定するだけである。 くモジューロサイクルカウンタ〉 第15図の割り込み同期の例は、割り込みカウンタをモ
ジューロNカウンタ(例えばモジューロ8カウンタ)と
して表した。モジューロNサイクルカウンタの使用は、
割り込みボートサイクルの概念を可能にすることにより
、割り込みボーティングアルゴリズムの説明を簡単にし
た。モジューロNサイクルカウンタを使用すると、割り
込みボートサイクルは、0とN−1(Nはサイクルカウ
ンタのモジューロである)の間にある単独のサイクル計
数として説明できる。サイクルカウンタのどんな数も割
り込みボートサイクルのために選択でき、サイクル計数
は、Nサイクル計数毎に起こることが保証される。モジ
ューロ8カウンタに対して第15図に示されるように、
割り込みボートサイクルは8計数毎に起こる。割り込み
ボートサイクルは、モジューロNサイクルカウンタの周
期的性質を説明するためにだけここで用いられる。 モジューロNサイクルカウンタの特定のサイクル計数に
キーとなるどのイベントもNサイクル計数毎に起こるこ
とが保証される。明らかに、不定数(すなわち非反復性
カウンタ71)は使用できない。 Nの値は、システムに正の効果を持つシステムパラメー
タを最大にし、システムに負の効果を持つシステムパラ
メータを最小にするように選択される。まず、いくつか
のパラメータが示される。 C7とC4は、それぞれ、割り込みボートサイクルと割
り込み分配サイクルである(第13図の回路では、これ
らはそれぞれCG−8とCC−4である)。CG−8と
CG−4の値は、0とN−1(Nはサイクルカウンタの
モジューロである)の間の範囲にあらねばならない。D
+++ a wは、同期論理回路によって許容され得
る3個のプロセッサCPU−A。 CPU−B及びcpu−cの間のサイクル計数ドリフト
の最大量である。このプロセッサドリフトは、リアルタ
イムの1点で各CPUからサイクルカウンタ71のスナ
ップショットをとることにより決定される。ドリフトは
、最も遅いCPUのサイクル計数を最速のCPUのサイ
クル計数から差し引くこと(モジューロN減算としてな
される)により計算される。D m a wの値は、N
とC,と04の関数として表される。 まず、D□、は、差C,−C,の関数として表される。 ここに、差演算はモジューロN減算として実行される。 これは、I)+++amを最大にするC1とC4の値を
選択することを可能にする。第16図のシナリオを参照
し、C1−8とC4−9を仮定する。 第16図から、プロセッサドリフトはD□ヨー4である
と計算出来る。ライン69の外部割り込みは、時間t、
で主張される。この場合、CP U−Bは、時間【、で
割り込みを捕捉し分配する。このシナリオは、前に示さ
れた割り込み同期アルゴリズムとつじつまが合わない。 なぜなら、CPU−Aが割り込み分配サイクルを行った
前にCPU−Bがその割り込みボートサイクルを実行す
るからである。このシナリオの欠陥は、C1とC4の差
よりも更に離れてドリフトすることである。この関係は
、形式的に次のように書くことができる。 方程式(1) Cv Ca (066w−eここ
に、eは、CPU間バス18に伝達される割り込み未決
定ビットのために必要な時間である。 前の例では、eはOと仮定されていた。壁時計の時間が
クロックサイクル(ランサイクル)のインクリメントで
量子化されているので、eも量子化出来る。こうして、
次の式が得られる。。 方程式(2) cv−c、< D、、、、−1ここ
に、D7.9は、サイクル計数の整数値として表される
。 次に、最大のドリフトがNの関数として表すことができ
る。第17図は、N−4でプロセッサドリフトD−3の
場合のシナリオを示す。Ca −0と仮定する。各プロ
セッサのサイクル計数0における減算は、命令サイクル
計数の商の部分(Q)を表す。サイクル計数がいまモジ
ューロNにて示されるので、サイクルカウンタの値は、
I/N(1は、時間t0以来実行された命令数である)
の剰余である。命令サイクル計数のQは、I/Nの整数
部分である。もし外部割り込みが時間t、に主張される
ならば、CPU−Aは、時間り、に割り込みを捕え分配
し、CPU−Bは、時間t、に割り込み分配サイクルを
実行する。CP U−Aに対する割り込み分配サイクル
がQ−1でありCPU−Bに対する割り込み分配サイク
ルがQ−2であるので、これは問題を示す。同期論理回
路は、問題が無いかのように続行し、こうして等しいサ
イクル計数でプロセッサに割り込みを示す。しかし、各
プロセッサのQは異なっているので、割り込みは異なっ
た命令で複数のプロセッサに示される。従って、Nの関
数としてのDll、の関係は次式で表される。 方程式(3) N/2 > n、、。 ここに、Nは偶数であり、D、、、はサイクル計数の整
数として表される。ここで、方程式(2)と(3)は共
に標本化理論におけるナイキストの定理に等価であるこ
とを示すことができる。方程式(2)と(3)とを結合
することによって次式を得る。 方程式(4) c、−ca < N/2−1ここ
に、Nの与えられた値に対してC9とC4の最適の値が
選択できる。 上述の全方程式は、Nが出来るだけ大きくあるべきであ
るこ、とを示唆する。Nを小さくさせようとする唯一の
因子は、割り込みの潜在である。割り込みの潜在は、ラ
イン69での外部割り込みの主張とライン137でのマ
イクロプロセッサチップへの割り込みの提示との間の時
間間隔である。 どのプロセッサが割り込みの潜在を決定するために使用
されるべきかは明快な選択でない。3個のマイクロプロ
セッサは、クロック源における結晶発振子におけるわず
かな違いや他の因子のために異なった速度で動作する。 最も高速のプロセッサと、最も遅いプロセッサと、その
他のプロセッサがある。システムの性能は最も遅いプロ
セッサの性能によって最終的に決定されるので、最も遅
いプロセッサに関して割り込みの潜在を定義することは
合理的である。最大の割り込みの潜在は、方程式(5)
L3.、− 2N−1 であり、ここに、L、1.は、サイクル計数で表された
最大の割り込みの潜在である。最大の割り込みの潜在は
、最速のプロセッサの割り込み分配サイクルC4の後で
あるが最も遅いプロセッサの割り込み分配サイクルC4
の前に外部割り込みが主張されたときに、最大の割り込
みの潜在が起こる。 平均の割り込みの潜在の計算は、最速のプロセッサの割
り込み分配サイクルの後でかつ最も遅いプロセッサの割
り込み分配サイクルの前に外部割り込みが起こる確率に
依存するので、さらに複雑である。この確率は、多数の
外部因子によって順番に決定されるプロセッサ間のドリ
フトに依存する。 もしこれらの確率がOであるならば、平均の潜在は次の
式で表される。 方程式(6) L、、、=N/2 (c,CJこれ
らの関係式を用いて、N、C,、及びC4の値が、Dや
1.と割り込みの潜在とに対するシステムの要請を使用
して決定される。例えば、N−128、(c,−C,)
−10,L、、、−74又は約4゜4マイクロ秒(スト
ールサイクルなしで)を選択する。4ビツト(4つの2
進ステージ)71aが割り込み同期カウンタとして使用
され、分配出力とポート出力が説明したようにCC−4
とCG−8にある好ましい実施例を用いて、N−15,
C。 −8,Cd−4であることが分かり、そうして、L、、
、−16/2+ (8−4)−12サイクルすなわち0
.7ミリ秒である。 くローカルメモリのためのりフレッシュ制御〉リフレッ
シュカウンタ72は、カウンタ71と71aがまさに計
数するのと同様に、(マシンサイクルでなく)非ストー
ルサイクルを計数する。 目的は、リアルタイムよりはむしろ仮想タイムで測定し
て、同じサイクル計数で各CPUにリフレッシュサイク
ルを導入ことである。好ましくは、各CPUは、命令ス
トリームにおいて他のCPUと同じ点でリフレッシュサ
イクルを課する。ローカルメモリ16のDRAMは、グ
ローバルなメモリについて上述したように8ms e
c毎に512サイクルの周期でリフレッシュされねばな
らない。 こうして、カウンタ72は、512の1行をアドレスし
て、15ms e c毎に1回DRAMI 6iこりフ
レッシュコマンドを出力しなければならない。 もしメモリ動作がリフレッシュの間に要求されたならば
、リフレッシュが終了するまでビジ一応答が生じる。し
かし、各CPUにそれ自身のローカルメモリのリフレッ
シュをリアルタイムで他のCPUに独立に処理させるこ
とは、CPUを同期から外れさせ、従って、余分な制御
が必要になる。 例えば、もし丁度除算命令が始まるようにリフレッシュ
モードがエンターされるならば、タイミングは、1個の
CPUが他のCPUより2クロツクだけ長くかかるよう
なタイミングになる。又は、もし割り込み可能でないシ
ーケンスがより高速なCPUによりエンターされ他のC
PUがこのルーチンにエンターする前にリフレッシュに
入るならば、CPUは、相互に離れていく。しかし、こ
れらの問題のいくつかを避けるためのサイクルカウンタ
71を(リアルタイムの代わりに)使用することは、ス
トールサイクルが計数されないことを、意味する。そし
て、もしルーズに入って多くのストールを生じさせるな
らば(7対lのストールサイクルを生じさせることが可
能ならば)、周期が15m5ecの数値から著しく減少
されないならば、リフレッシュの仕様に合わず、性能を
劣化させる。 この理由のために、第2図に示されるように、ストール
サイクルは第2カウンタ72aでも計数され、このカウ
ンタがリフレッシュカウンタ72で計数されるのと同じ
数に達する毎に、追加のリフレッシュサイクルが導入さ
れる。例えば、リフレッシュカウンタ72は、カウンタ
71と歩調を合わせて、21すなわち256ランサイク
ルを計数し、オーバーフローのときにリフレッシュ信号
が制御バス43を介して出力される。一方、カウンタ7
2aは、(ラン#信号とクロック17に応答して)28
ストールサイクルを計数し、オーバーフローする毎に第
2カウンタ72aがインクリメントされる(カウンタ7
2bは単に8ビツトカウンタ72aのためのビット9か
ら11であってもよい)。 そうして、リフレッシュモードが最後にエンターされ、
CPUはカウンタレジスタ72bの数によって示される
多数の追加のりフレッシュを行う。こうして、もし長期
間のストールインテンシブな実行が起こるならば、リフ
レッシュの平均数は、15マイクロ秒毎に1つの範囲内
にあり、もし7X256までのストールサイクルが介在
されるならば、最後にリフレッシュモードに行くときに
リフレッシュされた行の数が名目上のリフレッシュ速度
まで追い付くので、リフレッシュサイクルを任意に短く
することにより性能の劣化はない。 〈メモリ管理〉 第1図から第3図までのCPUII、12、及び13は
、第18図に図示されるように組織されたメモリ空間を
備える。ローカルメモリ16が8Mバイトであり、グロ
ーバルメモリ14又は15が32Mバイトである例を用
いて、ローカルメモリ16が、キャシュすなわち別のメ
モリ空間であるよりはむしろ、CPUメモリアクセス空
間の同じ連続的な0から40Mバイトまでのマツプの一
部である。0から8Mバイトまでの部分を(3個のcp
uモジュールで)3重化し、8から40Mバイト部分を
2重化しているが、論理的には単に1つの0から40M
バイトまでの物理アドレス空間があるだけである。バス
54で8Mバイトを越えたアドレスは、バスインターフ
ェース56にメモリモジュール14と15に要求をさせ
るが、1しかし、8Mバイト以下のアドレスは、CPU
モジュールそれ自身内でローカルメモリ164こアクセ
スする。性能は、ローカルメモリ16で実行されるアプ
リケーションにより使用されるメモリをより多く配置す
ることにより改善される。そして、もしメモリチップが
高密度でより低コストでより高速で利用できるならば、
追加のローカルメモリが、追加のグローバルメモリと同
様に付加される。例えば、ローカルメモリが32Mバイ
トであって、グローバルメモリが128Mバイトであっ
てもよい。一方、非常に低コストのシステムが必要なら
ば、性能は主要な決定的なファクタではなく、システム
は、ローカルメモリなしに動作でき、そのような構成で
は性能の不利益が高いけれども、すべてのメインメモリ
はグローバルメモリエリア(メモリモジュール14と1
5)である。 第18図のマツプのローカルメモリ部分141の内容は
、3個のCPUII、12及び13における内容と同一
である。同様に、2個のメモリモジュール14と15は
、どの与えられた瞬間でもその空間142内の同じデー
タを全く同様に含む。 ローカルメモリ部分141内にはUNIXオペレーティ
ングシステムのための核143(′:I−ド)が格納さ
れ、このエリアは、各CPUのローカルメモリ16の固
定された部分内に物理的にマツピングされる。同様に、
核データは、各ローカルメモリ16の固定されたエリア
141に割り当てられる。ブートアップの時を除いて、
これらのブロックは、グローバルメモリ又はディスクへ
、又はグローバルメモリ又はディスクから交換されない
。 ローカルメモリの他の部分145は、ユーザプログラム
(及びデータ)のページのために使用され、これらのペ
ージは、オペレーティングシステムの制御の下にグロー
バルメモリ14と15のエリア146に交換される。グ
ローバルメモリエリア142は、エリア146における
ユーザーページのためのステージングエリア(stag
ing area)として、またエリア147における
ディスクバッファとして使用される。もし全CPUが1
ブロツクのデータのライトを行うコード又はローカルメ
モリ16からディスク148へのコードを実行するなら
ば、ディスクバッファエリア147にコピーをするため
の時間はI10プロセッサ26と27に直接にそしてI
10コントローラ30を介してディスク148にコピー
をする時間に比べて無視できるので、シーケンスは、そ
の代わりディスクバッファエリア147にライトを行う
ことである。次に、全CPUが他のコードの実行を進め
る間に、このディスクにライトをする動作が行われて、
゛全CPUに対してトランスペアレントに、そのブロッ
クをエリア147からディスク14gへ移動する。 同様な方法で、グローバルメモリエリア146は、ディ
スク以外のI10アクセス(例えばビデオ)の同様な処
理のために、I10ステージングエリア149を含んで
マツピングされる。 、j第18図の物理的メモリマツ
プは、各CPU内のプロセッサ40の仮想メモリ管理シ
ステムと関連する。第19図は、実施例において使用さ
れたR2000プロセツサチツプの仮想アドレスマツプ
を図示する。しかしながら、ページングと保護メカニズ
ムを備えた仮想メカニズム管理を支持する他のプロセッ
サチップが対応する特徴を備えるであろうことが理解さ
れる。 第19図において、2つの別々の2Gバイトの管理アド
レス空間150と151が図示される。 プロセッサ40は、2つのモード、ユーザーモードと核
モード、の1つで動作する。当該プロセッサはただ、ユ
ーザーモードにおいてエリア150をアクセスでき、も
しくは核モードにおいて両エリア150と151をアク
セスすることができる。 核モードは、多くの計算機に備えられている監視モード
と同類である。プロセッサ40は、例外が検出されてモ
ードを核モードに強いるまでは、通常はユーザーモード
で動作するように構成され、ここで、例外からのりスト
ア(RFE)命令が実行されるまで核モードにとどまる
。メモリアドレスが翻訳されすなわちマツピングされる
方法は、マイクロプロセッサのオペレーティングモード
に依存し、これはスティタスレジスタの1ビツトによっ
て定義される。ユーザーモードにあるときに、2Gバイ
トの’kuseg″として参照される単独の−様な仮想
アドレス空間150を利用できる。 各仮想アドレスはまた、最大64個のユーザープロセス
のための一義的仮想アドレスを形成するために、6ビツ
トのプロセスアイデンティファイア(PID)フィール
ドを用いて拡張される。ユーザーモードにおけるこのセ
グメント150までのすべての参照は、TLB83を介
してマツピングされ、キャシュ144と145の使用は
、 ”l”LBエントリにおける各ページエントリのた
めのビットセツティングによって決定される。すなわち
、あるページは、キャシュ可能で有り得るし、あるペー
ジはプログラマによって特定されるのでキャシュ可能で
ない。 核モードにあるとき、仮想メモリ空間は、第19図の両
エリア150と151を含む。この空間は、4つの別々
のセグメントku36gエリア150、ksegoエリ
ア152、kseglJ−リア153及びl(seg2
エリア154ををする。 核モードのためのkusegエリア150のセグメント
は、ユーザーモードの”kuseg”エリアに対応して
2Gバイトのサイズを有する。従って、核モードにおい
て、プロセッサはまさにユーザーモードの参照における
ようにこのセグメントに対して参照を行って、ユーザー
データへの核アクセスを能率化する。kusegエリア
150は、ユーザーコードとユーザーデータを保持する
ために使用される。しかし、オペレーティングシステム
は、しばしばこの同じコード又はデータを参照すること
を必要とする。上記ksegOエリア152は、物理的
アドレス空間の初めの512Mバイトに直接にマツピン
グされる512Mバイトの核物理的アドレス空間であり
、キャシュされるが、TLB83を使用しない。このセ
グメントは、核実行可能コードとある核データのためζ
;使用され、ローカルメモリ16内に第18図のエリア
143によって表される。上記kseglエリア153
は、ksegoエリアと同様に、物理的アドレス空間の
初めの512Mバイトに直接にマツピングされ、キャシ
ュされず、TLBエントリを用いない。kseglエリ
アは、キャシュされないことだけがksegoエリアと
異なる。kseglエリアは、■10レジスタ、ROM
コード及びディスクバッファのためのオペレーティング
システムによって使用され、第18図の物理的マツプの
エリア147と149に対応する。kseg2エリア1
54は、IGバイトの空間であり、kusegエリアの
ように、キャシュを用い又は用いずに、任意の物理的ア
ドレスに仮想アドレスをマツピングするためのTLB8
3エントリを使用する。このkseg2エリアは、ユー
ザーモードにおいてアクセスできず、核モードにおいて
のみアクセスできるということだけが、k、usegエ
リア150と異なる。オペレーティングシステムは、ユ
ーザーページテーブル(メモリマツプ)のためと動的に
割り当てられるデータエリアのために、qンテキストス
イッチに再びマツピングしなければならないスタックと
バープロセスデータ(per−process dat
a)のためにkseg2エリアを使用する。kseg2
エリアは、全てか無かのアプローチを必要とするよりは
むしろ、パーページベーシス(per page ba
sis)への選択的キャシングとマツピングを可能にす
る。 マイクロプロセッサチップのレジスタ76又はPC80
とバス84での出力に発生される32ビツトの仮想アド
レスは、第20図に示される。ここで分かるように、ビ
ット0−11は、第3図のバス42でのアドレスの下位
12ビツトとして無条件に使用されるオフセットであり
、ビット12−31は、ビット29−31がkuseg
J−リア、ksegOエリア、kseglエリア及びk
Seg2エリアの間で選択する仮想ページ数(VPN)
である。現在実行中のプロセスのためのプロセスアイデ
ンティファイア(P I D)は、TLBによってもア
クセス可能なレジスタ内に格納される。・64ビツトの
TLBエントリは、同様に第20図に表され、ここで分
かるように、仮想アドレスからの29ビツトVPNは、
64ビツトエントリのピッ)44−63に位置される2
0ビツトVPNフイールドと比較され、一方、同時に、
PIDはビツト38−43と比較される。もし対の一方
が64の64ビツトTLBエントリのいずれかに見いだ
されるならば、対となったエントリのビット12−31
でのページフレーム数PFNは、(他の基準が適合する
ことを仮定して)第3図のバス82と42を介した出力
として使用される。TLBエントリにおける他の1ビツ
トの値は、N、D、V及びGを含む。ここで、Nはキャ
ッシュできない指標であり、もしセットされれば、ペー
ジはキャシュできず、プロセッサは、キャシュ44又は
45をまずアクセスする代わりにローカルメモリ又はグ
ローバルメモリをアクセスする。Dは、ライトプロテク
トビットであり、もしセットされれば、ロケーションが
「よごれ」ていて、従って、ライト可能であるが、もし
0ならば、ライト動作はトラップを起こすことを意味す
る。■ビットは、セットされれば、正当であることを意
味し、単に正当なビットを再セットするだけでTLBエ
ントリをクリアできることを意味する。このVビットは
、このシステムのページのスワツピング配置において、
ページがローカルメモリにあるかグローバルメモリにあ
るかを示すI;めに使用される。Gビットは、正当なT
LB翻訳のためのPIDマツチの要請を無視するグロー
バルアクセスを許可するためにある。 装置コントローラ30は、ローカルメモリに対してDM
Aを直接に行うことができない。従って、グローバルメ
モリは、DMAタイズのブロック転送(典型的にはディ
スク148などから)のためのステージングエリアとし
て使用される。CPUは、コントローラ(すなわちプロ
グラムされた■10によって動作を開始しまた制御する
ために、コントローラ30において直接に動作を実行す
ることができる。しかしながら、コントローラ30は、
グローバルメモリに対するDMAを除いて、DMAを行
うことができない。コントローラ30は、vMEバス(
パス28)マスクになることができ、I10プロセッサ
26又は27を介してメモリモジュール14と15内の
グローバルメモリに直接にリード動作とライト動作を行
う。 グローバルメモリとローカルメモリ(及びディスク)と
の間のページのスワツピングは、ページ7オールトとエ
ージングプロセスとの一方によって開始される。プロセ
スが実行中でありグローバルメモリ又はディスクにある
ページから実行すること又はそのページからアクセスを
することを試みるときに、ページフォールトが生じる。 すなわち、TLB83は、ミスを示し、トラップが生じ
るであろう。従って、核のローレベルトラップコードが
ページのロケーションを示し、ページのスワツピングを
開始するためのルーチンがエンターされる。もし必要と
されるページがグローバルメモリ内にあるならば、一連
のコマンドがDMA:7ントローラに送られて、最も少
なく最近使用されたページをローカルメモリからグロブ
パルメモリに書き込み、その必要とされたページをグロ
ブパルメモリからローカルメモリに読む出す。もしその
ページがディスクにあるならば、コマンドとアドレス(
セクタ)が、ディスクに行ってそのページを得るために
CPUからコントローラ30に書き込まれる。そして、
メモリ参照をするプロセスが一時停止される。ディスク
コントローラがデータを見付けそれを送信する用意がで
きたとき、メモリモジュールによって(cPUに到達せ
ずに)使用される割り込み信号が出力されて、グローバ
ルメモリにそのページを書き込むためにグローバルメモ
リへのDMAをディスクコントローラが始めることを許
可する。終了したときは、CPLTは割り込みされて、
DMAコントローラの制御の下にブロック転送を開始し
て、最も少なく使用されたページをローカルメモリから
グローバルメモリへスワツピングし、必要なページをロ
ーカルメモリへ読み込む。次に、元のプロセスが再び実
行(ラン)可能にされ、その状態は元に戻され、□元の
メモリ参照が再び生じ、ローカルメモリ内にその必要な
ページを見付ける。ページのスワツピングを開始するも
う1つのメカニズムは、エージングルーチンであり、こ
れにより、オペレーティングシステムは、各ページが最
近使用されたか否かについて又グローバルメモリへの押
し出しを被っていないページについてマークしながら周
期的にローカルメモリ内のページを通過していく。タス
クスイッチはそれ自身ページのスワツピングを開始しな
いが、その代わり、新しいページがページフォールトを
つくり始めたとき、ページは必要なだけスワツピングさ
れ、スワツピングのための候補は、最近は使用されてい
ないものである。 もしメモリ参照がなされTLBミスが示されるが、しか
しTLBミス例外から生じるページテーブルルックアッ
プがそのページがローカルメモリ内にあることを示すな
らば、このページがローカルメモリ内にあることを示す
ためにTLBエントリがなされる。すなわち、プロセス
は、TLBミスが起こったときに例外をとり、(核デー
タ区分内の)ページテーブルに行き、テーブルエントリ
を見付け、TLBに対して書き込み、次に進むことが許
される。しかし、もしメモリ参照がTLBミスを示し、
ページテープが、対応する物理アドレスが(8Mバイト
の物理アドレスを越えて)グローバルメモリ内にあるこ
とを示すならば、I’LBエントリがこのページのため
に実行され、そして、プロセスが再び続くとき、プロセ
スは、前と同様にTLB内にページエントリを見いt(
す。さらに1つの例外は、正当なビットが0であって、
そのページが物理的にローカルメモリ内にないことを示
すために採られる。そして、このときは、例外は、グロ
ーバルメモリからローカルメモリにページをスワツピン
グするルーチンをpテドし、そして実行が進むことがで
きる。第3の状況で(よ、もしページテーブルが、メモ
リ参照のためのアドレスがローカルメモリやグローバル
メモリ内に無くディスクにあることを示すならば、シス
テムは、上に示されたように動作し、すなわち、プロセ
スはランキュー(run queue)を去り、スリー
ブキュ(sleep queue)に入り、ディスク要
求がなされ、ディスクがそのページをグローバルメモリ
に転送しコマンド完了割り込み信号を出力したとき、ペ
ージがグローバルメモリからローカルメモリへスワツピ
ングされ、TLBは更新され、次にプロセスは再び実行
できる。 〈プライベートメモリ〉 メモリモジュール14と15は同じ位置に同じデータを
格納でき、全3個のcptrll、12及び13はこれ
らのメモリモジュールに対して等しいアクセスを行うが
、各メモリモジュールにはプライベートメモリとしてソ
フトウェア制御のもとで割り当てられた小さなエリアが
ある。例えば、第21図に図示されるように、メモリモ
ジュール位置のマツプのエリア155は、プライベート
メモリエリアとして呼ばれ、全CPUが[プライベート
メモリライトココマンドをバス59に出力したときにの
みライト可能である。実施例では、プライベートメモリ
エリア155は、各CPUモジュールのバスインターフ
ェース56のレジスタ156に含まれるアドレスで出発
する4にのべ〒ジである。この出発アドレスは、CPU
によってこのレジスタ156に書き込むことによってソ
フトウェア制御のもとて変更できる。プライベートメモ
リエリア155は、さらに3個のCPUの間で分割され
る。CPU−AだけがエリアL55=aに書き込むこと
ができ、CPU−Bだけがエリア155bに書く込むこ
とができ、CPU−Cだけがエリア155cに書く込む
ことができる。バス57の1つのコマンド信号は、動作
がプライベートライトであることをメモリモジュール1
4と15に知らせるために、バスインターフェース56
によってセットされる。そして、これは、ストア命令か
らプロセッサ40によって発生されたアドレスに対応し
てセットされる。アドレスのビット(およびライトコマ
ンド)は、(バスアドレスをレジスタ156の内容に比
較する)バスインターフェース内のデコーダ157によ
って検出され、バス57に対する「プライベートメモリ
ライト丁コマンドを発生するために使用される。メモリ
モジュールでは、ライトコマンドがレジスタ94.95
及び96で検出され、アドレスとコマンドが全てボート
回路100によって良好(すなわち一致している)とポ
ートされたとき、制御回路100は、ただ1個のCPU
からのデータをバス101へと通すことを許可し、これ
は、全CPUからのアドレスの2ビツトによって決定さ
れる。このプライベートライトの間に、全3個のCPU
は、バス57に同じアドレスを示すが、バス58に異な
ったデータを示す(この異なったデータは、例えばCP
Uへのステートキューである)。メモリモジュールは、
アドレスとコマンドをボートし、アドレスバスに見られ
たアドレスフィールドの部分によって基づいてただ1個
のCPUからデータを選択する。CPUがデータをボー
トすることを可能にするため、全3個のCPUは、両メ
モリモジュール14と15内へ、CPUに一義的なステ
ート情報の3個のプライベートライト動作(バス211
22.23に3個のライト動作がある)を行う。各ライ
ト動作の間に、各CPUは、一義的データを送信するが
、ただ1個だけが各時間にアクセプトされる。それで、
全3個のCPUによって実行されるソフトウェアシーケ
ンスは、(1)ロケーション155aにストア、(2)
ロケーション155bにストア、(3)ロケーション1
55cにストアである。しかしながら、ただ1個のCP
Uからのデータが実際には各時間に書き込まれ、そのデ
ータはボートされない。なぜならば、異なっており又は
異る可能性があり、そしてボートされるならばフォール
トを示す可能性があるからである。 次に、全CPUは、全3個のロケーション155a、1
55b、155cを読んで、ソフトウェアによりこのデ
ータを比較することによってデテタボートすることがで
きる。このタイプの動作は、例えば診断に又は原因レジ
スタ(cause register)データをボート
するための割り込みにおいて使用される。 プライベートライトのメカニズムは、7オールト検出と
回復において使用される。例えば、もし全CPUがメモ
リリード要求をするときにバスエラー(メモリモジュー
ル14又は15が?くラドスティタス(bBd 5ta
tus)をライン33−1または33−2に戻すような
とき)を検出するような場合セある。この点で、CPU
は、他のCPUがメモリモジュールから同じスティタス
を受け取っているか否かを知らない。CPUが故障で有
り得るし、そのスティタス検出回路が故障で有り得るし
、あるいは、示されたように、メモリが故障で有り得る
。それで、故障を分離するために、上述のバスフォール
トルーチンがエンターされたときに、全3個のCPUは
、前のリードの試みでメモリモジュールからまさに受信
したスティタス情報のプライベートライト動作を行う。 次に、全3個のCPUは、他のCPUが書き込んだもの
を読み出し、自分自身のメモリスティタス情報と比較す
る。もしそれらが一致するならば、メモリモジュールは
、オフラインでボートされる。もし一致せず、1個のC
PUがメモリモジュールに対して悪いスティタスを示し
他のCPUが良好なスティタスを示すならば、CPUは
オフラインでボートされる。 〈フォールトトレラント電源〉 第22図を参照して、好ましい実施例のシステムは、上
述のCPUモジュール、メモリモジュール、I10プロ
セッサモジュール、I10コントローラ、及びディスク
モジュールのオンラインでの交換と同様に、故障した電
源モジュールをオンラインで交換できるフォールトトレ
ラントな電源を使用できる。第22図の回路で、交流電
力ライン160は、電力分配ユニット161に直接に接
続され、このユニット161は、電力ラインのろ波器、
過渡電流の抑圧器、及び短絡に対して保護するためのサ
ーキットブレーカを提供する。交流電力ラインの故障に
対して保護するために、冗長性のバッテリバック162
と163が、順序圧しいシステムシャットダウンを完了
しうるような4−172分の全システム電力を与える。 2個のバッテリパックの1個162又は163だけが、
システムを安全にシャットダウンするために動作するの
に必要である。 電力サブシステムは、2つの同一の交流から直流へのバ
ルク電源164と165を備え、これらの電源は、高電
力ファクタを備え、1対の36ボルト直流分配バス16
6と167にエネルギーを供給する。このシステムは、
動作中である1個のバルク電源】64又は165を用い
て、動作し続けることが可能である。 4つの別々の電力分配バスがこれらのバス166と16
7に含まれる。バルク電源164は、電力バスl 66
−1と167−1を駆動し、?(ルク電源165は、電
力バス166−2と167−2を駆動する。バッテリバ
ック163は、バス166−3、l 67−3を駆動し
、バスl 66−1と167−2から再チャージされる
。3個のCPU 11゜12.13は、これらの4個の
分配バスの異なった組み合わせから駆動される。 これらの36Vバス166と167に結合された多数の
DC−DCコンバータ168が、cpuモジュール11
.12及び13.メモリモジュール26と27、及びI
10コントローラ30を個々に電力を供給するために使
用される。バルク電源I6と165は、また、3(Il
のシステムファン169と、バッテリバック162と1
63のためのバッテリチャージャに電力を供給する。各
システム部品に対するこれらの別々のDC=DC:l;
lンバータを備えることにより、1個のコンバータの故
障はシステムシャットダウンを生じず、その代わり、シ
ステムは、上述した故障回復モードの1つで動作を続け
、故障した電源部品をシステム動作中に交換できる。 この電源システムを、スタンドバイとオフの機能を備え
た手動スイッチか、もしくは保守・診断電源の故障の場
合に電源オン状態を自動的にオフ状態とする保守・診断
プロセッサ170からのソフトウェア制御の下のいずれ
かで、シャフトダウンできる。 本発明は、特別な実施例を参照して説明されたが、この
説明は、制限的な意味でなされたのではない。開示され
た実施例の様々な変形が、本発明の他の実施例と同様に
、この説明を参照して当業者に明らかである。従って、
添付した特許請求の範囲は、本発明の範囲内で実施例の
任意のそのような変更を含む。
了するとき、ライトバッファフルフラグはクリアされる
。このクリアは、リアルタイムで(、に同期して起こる
が(第11図に図示される理由により)、仮想タイムで
は同期していない。いま、サイクル計数!、での命令は
、ストア動作であると仮定すると、CPU−Aは、ライ
トバッファフルフラグがクリアされた後でt、でこのス
トアを実行するが、しかし、CP U−Bはt。 でこのストア命令を実行し、そうして、ライトバッファ
フルフラグがなおセットされていることを見いだして3
クロツクの間ストールをしなければならない。こうして
、CPU−Bはストールをするが、CP U−Aはスト
ールをしない。 1個のCPUはストールをするかも知れず他のCPUは
ストールをしないかも知れないという性質は、サイクル
カウンタ71の解釈に制限を課する。第12図において
、割り込みがサイクル計数■7で(cP U−Bが■、
命令からストールをしている間に)複数のCPUに示さ
れたと仮定する。 サイクル計数I、に対するランサイクルは、jFで両C
PUに対して起こる。もしサイクルカウンタだけがCP
Uに割り込みを示すなら、CPU−Aはサイクル計数!
、で割り込みを見るが、CPU−Bはサイクル計数!、
から生じるストールサイクルの間に割り込みを見る。そ
うして、割り込みを示すこの方法が、この2個のCPU
に異なった命令での例外、もし全CPUがストールされ
るか又はストールされていない場合には起こらないよう
な条件が採用される。 サイクルカウンタの解釈についての別の制限は、サイク
ル計数の検出と作用の実行との間に遅れがあってはなら
ないことである。再び第12図を参照して、割り込みが
サイクル計数1.でCPUに示されるが、実行の制限の
ために余分のクロックの遅れがサイクル計数■、の検出
とCPUへの割り込みの提示の間に介在すると仮定する
。その結果は、CPU−Aが、この割り込みをサイクル
計数I7で確認するが、CPU−Bは、サイクル計数■
、からのストールの間に割り込みを確認して、2個のC
PUに異なった命令で例外を採らせる。 再び、リアルタイムで命令パイプラインの状態をモニタ
することの重要性が図示される。 〈割り込み同期〉 第1図から第3図までの3個のCPUは、単独の論理プ
ロセッサとして機能することが要求され、従って、3個
のCPUのプログラミングモデルが単独の論理プログラ
ミングのプログラミングモデルであることを保証するた
めにその内部状態に関しである制限を実行することを要
求する。誤りモードや診断モードを除いて、上記3(I
lのCPUの命令ストリームは同一であることが要求さ
れる。 もし同一でなかったら、第6図のボーティング回路10
0でのグローバルメモリアクセスのボーティングが困難
になるだろう。すなわち、ボートするものは、1個のC
PUが故障しているのか、異なったシーケンスの命令を
実行しているのか分からない。同期スキームは、もし任
意のCPUのコードストリームが、その他のCPUのコ
ードストリームから分岐するならば故障が起こったと仮
定するように設計される。割り込み同期は、単独のCP
Uイメージを維持する1つのメカニズムを提供する。 すべての割り込みは、仮想タイムに同期して起こること
が要求され、3個のプロセッサCPU−A%CPU−B
とCPU−Cの命令ストリームが割り込みの結果として
分岐しないことを保証する(分岐する命令ストリームに
は他の原因もある。例えば、1個のプロセッサが他のプ
ロセッサによってリードされたデータと異なったデータ
をリードすること)。仮想タイムに対して非同期に起こ
る割り込みがコードストリームを分岐させるシナリオは
、いくつかある。例えば、プロセスAが完了する前にフ
ンチクストスイッチをオンにさせるがプロセスAが他の
CPUで完了した後でフンチクストスイッチをオンにさ
せる割り込みは、その後のある点で、1個のCPUがプ
ロセスAの実行を続けるが他方のCPUはプロセスAが
既に完了しているためプロセスAを実行出来ないという
状況をもたらす。もしこの場合に割り込みが仮想タイム
に非同期に起こるならば、例外プログラムカウンタが異
なるという事実が問題を起こすであろう。 例外プログラムカウンタの値をグローバルメモリに書き
込む行為は、ポーターが3個のCPUから異なったデー
タを検出し、ボート7オールトを生じるという結果にな
るだろう。 CPUにおけるあるタイプの例外は、本来仮想タイムに
同期している。1つの例は、ブレークポイント命令の実
行によって生じるブレークポイント例外である。全CP
Uの命令ストリームが同一なので、ブレークポイント例
外は3個のCPUにおける仮想タイムにて同じ点で生じ
る。同様に、全てのそのような内部例外は、本来仮想タ
イムに同期して生じる。例えば、TLB例外は本来同期
する内部例外である。TLB例外は仮想ページ数がTL
B83のどのエントリにも適合しないために生じる。ア
ドレスを解釈するということが(ブレークポイント例外
におけるように正確に)単に命令ストリームの機能なの
で、解釈は、本来仮想タイムに同期する。TLB例外が
仮想タイムに同期することを確実にするために、TLB
83の状態は全3個のCPUII、12.13において
同一でなければならず、これは、TLB83がソフトウ
ェアだけによって変更できるので、保証される。再び、
全CPUが同じ命令ストリームを実行するので、TLB
83の状態は常に仮想タイムに同期して変化される。そ
うして、−殻内経験則として、もし行動がソフトウェア
により実行されるなら、その行動は仮想タイムに同期し
ている。もし行動がサイクルカウンタを用いないハード
ウェアにより実行されるなら、その行動は一般にリアル
タイムに同期である。 外部の例外は、本来仮想タイムに同期していない。I1
0装置26.27又は28は、3個のCPUII、12
、及び13の仮想タイムについて情報を有しない。従っ
て、I10装置によって発生される全ての割り込みは、
以下に説明するように、CPUに示される前に仮想タイ
ムに同期されなければならない。浮動点例外は、浮動点
コプロセッサ46がCPU内でマイクロプロセッサ40
に堅く結合されるので、I10装置割り込みと異なって
いる。 外部装置は、3個のCPUを1つの論理的プロセッサと
して見て、CPU間の同期や同期の欠乏についての情報
を有しない。従って、外部割り込みは、各CPUの個々
の命令ストリーム(仮想タイム)と同期である割り込み
を生成することが出来ない。どのような種類の同期も無
ければ、もしある外部装置がリアルタイム1.の時間に
割り込みを駆動し、その割り込みがその時間に全CPU
に直接水されるならば、3個のCPUは、異なった命令
で例外トラップをとり、3個のCPUのアクセプトされ
ない状態が生じる。これは、リアルタイムに同期である
が仮想タイムに同期しないイベント(割り込みの主張)
の例である。 複数の割り込みは、第1図から第3図までのシステムに
おいて、割り込みについて分散されたポートを実行し、
決定されたサイクル計数でプロセッサに割り込みを示す
ことにより、仮想タイムに同期する。第13図は、第2
図の割り込み同期論理回路65のより詳細なブロック図
を示す。各CPUは、モジュール14又は15から生じ
るライン69又は70からの外部割り込みを捕捉する分
配器135を含む。この捕捉はあらかじめ決定されたサ
イクル計数で、例えばカウンタ71から入力ラインCC
−4上で信号が出力される計数−4で起こる。捕捉され
た割り込みは、020間バス18を介して他の2個のC
PUへ分配される。これらの分配された割り込みは、未
決定割り込みと呼ばれる。各CPUII、12.13か
ら1個の3個の未決定割り込みがある。ポータ回路13
6は、未決定割り込みを捕捉出力、全CPUが外部割り
込み要求を受信したかを確認するポートを行う。 (サイクルカウンタ71で検出される)あらかじめ決定
されたサイクル計数で、この例では入力ラインCG−8
により受け取られたサイクル8で、割り込みポータ13
6は、ライン137とバス55と43を介して各マイク
ロプロセッサ40の割り込みビンに割り込みを示す。割
り込みを示すために用いられるサイクル計数があらかじ
め決定されているので、全マイクロプロセッサ40は、
同じサイクル計数で割り込みを受け取り、こうして、割
り込みが仮想タイムに同期されている。 第14図は、仮想タイムに対して割り込みを同期するた
めのイベントのシーケンスを示す。CPU−A、CPU
−B及びCPU−Cと示された行は、リアルタイムでの
1点での各CPUのカウンタ71におけるサイクル計数
を示す。IRQ A PENDING、IRQ
B PENDING及びIRQ B、PENDIN
Gと示された行は、ポータ136の入カヘCPU間バス
18を介して結合される割り込みの状態を示す(lは、
未決定ビットがセットされていることを意味する)。I
RQA、IRQ B、及びIRQCと示された行は、
マイクロプロセッサ40の割り込み入力ビンの状態(ラ
イン137の信号)を示し、ここで1は割り込みが入力
ビンに存在することを意味する。 第14図で、外部の割り込み(EX IRQ)は、1
、でライン69に主張される。もし割り込み分配器13
5が割り込みを捕捉し、020間バス18にサイクル計
数4で分配するならば、IRQCPENDINGは時間
1.でlになり、IRQ B PENDINGは時
間t2で1になり、IRQ A PENDINGは
時間t、でlになる。もし割り込みポータ136がサイ
クル計数8で割り込み未決定ビットをポートするならば
、IRQ Cは時間t、でlになり、IRQ Bは
時間t6で1になり、IRQ Cは時間t、で1にな
る。その結果、割り込みは、リアルタイムでは異なった
点であるが仮想タイムでは同一の点(すなわちサイクル
計数8)でCPUに示される。 第15図に、第14図に示されたアルゴリズムを必要と
するシナリオを変更して示す。ここではサイクルカウン
タ71がモジューロ8カウンタにより表されることに注
意する。外部割り込み(EX IRQ)は時間t、で
主張される。割り込み分配器135はこの割り込みを捕
捉し、サイクル計数4で020間バス18に割り込みを
分配する。 CPU−BとCPU−Cが時間t3の前にサイクル計数
を実行しているので、その割り込み分配器は外部割り込
みを捕捉することができない。しかし、CPU−Aは時
間t、の前にサイクル計数を実行する。その結果、CP
U−Aは時間t4で外部割り込みを捕捉して分配する。 しかし、もし割り込みポータ136がサイクル計数7で
割り込み未決定ビットを捕捉してボートするならば、C
PU−Aの割り込みボータ136は、他の2個の割り込
み未決定ビットがセットされていないとき、時間t7で
IRQ A PEND信号を捕捉する。CPU−A
の割り込みボータ136は全てのCPUが外部割り込み
を分配していないことを認識し、捕捉された割り込み未
決定ビットを保持レジスタ138に出力されて格納され
る。CPU−BとCPU−Cの割り込みボータ136は
単独の割り込み未決定ビットをそれぞれ時間1.とt4
に捕捉する。CPU−Aの割り込みボータのように、こ
れらのボータは、全ての割り込み未決定ビットがセット
されていないことを認識し、こうして、セットされた単
独の割り込み未決定ビットが保持レジスタ138に出力
されて格納される。各CPUのサイクルカウンタ71は
、サイクル計数7に達するとき、ロールオーバーし、サ
イクル計数0で計数を開始する。外部割り込みはまだ主
張されているので、CPU−BとCPU−Cの割り込み
分配器135は、それぞれ時間t1゜とt、で外部割り
込みを捕捉する。これらの時間は、サイクル計数が4に
等しくなったときに対応する。時間tl!で、CPU−
Cの割り込みボータは、020間バス18に割り込み未
決定ビットを捕捉する。ボータ136は、全C外部割り
込みを捕捉して分配することを決定し、プロセッサチッ
プ40に割り込みを示す。時間【13と時間t’sに、
CP U−BとCPU−Aの割り込みボータ136は、
割り込み未決定ビットを捕捉し、割り込みをプロセッサ
チップ40に示す。その結果、全プロセッサチップが同
じ命令で外部割り込み要求を受信したことになり、保持
レジスタに保存されていた情報は必要で無くなる。 〈保持レジスタ〉 第15図に関して上述に示された割り込みシナリオにお
いて、ボータ136は、若干のステート割り込み情報を
保存するために保持レジスタ138を使用する。特に、
保存されたステートは、全CPUでなくいくつかのCP
Uが外部割り込みを捕捉し分配したことであった。もし
システムが(第15図の状況のように)どんな故障もし
無い場合は、前の例に示したように、外部割り込みが保
持レジスタの使用なしに仮想タイムに同期出来るので、
このステート情報は必要でない。アルゴルズムは、割り
込みボータ136が割り込み未決定ビットをあらかじめ
決定されたサイクル計数で捕えボートすることである。 全ての割り込み未決定ビットが主張されるとき、割り込
みは、そのあらかじめ決定されたサイクル計数でプロセ
ッサチップ◆こ示される。第15図の例において、割り
込みはサイクル計数7でボートされた。 第15図を参照して、もしc p u−cが誤りをし、
誤りモードが割り込み分配器135が正しく機能しない
ようなものであれば、このとき、もしプロセッサチップ
40に割り込みを示す前に全割り込み未決定ビットがセ
ットされるまで割り込みボータ136が待つならば、そ
の結果、割り込みは示されるようになることは無い。こ
うして、ただ1個のCPUのただ1個の誤りが全CF’
Uについての全体の割り込みのチェーンを機能できない
ようにする。 保持レジスタ138は、最後の割り込みボートサイクル
が全部ではないが少なくとも1個の割り込み未決定ビッ
トを捕捉したことをボータ136が知るメカニズムを提
供する。割り込みボートサイクルは、割り込みボータが
割り込み未決定ビットを捕捉しボートするサイクル計数
で起こる。数個の割り込み未決定ビットがセットされる
結果となる2つだけのシナリオがある。1つは、第15
図に関連して示された示されたシナリオであって、ここ
では、外部割り込みは、あるCPUの割り込み分配サイ
クルの前であるがその他のCPUの割り込み分配サイク
ルの後に主張される。vg2のシナリオでは、少なくと
も1個のCPUが、割り込み分配器をディスエーブルに
するような誤りをする。もし数個の割り込み未決定ビッ
トだけが割り込みボートサイクルでセットされる理由が
第1のシナリオであるならば、割り込みボータは、全割
り込み未決定ビットが次の割り込みボートサイクルでセ
ットされることが保証される。従って、もし保持レジス
タがセットされていて全部でない割り込み未決定ビット
がセットされていることを割り込みボータが発見するな
らば、エラーが1個以上のCPUに存在するはずである
。これは、各CPUの保持レジスタ138が割り込みサ
ービス時にクリアされることを仮定する。そのため、保
持レジスタの状態は割り込み未決定ビットについての新
鮮でない状態を表さない。エラーの場合、割り込みボー
タ136は、プロセッサチップ40に割り込みを示すこ
とができ、同時に、エラーが割り込み同期論理回路によ
って検出されたことを示す。 割り込みボータ136は、実際にはどんなボーティング
もせず、その代わり割り込み未決定ビットと保持レジス
タ137の状態を検査して、プロセッサチップ40に割
り込みを示すか否かと割り込み論理回路にエラーを示す
か否かを決定するだけである。 くモジューロサイクルカウンタ〉 第15図の割り込み同期の例は、割り込みカウンタをモ
ジューロNカウンタ(例えばモジューロ8カウンタ)と
して表した。モジューロNサイクルカウンタの使用は、
割り込みボートサイクルの概念を可能にすることにより
、割り込みボーティングアルゴリズムの説明を簡単にし
た。モジューロNサイクルカウンタを使用すると、割り
込みボートサイクルは、0とN−1(Nはサイクルカウ
ンタのモジューロである)の間にある単独のサイクル計
数として説明できる。サイクルカウンタのどんな数も割
り込みボートサイクルのために選択でき、サイクル計数
は、Nサイクル計数毎に起こることが保証される。モジ
ューロ8カウンタに対して第15図に示されるように、
割り込みボートサイクルは8計数毎に起こる。割り込み
ボートサイクルは、モジューロNサイクルカウンタの周
期的性質を説明するためにだけここで用いられる。 モジューロNサイクルカウンタの特定のサイクル計数に
キーとなるどのイベントもNサイクル計数毎に起こるこ
とが保証される。明らかに、不定数(すなわち非反復性
カウンタ71)は使用できない。 Nの値は、システムに正の効果を持つシステムパラメー
タを最大にし、システムに負の効果を持つシステムパラ
メータを最小にするように選択される。まず、いくつか
のパラメータが示される。 C7とC4は、それぞれ、割り込みボートサイクルと割
り込み分配サイクルである(第13図の回路では、これ
らはそれぞれCG−8とCC−4である)。CG−8と
CG−4の値は、0とN−1(Nはサイクルカウンタの
モジューロである)の間の範囲にあらねばならない。D
+++ a wは、同期論理回路によって許容され得
る3個のプロセッサCPU−A。 CPU−B及びcpu−cの間のサイクル計数ドリフト
の最大量である。このプロセッサドリフトは、リアルタ
イムの1点で各CPUからサイクルカウンタ71のスナ
ップショットをとることにより決定される。ドリフトは
、最も遅いCPUのサイクル計数を最速のCPUのサイ
クル計数から差し引くこと(モジューロN減算としてな
される)により計算される。D m a wの値は、N
とC,と04の関数として表される。 まず、D□、は、差C,−C,の関数として表される。 ここに、差演算はモジューロN減算として実行される。 これは、I)+++amを最大にするC1とC4の値を
選択することを可能にする。第16図のシナリオを参照
し、C1−8とC4−9を仮定する。 第16図から、プロセッサドリフトはD□ヨー4である
と計算出来る。ライン69の外部割り込みは、時間t、
で主張される。この場合、CP U−Bは、時間【、で
割り込みを捕捉し分配する。このシナリオは、前に示さ
れた割り込み同期アルゴリズムとつじつまが合わない。 なぜなら、CPU−Aが割り込み分配サイクルを行った
前にCPU−Bがその割り込みボートサイクルを実行す
るからである。このシナリオの欠陥は、C1とC4の差
よりも更に離れてドリフトすることである。この関係は
、形式的に次のように書くことができる。 方程式(1) Cv Ca (066w−eここ
に、eは、CPU間バス18に伝達される割り込み未決
定ビットのために必要な時間である。 前の例では、eはOと仮定されていた。壁時計の時間が
クロックサイクル(ランサイクル)のインクリメントで
量子化されているので、eも量子化出来る。こうして、
次の式が得られる。。 方程式(2) cv−c、< D、、、、−1ここ
に、D7.9は、サイクル計数の整数値として表される
。 次に、最大のドリフトがNの関数として表すことができ
る。第17図は、N−4でプロセッサドリフトD−3の
場合のシナリオを示す。Ca −0と仮定する。各プロ
セッサのサイクル計数0における減算は、命令サイクル
計数の商の部分(Q)を表す。サイクル計数がいまモジ
ューロNにて示されるので、サイクルカウンタの値は、
I/N(1は、時間t0以来実行された命令数である)
の剰余である。命令サイクル計数のQは、I/Nの整数
部分である。もし外部割り込みが時間t、に主張される
ならば、CPU−Aは、時間り、に割り込みを捕え分配
し、CPU−Bは、時間t、に割り込み分配サイクルを
実行する。CP U−Aに対する割り込み分配サイクル
がQ−1でありCPU−Bに対する割り込み分配サイク
ルがQ−2であるので、これは問題を示す。同期論理回
路は、問題が無いかのように続行し、こうして等しいサ
イクル計数でプロセッサに割り込みを示す。しかし、各
プロセッサのQは異なっているので、割り込みは異なっ
た命令で複数のプロセッサに示される。従って、Nの関
数としてのDll、の関係は次式で表される。 方程式(3) N/2 > n、、。 ここに、Nは偶数であり、D、、、はサイクル計数の整
数として表される。ここで、方程式(2)と(3)は共
に標本化理論におけるナイキストの定理に等価であるこ
とを示すことができる。方程式(2)と(3)とを結合
することによって次式を得る。 方程式(4) c、−ca < N/2−1ここ
に、Nの与えられた値に対してC9とC4の最適の値が
選択できる。 上述の全方程式は、Nが出来るだけ大きくあるべきであ
るこ、とを示唆する。Nを小さくさせようとする唯一の
因子は、割り込みの潜在である。割り込みの潜在は、ラ
イン69での外部割り込みの主張とライン137でのマ
イクロプロセッサチップへの割り込みの提示との間の時
間間隔である。 どのプロセッサが割り込みの潜在を決定するために使用
されるべきかは明快な選択でない。3個のマイクロプロ
セッサは、クロック源における結晶発振子におけるわず
かな違いや他の因子のために異なった速度で動作する。 最も高速のプロセッサと、最も遅いプロセッサと、その
他のプロセッサがある。システムの性能は最も遅いプロ
セッサの性能によって最終的に決定されるので、最も遅
いプロセッサに関して割り込みの潜在を定義することは
合理的である。最大の割り込みの潜在は、方程式(5)
L3.、− 2N−1 であり、ここに、L、1.は、サイクル計数で表された
最大の割り込みの潜在である。最大の割り込みの潜在は
、最速のプロセッサの割り込み分配サイクルC4の後で
あるが最も遅いプロセッサの割り込み分配サイクルC4
の前に外部割り込みが主張されたときに、最大の割り込
みの潜在が起こる。 平均の割り込みの潜在の計算は、最速のプロセッサの割
り込み分配サイクルの後でかつ最も遅いプロセッサの割
り込み分配サイクルの前に外部割り込みが起こる確率に
依存するので、さらに複雑である。この確率は、多数の
外部因子によって順番に決定されるプロセッサ間のドリ
フトに依存する。 もしこれらの確率がOであるならば、平均の潜在は次の
式で表される。 方程式(6) L、、、=N/2 (c,CJこれ
らの関係式を用いて、N、C,、及びC4の値が、Dや
1.と割り込みの潜在とに対するシステムの要請を使用
して決定される。例えば、N−128、(c,−C,)
−10,L、、、−74又は約4゜4マイクロ秒(スト
ールサイクルなしで)を選択する。4ビツト(4つの2
進ステージ)71aが割り込み同期カウンタとして使用
され、分配出力とポート出力が説明したようにCC−4
とCG−8にある好ましい実施例を用いて、N−15,
C。 −8,Cd−4であることが分かり、そうして、L、、
、−16/2+ (8−4)−12サイクルすなわち0
.7ミリ秒である。 くローカルメモリのためのりフレッシュ制御〉リフレッ
シュカウンタ72は、カウンタ71と71aがまさに計
数するのと同様に、(マシンサイクルでなく)非ストー
ルサイクルを計数する。 目的は、リアルタイムよりはむしろ仮想タイムで測定し
て、同じサイクル計数で各CPUにリフレッシュサイク
ルを導入ことである。好ましくは、各CPUは、命令ス
トリームにおいて他のCPUと同じ点でリフレッシュサ
イクルを課する。ローカルメモリ16のDRAMは、グ
ローバルなメモリについて上述したように8ms e
c毎に512サイクルの周期でリフレッシュされねばな
らない。 こうして、カウンタ72は、512の1行をアドレスし
て、15ms e c毎に1回DRAMI 6iこりフ
レッシュコマンドを出力しなければならない。 もしメモリ動作がリフレッシュの間に要求されたならば
、リフレッシュが終了するまでビジ一応答が生じる。し
かし、各CPUにそれ自身のローカルメモリのリフレッ
シュをリアルタイムで他のCPUに独立に処理させるこ
とは、CPUを同期から外れさせ、従って、余分な制御
が必要になる。 例えば、もし丁度除算命令が始まるようにリフレッシュ
モードがエンターされるならば、タイミングは、1個の
CPUが他のCPUより2クロツクだけ長くかかるよう
なタイミングになる。又は、もし割り込み可能でないシ
ーケンスがより高速なCPUによりエンターされ他のC
PUがこのルーチンにエンターする前にリフレッシュに
入るならば、CPUは、相互に離れていく。しかし、こ
れらの問題のいくつかを避けるためのサイクルカウンタ
71を(リアルタイムの代わりに)使用することは、ス
トールサイクルが計数されないことを、意味する。そし
て、もしルーズに入って多くのストールを生じさせるな
らば(7対lのストールサイクルを生じさせることが可
能ならば)、周期が15m5ecの数値から著しく減少
されないならば、リフレッシュの仕様に合わず、性能を
劣化させる。 この理由のために、第2図に示されるように、ストール
サイクルは第2カウンタ72aでも計数され、このカウ
ンタがリフレッシュカウンタ72で計数されるのと同じ
数に達する毎に、追加のリフレッシュサイクルが導入さ
れる。例えば、リフレッシュカウンタ72は、カウンタ
71と歩調を合わせて、21すなわち256ランサイク
ルを計数し、オーバーフローのときにリフレッシュ信号
が制御バス43を介して出力される。一方、カウンタ7
2aは、(ラン#信号とクロック17に応答して)28
ストールサイクルを計数し、オーバーフローする毎に第
2カウンタ72aがインクリメントされる(カウンタ7
2bは単に8ビツトカウンタ72aのためのビット9か
ら11であってもよい)。 そうして、リフレッシュモードが最後にエンターされ、
CPUはカウンタレジスタ72bの数によって示される
多数の追加のりフレッシュを行う。こうして、もし長期
間のストールインテンシブな実行が起こるならば、リフ
レッシュの平均数は、15マイクロ秒毎に1つの範囲内
にあり、もし7X256までのストールサイクルが介在
されるならば、最後にリフレッシュモードに行くときに
リフレッシュされた行の数が名目上のリフレッシュ速度
まで追い付くので、リフレッシュサイクルを任意に短く
することにより性能の劣化はない。 〈メモリ管理〉 第1図から第3図までのCPUII、12、及び13は
、第18図に図示されるように組織されたメモリ空間を
備える。ローカルメモリ16が8Mバイトであり、グロ
ーバルメモリ14又は15が32Mバイトである例を用
いて、ローカルメモリ16が、キャシュすなわち別のメ
モリ空間であるよりはむしろ、CPUメモリアクセス空
間の同じ連続的な0から40Mバイトまでのマツプの一
部である。0から8Mバイトまでの部分を(3個のcp
uモジュールで)3重化し、8から40Mバイト部分を
2重化しているが、論理的には単に1つの0から40M
バイトまでの物理アドレス空間があるだけである。バス
54で8Mバイトを越えたアドレスは、バスインターフ
ェース56にメモリモジュール14と15に要求をさせ
るが、1しかし、8Mバイト以下のアドレスは、CPU
モジュールそれ自身内でローカルメモリ164こアクセ
スする。性能は、ローカルメモリ16で実行されるアプ
リケーションにより使用されるメモリをより多く配置す
ることにより改善される。そして、もしメモリチップが
高密度でより低コストでより高速で利用できるならば、
追加のローカルメモリが、追加のグローバルメモリと同
様に付加される。例えば、ローカルメモリが32Mバイ
トであって、グローバルメモリが128Mバイトであっ
てもよい。一方、非常に低コストのシステムが必要なら
ば、性能は主要な決定的なファクタではなく、システム
は、ローカルメモリなしに動作でき、そのような構成で
は性能の不利益が高いけれども、すべてのメインメモリ
はグローバルメモリエリア(メモリモジュール14と1
5)である。 第18図のマツプのローカルメモリ部分141の内容は
、3個のCPUII、12及び13における内容と同一
である。同様に、2個のメモリモジュール14と15は
、どの与えられた瞬間でもその空間142内の同じデー
タを全く同様に含む。 ローカルメモリ部分141内にはUNIXオペレーティ
ングシステムのための核143(′:I−ド)が格納さ
れ、このエリアは、各CPUのローカルメモリ16の固
定された部分内に物理的にマツピングされる。同様に、
核データは、各ローカルメモリ16の固定されたエリア
141に割り当てられる。ブートアップの時を除いて、
これらのブロックは、グローバルメモリ又はディスクへ
、又はグローバルメモリ又はディスクから交換されない
。 ローカルメモリの他の部分145は、ユーザプログラム
(及びデータ)のページのために使用され、これらのペ
ージは、オペレーティングシステムの制御の下にグロー
バルメモリ14と15のエリア146に交換される。グ
ローバルメモリエリア142は、エリア146における
ユーザーページのためのステージングエリア(stag
ing area)として、またエリア147における
ディスクバッファとして使用される。もし全CPUが1
ブロツクのデータのライトを行うコード又はローカルメ
モリ16からディスク148へのコードを実行するなら
ば、ディスクバッファエリア147にコピーをするため
の時間はI10プロセッサ26と27に直接にそしてI
10コントローラ30を介してディスク148にコピー
をする時間に比べて無視できるので、シーケンスは、そ
の代わりディスクバッファエリア147にライトを行う
ことである。次に、全CPUが他のコードの実行を進め
る間に、このディスクにライトをする動作が行われて、
゛全CPUに対してトランスペアレントに、そのブロッ
クをエリア147からディスク14gへ移動する。 同様な方法で、グローバルメモリエリア146は、ディ
スク以外のI10アクセス(例えばビデオ)の同様な処
理のために、I10ステージングエリア149を含んで
マツピングされる。 、j第18図の物理的メモリマツ
プは、各CPU内のプロセッサ40の仮想メモリ管理シ
ステムと関連する。第19図は、実施例において使用さ
れたR2000プロセツサチツプの仮想アドレスマツプ
を図示する。しかしながら、ページングと保護メカニズ
ムを備えた仮想メカニズム管理を支持する他のプロセッ
サチップが対応する特徴を備えるであろうことが理解さ
れる。 第19図において、2つの別々の2Gバイトの管理アド
レス空間150と151が図示される。 プロセッサ40は、2つのモード、ユーザーモードと核
モード、の1つで動作する。当該プロセッサはただ、ユ
ーザーモードにおいてエリア150をアクセスでき、も
しくは核モードにおいて両エリア150と151をアク
セスすることができる。 核モードは、多くの計算機に備えられている監視モード
と同類である。プロセッサ40は、例外が検出されてモ
ードを核モードに強いるまでは、通常はユーザーモード
で動作するように構成され、ここで、例外からのりスト
ア(RFE)命令が実行されるまで核モードにとどまる
。メモリアドレスが翻訳されすなわちマツピングされる
方法は、マイクロプロセッサのオペレーティングモード
に依存し、これはスティタスレジスタの1ビツトによっ
て定義される。ユーザーモードにあるときに、2Gバイ
トの’kuseg″として参照される単独の−様な仮想
アドレス空間150を利用できる。 各仮想アドレスはまた、最大64個のユーザープロセス
のための一義的仮想アドレスを形成するために、6ビツ
トのプロセスアイデンティファイア(PID)フィール
ドを用いて拡張される。ユーザーモードにおけるこのセ
グメント150までのすべての参照は、TLB83を介
してマツピングされ、キャシュ144と145の使用は
、 ”l”LBエントリにおける各ページエントリのた
めのビットセツティングによって決定される。すなわち
、あるページは、キャシュ可能で有り得るし、あるペー
ジはプログラマによって特定されるのでキャシュ可能で
ない。 核モードにあるとき、仮想メモリ空間は、第19図の両
エリア150と151を含む。この空間は、4つの別々
のセグメントku36gエリア150、ksegoエリ
ア152、kseglJ−リア153及びl(seg2
エリア154ををする。 核モードのためのkusegエリア150のセグメント
は、ユーザーモードの”kuseg”エリアに対応して
2Gバイトのサイズを有する。従って、核モードにおい
て、プロセッサはまさにユーザーモードの参照における
ようにこのセグメントに対して参照を行って、ユーザー
データへの核アクセスを能率化する。kusegエリア
150は、ユーザーコードとユーザーデータを保持する
ために使用される。しかし、オペレーティングシステム
は、しばしばこの同じコード又はデータを参照すること
を必要とする。上記ksegOエリア152は、物理的
アドレス空間の初めの512Mバイトに直接にマツピン
グされる512Mバイトの核物理的アドレス空間であり
、キャシュされるが、TLB83を使用しない。このセ
グメントは、核実行可能コードとある核データのためζ
;使用され、ローカルメモリ16内に第18図のエリア
143によって表される。上記kseglエリア153
は、ksegoエリアと同様に、物理的アドレス空間の
初めの512Mバイトに直接にマツピングされ、キャシ
ュされず、TLBエントリを用いない。kseglエリ
アは、キャシュされないことだけがksegoエリアと
異なる。kseglエリアは、■10レジスタ、ROM
コード及びディスクバッファのためのオペレーティング
システムによって使用され、第18図の物理的マツプの
エリア147と149に対応する。kseg2エリア1
54は、IGバイトの空間であり、kusegエリアの
ように、キャシュを用い又は用いずに、任意の物理的ア
ドレスに仮想アドレスをマツピングするためのTLB8
3エントリを使用する。このkseg2エリアは、ユー
ザーモードにおいてアクセスできず、核モードにおいて
のみアクセスできるということだけが、k、usegエ
リア150と異なる。オペレーティングシステムは、ユ
ーザーページテーブル(メモリマツプ)のためと動的に
割り当てられるデータエリアのために、qンテキストス
イッチに再びマツピングしなければならないスタックと
バープロセスデータ(per−process dat
a)のためにkseg2エリアを使用する。kseg2
エリアは、全てか無かのアプローチを必要とするよりは
むしろ、パーページベーシス(per page ba
sis)への選択的キャシングとマツピングを可能にす
る。 マイクロプロセッサチップのレジスタ76又はPC80
とバス84での出力に発生される32ビツトの仮想アド
レスは、第20図に示される。ここで分かるように、ビ
ット0−11は、第3図のバス42でのアドレスの下位
12ビツトとして無条件に使用されるオフセットであり
、ビット12−31は、ビット29−31がkuseg
J−リア、ksegOエリア、kseglエリア及びk
Seg2エリアの間で選択する仮想ページ数(VPN)
である。現在実行中のプロセスのためのプロセスアイデ
ンティファイア(P I D)は、TLBによってもア
クセス可能なレジスタ内に格納される。・64ビツトの
TLBエントリは、同様に第20図に表され、ここで分
かるように、仮想アドレスからの29ビツトVPNは、
64ビツトエントリのピッ)44−63に位置される2
0ビツトVPNフイールドと比較され、一方、同時に、
PIDはビツト38−43と比較される。もし対の一方
が64の64ビツトTLBエントリのいずれかに見いだ
されるならば、対となったエントリのビット12−31
でのページフレーム数PFNは、(他の基準が適合する
ことを仮定して)第3図のバス82と42を介した出力
として使用される。TLBエントリにおける他の1ビツ
トの値は、N、D、V及びGを含む。ここで、Nはキャ
ッシュできない指標であり、もしセットされれば、ペー
ジはキャシュできず、プロセッサは、キャシュ44又は
45をまずアクセスする代わりにローカルメモリ又はグ
ローバルメモリをアクセスする。Dは、ライトプロテク
トビットであり、もしセットされれば、ロケーションが
「よごれ」ていて、従って、ライト可能であるが、もし
0ならば、ライト動作はトラップを起こすことを意味す
る。■ビットは、セットされれば、正当であることを意
味し、単に正当なビットを再セットするだけでTLBエ
ントリをクリアできることを意味する。このVビットは
、このシステムのページのスワツピング配置において、
ページがローカルメモリにあるかグローバルメモリにあ
るかを示すI;めに使用される。Gビットは、正当なT
LB翻訳のためのPIDマツチの要請を無視するグロー
バルアクセスを許可するためにある。 装置コントローラ30は、ローカルメモリに対してDM
Aを直接に行うことができない。従って、グローバルメ
モリは、DMAタイズのブロック転送(典型的にはディ
スク148などから)のためのステージングエリアとし
て使用される。CPUは、コントローラ(すなわちプロ
グラムされた■10によって動作を開始しまた制御する
ために、コントローラ30において直接に動作を実行す
ることができる。しかしながら、コントローラ30は、
グローバルメモリに対するDMAを除いて、DMAを行
うことができない。コントローラ30は、vMEバス(
パス28)マスクになることができ、I10プロセッサ
26又は27を介してメモリモジュール14と15内の
グローバルメモリに直接にリード動作とライト動作を行
う。 グローバルメモリとローカルメモリ(及びディスク)と
の間のページのスワツピングは、ページ7オールトとエ
ージングプロセスとの一方によって開始される。プロセ
スが実行中でありグローバルメモリ又はディスクにある
ページから実行すること又はそのページからアクセスを
することを試みるときに、ページフォールトが生じる。 すなわち、TLB83は、ミスを示し、トラップが生じ
るであろう。従って、核のローレベルトラップコードが
ページのロケーションを示し、ページのスワツピングを
開始するためのルーチンがエンターされる。もし必要と
されるページがグローバルメモリ内にあるならば、一連
のコマンドがDMA:7ントローラに送られて、最も少
なく最近使用されたページをローカルメモリからグロブ
パルメモリに書き込み、その必要とされたページをグロ
ブパルメモリからローカルメモリに読む出す。もしその
ページがディスクにあるならば、コマンドとアドレス(
セクタ)が、ディスクに行ってそのページを得るために
CPUからコントローラ30に書き込まれる。そして、
メモリ参照をするプロセスが一時停止される。ディスク
コントローラがデータを見付けそれを送信する用意がで
きたとき、メモリモジュールによって(cPUに到達せ
ずに)使用される割り込み信号が出力されて、グローバ
ルメモリにそのページを書き込むためにグローバルメモ
リへのDMAをディスクコントローラが始めることを許
可する。終了したときは、CPLTは割り込みされて、
DMAコントローラの制御の下にブロック転送を開始し
て、最も少なく使用されたページをローカルメモリから
グローバルメモリへスワツピングし、必要なページをロ
ーカルメモリへ読み込む。次に、元のプロセスが再び実
行(ラン)可能にされ、その状態は元に戻され、□元の
メモリ参照が再び生じ、ローカルメモリ内にその必要な
ページを見付ける。ページのスワツピングを開始するも
う1つのメカニズムは、エージングルーチンであり、こ
れにより、オペレーティングシステムは、各ページが最
近使用されたか否かについて又グローバルメモリへの押
し出しを被っていないページについてマークしながら周
期的にローカルメモリ内のページを通過していく。タス
クスイッチはそれ自身ページのスワツピングを開始しな
いが、その代わり、新しいページがページフォールトを
つくり始めたとき、ページは必要なだけスワツピングさ
れ、スワツピングのための候補は、最近は使用されてい
ないものである。 もしメモリ参照がなされTLBミスが示されるが、しか
しTLBミス例外から生じるページテーブルルックアッ
プがそのページがローカルメモリ内にあることを示すな
らば、このページがローカルメモリ内にあることを示す
ためにTLBエントリがなされる。すなわち、プロセス
は、TLBミスが起こったときに例外をとり、(核デー
タ区分内の)ページテーブルに行き、テーブルエントリ
を見付け、TLBに対して書き込み、次に進むことが許
される。しかし、もしメモリ参照がTLBミスを示し、
ページテープが、対応する物理アドレスが(8Mバイト
の物理アドレスを越えて)グローバルメモリ内にあるこ
とを示すならば、I’LBエントリがこのページのため
に実行され、そして、プロセスが再び続くとき、プロセ
スは、前と同様にTLB内にページエントリを見いt(
す。さらに1つの例外は、正当なビットが0であって、
そのページが物理的にローカルメモリ内にないことを示
すために採られる。そして、このときは、例外は、グロ
ーバルメモリからローカルメモリにページをスワツピン
グするルーチンをpテドし、そして実行が進むことがで
きる。第3の状況で(よ、もしページテーブルが、メモ
リ参照のためのアドレスがローカルメモリやグローバル
メモリ内に無くディスクにあることを示すならば、シス
テムは、上に示されたように動作し、すなわち、プロセ
スはランキュー(run queue)を去り、スリー
ブキュ(sleep queue)に入り、ディスク要
求がなされ、ディスクがそのページをグローバルメモリ
に転送しコマンド完了割り込み信号を出力したとき、ペ
ージがグローバルメモリからローカルメモリへスワツピ
ングされ、TLBは更新され、次にプロセスは再び実行
できる。 〈プライベートメモリ〉 メモリモジュール14と15は同じ位置に同じデータを
格納でき、全3個のcptrll、12及び13はこれ
らのメモリモジュールに対して等しいアクセスを行うが
、各メモリモジュールにはプライベートメモリとしてソ
フトウェア制御のもとで割り当てられた小さなエリアが
ある。例えば、第21図に図示されるように、メモリモ
ジュール位置のマツプのエリア155は、プライベート
メモリエリアとして呼ばれ、全CPUが[プライベート
メモリライトココマンドをバス59に出力したときにの
みライト可能である。実施例では、プライベートメモリ
エリア155は、各CPUモジュールのバスインターフ
ェース56のレジスタ156に含まれるアドレスで出発
する4にのべ〒ジである。この出発アドレスは、CPU
によってこのレジスタ156に書き込むことによってソ
フトウェア制御のもとて変更できる。プライベートメモ
リエリア155は、さらに3個のCPUの間で分割され
る。CPU−AだけがエリアL55=aに書き込むこと
ができ、CPU−Bだけがエリア155bに書く込むこ
とができ、CPU−Cだけがエリア155cに書く込む
ことができる。バス57の1つのコマンド信号は、動作
がプライベートライトであることをメモリモジュール1
4と15に知らせるために、バスインターフェース56
によってセットされる。そして、これは、ストア命令か
らプロセッサ40によって発生されたアドレスに対応し
てセットされる。アドレスのビット(およびライトコマ
ンド)は、(バスアドレスをレジスタ156の内容に比
較する)バスインターフェース内のデコーダ157によ
って検出され、バス57に対する「プライベートメモリ
ライト丁コマンドを発生するために使用される。メモリ
モジュールでは、ライトコマンドがレジスタ94.95
及び96で検出され、アドレスとコマンドが全てボート
回路100によって良好(すなわち一致している)とポ
ートされたとき、制御回路100は、ただ1個のCPU
からのデータをバス101へと通すことを許可し、これ
は、全CPUからのアドレスの2ビツトによって決定さ
れる。このプライベートライトの間に、全3個のCPU
は、バス57に同じアドレスを示すが、バス58に異な
ったデータを示す(この異なったデータは、例えばCP
Uへのステートキューである)。メモリモジュールは、
アドレスとコマンドをボートし、アドレスバスに見られ
たアドレスフィールドの部分によって基づいてただ1個
のCPUからデータを選択する。CPUがデータをボー
トすることを可能にするため、全3個のCPUは、両メ
モリモジュール14と15内へ、CPUに一義的なステ
ート情報の3個のプライベートライト動作(バス211
22.23に3個のライト動作がある)を行う。各ライ
ト動作の間に、各CPUは、一義的データを送信するが
、ただ1個だけが各時間にアクセプトされる。それで、
全3個のCPUによって実行されるソフトウェアシーケ
ンスは、(1)ロケーション155aにストア、(2)
ロケーション155bにストア、(3)ロケーション1
55cにストアである。しかしながら、ただ1個のCP
Uからのデータが実際には各時間に書き込まれ、そのデ
ータはボートされない。なぜならば、異なっており又は
異る可能性があり、そしてボートされるならばフォール
トを示す可能性があるからである。 次に、全CPUは、全3個のロケーション155a、1
55b、155cを読んで、ソフトウェアによりこのデ
ータを比較することによってデテタボートすることがで
きる。このタイプの動作は、例えば診断に又は原因レジ
スタ(cause register)データをボート
するための割り込みにおいて使用される。 プライベートライトのメカニズムは、7オールト検出と
回復において使用される。例えば、もし全CPUがメモ
リリード要求をするときにバスエラー(メモリモジュー
ル14又は15が?くラドスティタス(bBd 5ta
tus)をライン33−1または33−2に戻すような
とき)を検出するような場合セある。この点で、CPU
は、他のCPUがメモリモジュールから同じスティタス
を受け取っているか否かを知らない。CPUが故障で有
り得るし、そのスティタス検出回路が故障で有り得るし
、あるいは、示されたように、メモリが故障で有り得る
。それで、故障を分離するために、上述のバスフォール
トルーチンがエンターされたときに、全3個のCPUは
、前のリードの試みでメモリモジュールからまさに受信
したスティタス情報のプライベートライト動作を行う。 次に、全3個のCPUは、他のCPUが書き込んだもの
を読み出し、自分自身のメモリスティタス情報と比較す
る。もしそれらが一致するならば、メモリモジュールは
、オフラインでボートされる。もし一致せず、1個のC
PUがメモリモジュールに対して悪いスティタスを示し
他のCPUが良好なスティタスを示すならば、CPUは
オフラインでボートされる。 〈フォールトトレラント電源〉 第22図を参照して、好ましい実施例のシステムは、上
述のCPUモジュール、メモリモジュール、I10プロ
セッサモジュール、I10コントローラ、及びディスク
モジュールのオンラインでの交換と同様に、故障した電
源モジュールをオンラインで交換できるフォールトトレ
ラントな電源を使用できる。第22図の回路で、交流電
力ライン160は、電力分配ユニット161に直接に接
続され、このユニット161は、電力ラインのろ波器、
過渡電流の抑圧器、及び短絡に対して保護するためのサ
ーキットブレーカを提供する。交流電力ラインの故障に
対して保護するために、冗長性のバッテリバック162
と163が、順序圧しいシステムシャットダウンを完了
しうるような4−172分の全システム電力を与える。 2個のバッテリパックの1個162又は163だけが、
システムを安全にシャットダウンするために動作するの
に必要である。 電力サブシステムは、2つの同一の交流から直流へのバ
ルク電源164と165を備え、これらの電源は、高電
力ファクタを備え、1対の36ボルト直流分配バス16
6と167にエネルギーを供給する。このシステムは、
動作中である1個のバルク電源】64又は165を用い
て、動作し続けることが可能である。 4つの別々の電力分配バスがこれらのバス166と16
7に含まれる。バルク電源164は、電力バスl 66
−1と167−1を駆動し、?(ルク電源165は、電
力バス166−2と167−2を駆動する。バッテリバ
ック163は、バス166−3、l 67−3を駆動し
、バスl 66−1と167−2から再チャージされる
。3個のCPU 11゜12.13は、これらの4個の
分配バスの異なった組み合わせから駆動される。 これらの36Vバス166と167に結合された多数の
DC−DCコンバータ168が、cpuモジュール11
.12及び13.メモリモジュール26と27、及びI
10コントローラ30を個々に電力を供給するために使
用される。バルク電源I6と165は、また、3(Il
のシステムファン169と、バッテリバック162と1
63のためのバッテリチャージャに電力を供給する。各
システム部品に対するこれらの別々のDC=DC:l;
lンバータを備えることにより、1個のコンバータの故
障はシステムシャットダウンを生じず、その代わり、シ
ステムは、上述した故障回復モードの1つで動作を続け
、故障した電源部品をシステム動作中に交換できる。 この電源システムを、スタンドバイとオフの機能を備え
た手動スイッチか、もしくは保守・診断電源の故障の場
合に電源オン状態を自動的にオフ状態とする保守・診断
プロセッサ170からのソフトウェア制御の下のいずれ
かで、シャフトダウンできる。 本発明は、特別な実施例を参照して説明されたが、この
説明は、制限的な意味でなされたのではない。開示され
た実施例の様々な変形が、本発明の他の実施例と同様に
、この説明を参照して当業者に明らかである。従って、
添付した特許請求の範囲は、本発明の範囲内で実施例の
任意のそのような変更を含む。
第1図は、本発明の1実施例によるコンピュータシステ
ムの電気回路のブロック図である。 第2図は、第1図のCPUの電気回路のブロック図であ
る。 第3図は、第2図のCPUに使用されるマイクロプロセ
ッサチップの電気回路のブロック図である。 第4図と第5図は、それぞれ、第2図と第3図のCPU
において生じるイベントを時間の関数として示すタイミ
ング図である。 第6図は、第1図のコンピュータシステムにおけるis
のメモリモジュールの電気回路のブロック図である。 第7図は、第1図のシステムにおけるメモリバスに対し
CPUにおこるイベントを示すタイミング図である。 第8図は、第1図のコンピュータシステムでの1個のI
10プロセッサの電気回路のブロック図である。 第9図は、第1図のシステムでのメモリモジュールとI
10プロセッサの間の転送プロトコルのためのイベント
を示すタイミング図である。 第10図は、第1図から第3図までのCPUにおける命
令の実行のためのイベントを示すタイミング図である。 第10a図は、第10図の図の一部の詳細図である。 第11図と第12図は、それぞれ、第1図から第3図ま
でのCPUにおける命令の実行のためのイベントを示す
第10図と同様なタイミング図である。 第13図は、第2図のCPUにおいて用いられる割り込
み同期回路の電気回路のブロック図である。 第14図、第15図、第16図及び第17図は、それぞ
れ、第1図から第3図までのCPUでの命令の実行のた
めのイベントを示す第10図または第11図と同様なタ
イミング図であり、様々な場面を説明する。 第18図は、第1図、第2図、第3図及び第6図のシス
テムにおいて使用されるメモリの物理的メモリマツプ図
である。 第19図は、第1図、第2図、第3図及び第6図のシス
テムにおいて使用されるメモリの仮想的メモリマツプ図
である。 第20図は、第2図または第3図によるCPUにおける
マイクロプロセッサチップにおける仮想アドレスとTL
Bエントリの7オーマツトの図である。 第21図は、第1図、第2図、第3図及び第6図のシス
テムにおいて使用されるグローバルメモリモジュールの
メモリマツプにおける専用メモリの位置の説明図である
。 第22図は、本発明の1実施例によるシステムで使用さ
れるフォールトトレラントな電源の回路図である。 11.12.13・・・プロセッサ(cP U)、14
.15・・・メモリモジュール、 16・・・ローカルメモリ、 17・・・クロック発振器、 21.22.23・・・バス、 24.25・・・入出力バス、 26.27・・・入出カプロセッサ、 28・・・バス、 29・・・バスインターフェースモジュール、30・・
・I10コントローラ、 31・・・ラジアルライン、 32・・・システムステータスバス、 33・・・肯定応答/ステータスバス、40・・・マイ
クロプロセッサチップ、41.42.43・・・ローカ
ルバス、44.45・・・キャッシュメモリ、 46・・・浮動小数点コプロセッサ、 50・・・ライトバッファ、 51・・・リードバッファ、 52・・・ライトバッファバイパス、 53・・・データバス、 54・・・アドレスバス、 55・・・制御バス、 56・・・バスインターフェース、 57・・・多重アドレス/データバス、58・・・コマ
ンドライン、 60・・・メモリコントローラ、 61・・・ローカルレジスタ、 62・・・不揮発性メモリ、 65・・・割り込み回路、 71・・・サイクルカウンタ、 72・・・リフレッシュカウンタ、 73・・・カウンタ、 74・・・DMA回路、 76・・・レジスタ、 77・・・ALU。 78・・・シック、 81・・・プロセッサバス構造、 82・・・命令デコーダ、 83・・・トランスレーションルッタアサイトハッ7ア
(TLB)、 84・・・仮想アドレスバス、 87・・・パイプライン及びバス制御回路、91.92
.93・・・入力/出力ポート、94.95.96・・
・レジスタ、 100・・・ポート回路、 101・・・データバス、 102・・・アドレスバス、 103・・・コマンドバス、 104・・・DRAM。 105・・・メモリコントローラ、 106・・・制御・ステータスレジスタ、107・・・
不揮発性RAM。 108・・・ライトプロテクト、 109・・・バスインターフェース、 110・・・アービトレータ回路、 114・・・リードレジスタ、 117・・・コントローラ、 118・・・す7レツシユカウンタ、 119・・・割り込みポート回路、 121、 122・・・ボート、 123・・・双方向多重アドレス/データバス、124
・・・双方向コマンドバス、 126・・・ステートマシン、 127.128・・・ラッチ、 130・・・内部ステータス・制御レジスタ、131・
・・バスインターフェース、 132・・・マルチプレクサ、 133・・・制御・データ転送レジスタ、135・・・
割り込み分配器、 136・・・割り込みボータ、 138・・・保持レジスタ、 141・・・ローカルメモリエリア、 142・・・グローバルメモリエリア、143・・・核
エリア、144・・・核データエリア、145・・・ユ
ーザプログラムベージエリア、146・・・ユーザペー
ジエリア、 147・・・ディスクバッファエリア、149・・・I
10ステージングエリア、160・・・交流電力ライン
、 161・・・電力分配ユニット、 162.163・・・バッテリバック、164.165
・・・バルク電源、 166.167・・・直流分配バス、 168・・・DC−DCコンバータ、 169・・・システムファン、 170・・・保守・診断グロセッサ、 第9図 <CQ ココ c1+− 〇〇 クコ 0+− 第19区 物■里
ムの電気回路のブロック図である。 第2図は、第1図のCPUの電気回路のブロック図であ
る。 第3図は、第2図のCPUに使用されるマイクロプロセ
ッサチップの電気回路のブロック図である。 第4図と第5図は、それぞれ、第2図と第3図のCPU
において生じるイベントを時間の関数として示すタイミ
ング図である。 第6図は、第1図のコンピュータシステムにおけるis
のメモリモジュールの電気回路のブロック図である。 第7図は、第1図のシステムにおけるメモリバスに対し
CPUにおこるイベントを示すタイミング図である。 第8図は、第1図のコンピュータシステムでの1個のI
10プロセッサの電気回路のブロック図である。 第9図は、第1図のシステムでのメモリモジュールとI
10プロセッサの間の転送プロトコルのためのイベント
を示すタイミング図である。 第10図は、第1図から第3図までのCPUにおける命
令の実行のためのイベントを示すタイミング図である。 第10a図は、第10図の図の一部の詳細図である。 第11図と第12図は、それぞれ、第1図から第3図ま
でのCPUにおける命令の実行のためのイベントを示す
第10図と同様なタイミング図である。 第13図は、第2図のCPUにおいて用いられる割り込
み同期回路の電気回路のブロック図である。 第14図、第15図、第16図及び第17図は、それぞ
れ、第1図から第3図までのCPUでの命令の実行のた
めのイベントを示す第10図または第11図と同様なタ
イミング図であり、様々な場面を説明する。 第18図は、第1図、第2図、第3図及び第6図のシス
テムにおいて使用されるメモリの物理的メモリマツプ図
である。 第19図は、第1図、第2図、第3図及び第6図のシス
テムにおいて使用されるメモリの仮想的メモリマツプ図
である。 第20図は、第2図または第3図によるCPUにおける
マイクロプロセッサチップにおける仮想アドレスとTL
Bエントリの7オーマツトの図である。 第21図は、第1図、第2図、第3図及び第6図のシス
テムにおいて使用されるグローバルメモリモジュールの
メモリマツプにおける専用メモリの位置の説明図である
。 第22図は、本発明の1実施例によるシステムで使用さ
れるフォールトトレラントな電源の回路図である。 11.12.13・・・プロセッサ(cP U)、14
.15・・・メモリモジュール、 16・・・ローカルメモリ、 17・・・クロック発振器、 21.22.23・・・バス、 24.25・・・入出力バス、 26.27・・・入出カプロセッサ、 28・・・バス、 29・・・バスインターフェースモジュール、30・・
・I10コントローラ、 31・・・ラジアルライン、 32・・・システムステータスバス、 33・・・肯定応答/ステータスバス、40・・・マイ
クロプロセッサチップ、41.42.43・・・ローカ
ルバス、44.45・・・キャッシュメモリ、 46・・・浮動小数点コプロセッサ、 50・・・ライトバッファ、 51・・・リードバッファ、 52・・・ライトバッファバイパス、 53・・・データバス、 54・・・アドレスバス、 55・・・制御バス、 56・・・バスインターフェース、 57・・・多重アドレス/データバス、58・・・コマ
ンドライン、 60・・・メモリコントローラ、 61・・・ローカルレジスタ、 62・・・不揮発性メモリ、 65・・・割り込み回路、 71・・・サイクルカウンタ、 72・・・リフレッシュカウンタ、 73・・・カウンタ、 74・・・DMA回路、 76・・・レジスタ、 77・・・ALU。 78・・・シック、 81・・・プロセッサバス構造、 82・・・命令デコーダ、 83・・・トランスレーションルッタアサイトハッ7ア
(TLB)、 84・・・仮想アドレスバス、 87・・・パイプライン及びバス制御回路、91.92
.93・・・入力/出力ポート、94.95.96・・
・レジスタ、 100・・・ポート回路、 101・・・データバス、 102・・・アドレスバス、 103・・・コマンドバス、 104・・・DRAM。 105・・・メモリコントローラ、 106・・・制御・ステータスレジスタ、107・・・
不揮発性RAM。 108・・・ライトプロテクト、 109・・・バスインターフェース、 110・・・アービトレータ回路、 114・・・リードレジスタ、 117・・・コントローラ、 118・・・す7レツシユカウンタ、 119・・・割り込みポート回路、 121、 122・・・ボート、 123・・・双方向多重アドレス/データバス、124
・・・双方向コマンドバス、 126・・・ステートマシン、 127.128・・・ラッチ、 130・・・内部ステータス・制御レジスタ、131・
・・バスインターフェース、 132・・・マルチプレクサ、 133・・・制御・データ転送レジスタ、135・・・
割り込み分配器、 136・・・割り込みボータ、 138・・・保持レジスタ、 141・・・ローカルメモリエリア、 142・・・グローバルメモリエリア、143・・・核
エリア、144・・・核データエリア、145・・・ユ
ーザプログラムベージエリア、146・・・ユーザペー
ジエリア、 147・・・ディスクバッファエリア、149・・・I
10ステージングエリア、160・・・交流電力ライン
、 161・・・電力分配ユニット、 162.163・・・バッテリバック、164.165
・・・バルク電源、 166.167・・・直流分配バス、 168・・・DC−DCコンバータ、 169・・・システムファン、 170・・・保守・診断グロセッサ、 第9図 <CQ ココ c1+− 〇〇 クコ 0+− 第19区 物■里
Claims (38)
- (1)(a)実質的に同一の構成を備え、実質的に同一
の命令ストリームを実行する第1、第2及び第3のCP
Uと、 (b)実質的に同一の構成を備え、実質的に同一のデー
タを格納できる第1と第2のメモリモジュールと、 (c)第1、第2及び第3のCPUの各々を個々に上記
の第1と第2のメモリモジュールの各々に結合し、これ
により上記の第1、第2および第3のCPUが上記の第
1と第2のメモリモジュールに別々にかつ2重にアクセ
スするバスと、(d)上記の第1メモリモジュールに結
合される第1入力/出力バス、及び、上記の第2メモリ
モジュールに結合される第2入力/出力バスと、(e)
上記の第1と第2の入力/出力バスの双方に結合された
第1入力/出力プロセッサ、及び、上記の第1と第2の
入力/出力バスの双方に結合された第2入力/出力プロ
セッサとからなるフォールトトレラントなコンピュータ
システム。 - (2)請求項1に記載されたシステムにおいて、上記の
第1、第2及び第3のCPUがメモリ参照のイベントの
さいに緩く同期されるフォールトトレラントなコンピュ
ータシステム。 - (3)請求項2に記載されたシステムにおいて、上記の
第1と第2のメモリモジュールへの上記の全CPUによ
るアクセスを検出し、アクセスがより早く起こったため
に上記の全CPUの中の最後のCPUが上記のアクセス
を実行するまで待たねばならないいずれかのCPUをス
トールすることにより、上記の第1、第2及び第3のC
PUがメモリ参照のイベントのさいに緩く同期されるフ
ォールトトレラントなコンピュータシステム。 - (4)請求項1に記載されたシステムにおいて、上記の
第1、第2及び第3のCPUが、上記の実行が非同期で
あるような独立したクロックをもとに作動するフォール
トトレラントなコンピュータシステム。 - (5)請求項1に記載されたシステムにおいて、上記の
2個のメモリモジュールの一方がプライマリメモリと指
定され、他方がバックアップメモリとして指定され、全
CPUによるライト動作が上記の両メモリモジュールに
おいて実行されるが、しかしリード動作においては、上
記の全CPUがプライマリメモリからのみデータを受け
取り、そして、どの時間においても、バックアップメモ
リモジュールがプライマリメモリとして指定でき、プラ
イマリメモリがプライマリメモリとして指定できるフォ
ールトトレラントなコンピュータシステム。 - (6)請求項1に記載されたシステムにおいて、上記の
第1と第2の入力/出力バスの両方に結合された少なく
とも1個の追加の入力/出力プロセッサを備えるフォー
ルトトレラントなコンピュータシステム。 - (7)請求項1に記載されたシステムにおいて、上記の
メモリモジュールが上記のメモリ参照をボートするため
の手段を備え、上記のメモリ参照をボートするための上
記の手段においてメモリライトのためだけにデータがボ
ートされ、アドレスとコマンドがメモリリードとメモリ
ライトの両方のためだけにボートされるフォールトトレ
ラントなコンピュータシステム。 - (8)請求項7に記載されたシステムにおいて、上記の
メモリモジュールの各々がランダムアクセスメモリを備
え、このランダムアクセスメモリが上記のボートするた
めの手段の動作と並列にアクセスされるフォールトトレ
ラントなコンピュータシステム。 - (9)請求項1に記載されたシステムにおいて、上記の
第1、第2及び第3のCPUの1つが故障したときに、
そのCPUがオフラインに置かれ、残りの2個のCPU
が上記の命令ストリームを実行することを続けるフォー
ルトトレラントなコンピュータシステム。 - (10)(a)第1、第2及び第3の個々にクロックを
備えたCPUの各々において同じ命令を実行するステッ
プと、 (b)第1と第2のメモリモジュールに同一のデータを
格納するステップと、 (c)上記の第1と第2のメモリモジュールの各々に対
して個々に上記の第1、第2及び第3のCPUの各々に
よるメモリ参照を実行するステップと、 (d)上記のメモリ参照が上記の第1、第2及び第3の
CPUから受け取られたときに、上記のメモリ参照に応
答して上記の第1と第2のメモリモジュールにおける格
納動作または再呼び出し動作を行うステップからなる冗
長性コンピュータシステムの作動法。 - (11)請求項10に記載された方法において、(e)
上記の第1メモリモジュールに結合された第1入力/出
力バスと、上記の第2メモリモジュールに結合された第
2入力/出力バスとに対し別々に入力/出力機能を実行
するステップと、(f)上記の第1と第2の入力/出力
バスの両方に結合された第1入力/出力プロセッサにお
いて、及び、上記の第1と第2の入力/出力バスの両方
に結合された第2入力/出力プロセッサにおいて上記の
入力/出力機能を処理するステップを含む冗長性コンピ
ュータシステムの作動法。 - (12)請求項11に記載された方法において、メモリ
参照のイベントのときに同期を検出し、上記の第1、第
2及び第3のCPUのいずれか1個のCPUをストール
して、このイベントが全3個のCPUにより同期して実
行されるように他のCPUを導くようにすることにより
全CPUを緩く同期するステップを備える冗長性コンピ
ュータシステムの作動法。 - (13)請求項10に記載された方法において、上記の
第1と第2の入力/出力バスの両方に結合された少なく
とも1個の追加の入力/出力プロセッサにおいて上記の
入力/出力機能を処理するステップを備える冗長性コン
ピュータシステムの作動法。 - (14)請求項11に記載された方法において、上記の
メモリ参照を処理し、これにより、上記の第1)第2及
び第3のCPUを相互に同期するステップを備える冗長
性コンピュータシステムの作動法。 - (15)請求項10に記載された方法において、上記の
第1、第2及び第3のCPUから上記の第1と第2のメ
モリモジュールの両方への上記のメモリアクセスをボー
トするステップと、上記の第1と第2のメモリモジュー
ルの各々のメモリをアクセスする一方上記のボートする
ステップを上記のボートするステップが完了したときメ
モリアクセスが直ちに有効にできるように同時に行うス
テップを備える冗長性コンピュータシステムの作動法。 - (16)(a)同じ命令ストリームを実行するが、CP
Uであって、それぞれ別々のメモリアクセスポートを備
える第1、第2及び第3のCPUと、 (b)2重のデータを格納するための上記の全CPUの
アドレス範囲内で同一のアドレス空間を備える第1と第
2のメモリ手段であって、両メモリ手段の各々が、それ
ぞれ、上記の第1、第2及び第3のCPUの上記のメモ
リアクセスポートに結合された第1、第2及び第3の入
力/出力ポートを備える第1と第2のメモリ手段と、 (c)アクセスのためのポートの間の情報を比較し、少
なくとも2個のポートが同じそのような情報を有する場
合のみにアクセスの完了を許すポート手段を備える上記
の第1、第2及び第3のポートの各々とを備えたコンピ
ュータシステム。 - (17)請求項16に記載されたシステムにおいて、 第1と第2の入力/出力バスを備え、上記の第1と第2
のメモリ手段が各々別々の周辺入力/出力ポートを備え
、上記の第1と第2の入力/出力バスが上記の第1と第
2のメモリ手段の上記の入力/出力ポートに別々に結合
されるコンピュータシステム。 - (18)請求項16に記載されたシステムにおいて、 全3個の上記の第1、第2及び第3のCPUが厳密に同
じメモリ参照を実行するまでメモリ参照の実行をストー
ルすることにより上記の全CPUにおける命令ストリー
ムの実行を同期する手段を備えるコンピュータシステム
。 - (19)請求項16に記載されたシステムにおいて、 上記の情報がライト動作のためのアドレスとデータの情
報を含むコンピュータシステム。 - (20)請求項16に記載されたシステムにおいて、 上記のCPUの各々が別々のクロックを備えて非同期に
作動し、上記の第1と第2のメモリモジュールの各々が
別々のクロックを備え、これにより、上記のCPUとメ
モリモジュールが全て非同期に作動するコンピュータシ
ステム。 - (21)請求項20に記載されたシステムにおいて、 メモリ参照のイベントにおいて、より遅いCPUが追い
付くまで上記の全CPUをストールすることにより上記
の全CPUが相互に緩く結合されるコンピュータシステ
ム。 - (22)(a)第1、第2及び第3のCPUにおいて同
じ命令ストリームを実行するステップと、(b)上記の
第1、第2及び第3のCPUの各々において別々の第1
、第2及び第3のメモリアドレスバスで命令アドレスを
発生するステップと、(c)実質的に第1、第2及び第
3のメモリバスを介して上記の第1と第2のメモリ手段
の各々にメモリアクセスを実行するステップを含み、上
記のCPUのアドレス範囲内で実質的に同一のアドレス
空間を備える第1と第2のメモリ手段に2重のデータを
格納するステップと、 (d)上記のメモリアクセスを表す情報を比較するステ
ップを含み、上記の第1、第2及び第3のメモリアクセ
スバスから受け取ったときに上記の第1と第2のメモリ
手段において上記のメモリアクセスの各々をボートする
ステップと、 (e)上記のアドレスバスの少なくとも2個が同じその
ような情報を示す場合にのみ上記のアクセスが完了する
ことを可能にするステップとを備えるコンピュータシス
テムの作動法。 - (23)請求項22に記載された方法において、上記の
第1、第2及び第3のCPUが実質的に同時に同じ命令
ストリームを実行することにより上記のCPUを同期す
るステップを含み、上記のCPUを同期する上記のステ
ップが、全3個の第1、第2及び第3のCPUが同時に
同じ命令を実行しているときまでメモリアクセスをスト
ールするステップを含むコンピュータシステムの作動法
。 - (24)請求項23に記載された方法において、上記の
同期のステップが、全3個の第1、第2及び第3のCP
Uが割り込みが示されたときに同じ命令を実行している
ように全CPUの外部割り込みの実施の時間を合わせる
ステップを含むコンピュータシステムの作動法。 - (25)(a)少なくとも第1と第2のプロセッサにお
いて同じ命令ストリームを実行するステップと、 (b)上記の第1と第2のプロセッサの各々においてリ
モートアクセス(このリモートアクセスは別々の第1と
第2のアクセスポートに向けられる)を発生するステッ
プと、 (c)上記の第1と第2のアクセスポートで上記のリモ
ートアクセスの各1つを検出し、リモートアクセスが第
1と第2のアクセスポートの両方で検出されるまで上記
の第1と第2のプロセッサにおける命令の実行をストー
ルするステップを備えたコンピュータシステム作動法。 - (26)請求項25に記載された方法において、上記の
実行のステップが上記の第1と第2のプロセッサ内にあ
り、リモートアクセスを発生する上記のステップが上記
の第1、第2及び第3のプロセッサ内にあるコンピュー
タシステム作動法。 - (27)請求項26に記載された方法において、上記の
第1と第2のアクセスポートが、上記の第1、第2及び
第3のプロセッサに対して非同期に作動される第1と第
2のモジュール内にあるコンピュータシステム作動法。 - (28)請求項25に記載された方法において、上記の
プロセッサのアドレス範囲内に第1と第2のアドレス空
間に2重のデータを格納するステップを含むコンピュー
タシステム作動法。 - (29)請求項25に記載された方法において、上記の
第1と第2のプロセッサにより実行される任意の割り込
みを同期するステップを含み、上記のプロセッサが上記
の命令ストリームにおける同じ命令で同じ割り込みを実
行するコンピュータシステム作動法。 - (30)請求項29に記載された方法において、上記の
プロセッサを同期する上記のステップが、全3個の第1
、第2及び第3のプロセッサが同時に同じメモリアクセ
スを実行しているときまでメモリアクセスの実行をスト
ールすることを含むコンピュータシステム作動法。 - (31)請求項29に記載された方法において、上記の
同期のステップが、また、全3個の第1、第2及び第3
のプロセッサが同時に同じ割り込みを実行しているとき
まで全CPUの割り込みの実行をストールすることを含
むコンピュータシステム作動法。 - (32)(a)多重のCPUと、 (b)各CPUから別々のポートを介して上記の全CP
Uによってアクセスされ、全CPUから受け取られた要
求をポートする複数の冗長性モジュールと、 (c)上記のCPUにより上記のポートと上記のモジュ
ールとを介してアクセスされる複数の冗長性入力/出力
プロセッサと、 (d)上記の全CPUによって格納されるデータ(この
データは下記の入力/出力装置をアクセスする入力/出
力プロセッサを再指定するために上記の全CPUによっ
て変更可能である)によって指定されたときに上記の入
力/出力プロセッサの1個によってアクセスされる複数
の入力/出力装置を備えたコンピュータシステム。 - (33)請求項32に記載されたシステムにおいて、 上記の多重のCPUが同じ命令ストリームを実行するコ
ンピュータシステム。 - (34)請求項32に記載されたシステムにおいて、 上記の入力/出力プロセッサにおいて故障を検出するた
めの手段を含み、上記の全CPUによって格納された上
記のデータが上記の入力/出力装置におけるレジスタの
アドレスであり、上記の入力/出力プロセッサの各1個
が上記のモジュールの2個を介して上記の全CPUによ
ってアクセスされるコンピュータシステム。 - (35)(a)冗長性モジュールによって全CPUから
受け取られる要求をボートすることを含み、多重のCP
Uにより各CPUから別々のボートを介して複数の冗長
性モジュールをアクセスするステップと、 (b)上記のボートと上記のモジュールとを介して上記
の全CPUによって冗長性入力/出力プロセッサをアク
セスするステップと、 (c)上記の入力/出力プロセッサを介して複数の入力
/出力装置をアクセスし、各入力/出力装置は、上記の
全CPUによって格納されたデータによって指定された
1個の入力/出力プロセッサによってアクセスされ、上
記のデータは、各入力/出力装置をアクセスする入力/
出力プロセッサを再指定する全CPUによって変更でき
るステップを備えた、多重のCPUを備えたコンピュー
タシステムの作動法。 - (36)請求項35に記載された方法において、上記の
多重のCPUが同じ命令ストリームを実行し、上記のモ
ジュールがメモリモジュールである、多重のCPUを備
えたコンピュータシステムの作動法。 - (37)請求項35に記載された方法において、上記の
入力/出力プロセッサにおける故障を検出するステップ
を備え、上記のCPUによって格納された上記のデータ
が上記の入力/出力装置におけるレジスタのアドレスで
ある、多重のCPUを備えたコンピュータシステムの作
動法。 - (38)請求項35に記載された方法において、上記の
各入力/出力プロセッサが上記のモジュールの2個を介
して上記のCPUによってアクセスされる、多重のCP
Uを備えたコンピュータシステムの作動法。
Applications Claiming Priority (10)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| US282629 | 1981-07-13 | ||
| US28254088A | 1988-12-09 | 1988-12-09 | |
| US28246988A | 1988-12-09 | 1988-12-09 | |
| US28262988A | 1988-12-09 | 1988-12-09 | |
| US28357488A | 1988-12-13 | 1988-12-13 | |
| US283574 | 1988-12-13 | ||
| US07/283,573 US4965717A (en) | 1988-12-09 | 1988-12-13 | Multiple processor system having shared memory with private-write capability |
| EP90105103A EP0447578A1 (en) | 1988-12-09 | 1990-03-19 | Memory management in high-performance fault-tolerant computer system |
| EP90105102A EP0447577A1 (en) | 1988-12-09 | 1990-03-19 | High-performance computer system with fault-tolerant capability |
| AU52027/90A AU628497B2 (en) | 1988-12-09 | 1990-03-20 | Memory management in high-performance fault-tolerant computer systems |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH02202636A true JPH02202636A (ja) | 1990-08-10 |
| JPH079625B2 JPH079625B2 (ja) | 1995-02-01 |
Family
ID=41040648
Family Applications (3)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP1322461A Expired - Fee Related JPH079625B2 (ja) | 1988-12-09 | 1989-12-11 | フォールトトレラントな能力を備えたコンピュータ |
| JP1322462A Pending JPH02202637A (ja) | 1988-12-09 | 1989-12-11 | フォールトトレラントコンピュータにおけるメモリ管理システム |
| JP6054483A Pending JPH0713789A (ja) | 1988-12-09 | 1994-02-28 | フォールトトレラントコンピュータにおけるメモリ管理システム |
Family Applications After (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP1322462A Pending JPH02202637A (ja) | 1988-12-09 | 1989-12-11 | フォールトトレラントコンピュータにおけるメモリ管理システム |
| JP6054483A Pending JPH0713789A (ja) | 1988-12-09 | 1994-02-28 | フォールトトレラントコンピュータにおけるメモリ管理システム |
Country Status (7)
| Country | Link |
|---|---|
| US (7) | US4965717A (ja) |
| EP (5) | EP0372578A3 (ja) |
| JP (3) | JPH079625B2 (ja) |
| AT (1) | ATE158879T1 (ja) |
| AU (1) | AU628497B2 (ja) |
| CA (2) | CA2003342A1 (ja) |
| DE (1) | DE68928360T2 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5983359A (en) * | 1996-03-18 | 1999-11-09 | Hitachi, Ltd. | Processor fault recovering method for information processing system |
| JP2014095989A (ja) * | 2012-11-08 | 2014-05-22 | Nec Corp | コンピュータシステム、コンピュータシステムの診断方法及び診断プログラム |
Families Citing this family (433)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CA2003338A1 (en) * | 1987-11-09 | 1990-06-09 | Richard W. Cutts, Jr. | Synchronization of fault-tolerant computer system having multiple processors |
| AU616213B2 (en) * | 1987-11-09 | 1991-10-24 | Tandem Computers Incorporated | Method and apparatus for synchronizing a plurality of processors |
| JPH02103656A (ja) * | 1988-10-12 | 1990-04-16 | Fujitsu Ltd | 主記憶参照の遂次化制御方式 |
| US4965717A (en) * | 1988-12-09 | 1990-10-23 | Tandem Computers Incorporated | Multiple processor system having shared memory with private-write capability |
| AU625293B2 (en) * | 1988-12-09 | 1992-07-09 | Tandem Computers Incorporated | Synchronization of fault-tolerant computer system having multiple processors |
| US5148533A (en) * | 1989-01-05 | 1992-09-15 | Bull Hn Information Systems Inc. | Apparatus and method for data group coherency in a tightly coupled data processing system with plural execution and data cache units |
| EP0378415A3 (en) * | 1989-01-13 | 1991-09-25 | International Business Machines Corporation | Multiple instruction dispatch mechanism |
| US5276828A (en) * | 1989-03-01 | 1994-01-04 | Digital Equipment Corporation | Methods of maintaining cache coherence and processor synchronization in a multiprocessor system using send and receive instructions |
| IT1228728B (it) * | 1989-03-15 | 1991-07-03 | Bull Hn Information Syst | Sistema multiprocessore con replicazione di dati globali e due livelli di unita' di traduzione indirizzi. |
| NL8901825A (nl) * | 1989-07-14 | 1991-02-01 | Philips Nv | Pijplijnsysteem met multi-resolutie dataverwerking op echte-tijd-basis. |
| US5307468A (en) * | 1989-08-23 | 1994-04-26 | Digital Equipment Corporation | Data processing system and method for controlling the latter as well as a CPU board |
| JPH0666056B2 (ja) * | 1989-10-12 | 1994-08-24 | 甲府日本電気株式会社 | 情報処理システム |
| US5551050A (en) * | 1989-12-20 | 1996-08-27 | Texas Instruments Incorporated | System and method using synchronized processors to perform real time internal monitoring of a data processing device |
| US5327553A (en) * | 1989-12-22 | 1994-07-05 | Tandem Computers Incorporated | Fault-tolerant computer system with /CONFIG filesystem |
| US5317752A (en) * | 1989-12-22 | 1994-05-31 | Tandem Computers Incorporated | Fault-tolerant computer system with auto-restart after power-fall |
| US5295258A (en) | 1989-12-22 | 1994-03-15 | Tandem Computers Incorporated | Fault-tolerant computer system with online recovery and reintegration of redundant components |
| JP3372948B2 (ja) | 1990-01-05 | 2003-02-04 | サン・マイクロシステムズ・インコーポレーテッド | 高速アクティブ・バス |
| US5263163A (en) * | 1990-01-19 | 1993-11-16 | Codex Corporation | Arbitration among multiple users of a shared resource |
| JPH0748190B2 (ja) * | 1990-01-22 | 1995-05-24 | 株式会社東芝 | キャッシュメモリ内蔵マイクロプロセッサ |
| DE69123987T2 (de) * | 1990-01-31 | 1997-04-30 | Hewlett Packard Co | Stossbetrieb für Mikroprozessor mit externem Systemspeicher |
| US5680574A (en) * | 1990-02-26 | 1997-10-21 | Hitachi, Ltd. | Data distribution utilizing a master disk unit for fetching and for writing to remaining disk units |
| US6728832B2 (en) | 1990-02-26 | 2004-04-27 | Hitachi, Ltd. | Distribution of I/O requests across multiple disk units |
| JPH03254497A (ja) * | 1990-03-05 | 1991-11-13 | Mitsubishi Electric Corp | マイクロコンピュータ |
| US5247648A (en) * | 1990-04-12 | 1993-09-21 | Sun Microsystems, Inc. | Maintaining data coherency between a central cache, an I/O cache and a memory |
| US5289588A (en) * | 1990-04-24 | 1994-02-22 | Advanced Micro Devices, Inc. | Interlock acquisition for critical code section execution in a shared memory common-bus individually cached multiprocessor system |
| EP0457308B1 (en) * | 1990-05-18 | 1997-01-22 | Fujitsu Limited | Data processing system having an input/output path disconnecting mechanism and method for controlling the data processing system |
| US5276896A (en) * | 1990-06-11 | 1994-01-04 | Unisys Corporation | Apparatus for implementing data communications between terminal devices and user programs |
| US5488709A (en) * | 1990-06-27 | 1996-01-30 | Mos Electronics, Corp. | Cache including decoupling register circuits |
| US5732241A (en) * | 1990-06-27 | 1998-03-24 | Mos Electronics, Corp. | Random access cache memory controller and system |
| DE69129252T2 (de) * | 1990-08-06 | 1998-12-17 | Ncr International, Inc., Dayton, Ohio | Verfahren zum Betrieb eines Rechnerspeichers und Anordnung |
| ATE118907T1 (de) * | 1990-08-14 | 1995-03-15 | Siemens Ag | Einrichtung zur funktionsüberwachung externer synchronisations-baugruppen in einem mehrrechnersystem. |
| GB9019023D0 (en) * | 1990-08-31 | 1990-10-17 | Ncr Co | Work station having multiplexing and burst mode capabilities |
| GB9018993D0 (en) * | 1990-08-31 | 1990-10-17 | Ncr Co | Work station interfacing means having burst mode capability |
| EP0473802B1 (en) * | 1990-09-03 | 1995-11-08 | International Business Machines Corporation | Computer with extended virtual storage concept |
| US6108755A (en) * | 1990-09-18 | 2000-08-22 | Fujitsu Limited | Asynchronous access system to a shared storage |
| CA2059143C (en) * | 1991-01-25 | 2000-05-16 | Takeshi Miyao | Processing unit for a computer and a computer system incorporating such a processing unit |
| US6247144B1 (en) * | 1991-01-31 | 2001-06-12 | Compaq Computer Corporation | Method and apparatus for comparing real time operation of object code compatible processors |
| US5465339A (en) * | 1991-02-27 | 1995-11-07 | Vlsi Technology, Inc. | Decoupled refresh on local and system busses in a PC/at or similar microprocessor environment |
| US5303362A (en) * | 1991-03-20 | 1994-04-12 | Digital Equipment Corporation | Coupled memory multiprocessor computer system including cache coherency management protocols |
| US5339404A (en) * | 1991-05-28 | 1994-08-16 | International Business Machines Corporation | Asynchronous TMR processing system |
| US5233615A (en) * | 1991-06-06 | 1993-08-03 | Honeywell Inc. | Interrupt driven, separately clocked, fault tolerant processor synchronization |
| US5280608A (en) * | 1991-06-28 | 1994-01-18 | Digital Equipment Corporation | Programmable stall cycles |
| US5319760A (en) * | 1991-06-28 | 1994-06-07 | Digital Equipment Corporation | Translation buffer for virtual machines with address space match |
| JPH056344A (ja) * | 1991-06-28 | 1993-01-14 | Fujitsu Ltd | プログラム走行情報採取処理方式 |
| JP3679813B2 (ja) * | 1991-07-22 | 2005-08-03 | 株式会社日立製作所 | 並列計算機 |
| US5421002A (en) * | 1991-08-09 | 1995-05-30 | Westinghouse Electric Corporation | Method for switching between redundant buses in a distributed processing system |
| US5386540A (en) * | 1991-09-18 | 1995-01-31 | Ncr Corporation | Method and apparatus for transferring data within a computer using a burst sequence which includes modified bytes and a minimum number of unmodified bytes |
| JP2520544B2 (ja) * | 1991-09-26 | 1996-07-31 | インターナショナル・ビジネス・マシーンズ・コーポレイション | タスクのオ―バ―ラン状態を監視する方法及びタスク実行サイクルのオ―バ―ランを検出する装置 |
| WO1993009494A1 (en) * | 1991-10-28 | 1993-05-13 | Digital Equipment Corporation | Fault-tolerant computer processing using a shadow virtual processor |
| EP0543032A1 (en) * | 1991-11-16 | 1993-05-26 | International Business Machines Corporation | Expanded memory addressing scheme |
| US5379417A (en) * | 1991-11-25 | 1995-01-03 | Tandem Computers Incorporated | System and method for ensuring write data integrity in a redundant array data storage system |
| EP0550358A3 (en) * | 1991-12-30 | 1994-11-02 | Eastman Kodak Co | Fault tolerant multiprocessor cluster |
| US5313628A (en) * | 1991-12-30 | 1994-05-17 | International Business Machines Corporation | Component replacement control for fault-tolerant data processing system |
| JP2500038B2 (ja) * | 1992-03-04 | 1996-05-29 | インターナショナル・ビジネス・マシーンズ・コーポレイション | マルチプロセッサ・コンピュ―タ・システム、フォ―ルト・トレラント処理方法及びデ―タ処理システム |
| EP0630499A4 (en) * | 1992-03-09 | 1996-07-24 | Auspex Systems Inc | ACCELERATION SYSTEM WITH NON-VOLATILE, PROTECTED, WRITABLE RAM CACHE. |
| US5632037A (en) * | 1992-03-27 | 1997-05-20 | Cyrix Corporation | Microprocessor having power management circuitry with coprocessor support |
| US5428769A (en) * | 1992-03-31 | 1995-06-27 | The Dow Chemical Company | Process control interface system having triply redundant remote field units |
| WO1993020514A1 (en) * | 1992-04-07 | 1993-10-14 | Video Technology Computers, Ltd. | Self-controlled write back cache memory apparatus |
| JP2534430B2 (ja) * | 1992-04-15 | 1996-09-18 | インターナショナル・ビジネス・マシーンズ・コーポレイション | フォ―ルト・トレランスのあるコンピュ―タ・システム出力の合致を達成するための方法 |
| DE4219005A1 (de) * | 1992-06-10 | 1993-12-16 | Siemens Ag | Rechnersystem |
| WO1993025945A1 (en) * | 1992-06-12 | 1993-12-23 | The Dow Chemical Company | Stealth interface for process control computers |
| US5583757A (en) * | 1992-08-04 | 1996-12-10 | The Dow Chemical Company | Method of input signal resolution for actively redundant process control computers |
| US5537655A (en) * | 1992-09-28 | 1996-07-16 | The Boeing Company | Synchronized fault tolerant reset |
| US5379415A (en) * | 1992-09-29 | 1995-01-03 | Zitel Corporation | Fault tolerant memory system |
| US6951019B1 (en) * | 1992-09-30 | 2005-09-27 | Apple Computer, Inc. | Execution control for processor tasks |
| JPH06214969A (ja) * | 1992-09-30 | 1994-08-05 | Internatl Business Mach Corp <Ibm> | 情報通信方法および装置 |
| US5434997A (en) * | 1992-10-02 | 1995-07-18 | Compaq Computer Corp. | Method and apparatus for testing and debugging a tightly coupled mirrored processing system |
| US6237108B1 (en) * | 1992-10-09 | 2001-05-22 | Fujitsu Limited | Multiprocessor system having redundant shared memory configuration |
| US5781715A (en) * | 1992-10-13 | 1998-07-14 | International Business Machines Corporation | Fault-tolerant bridge/router with a distributed switch-over mechanism |
| US5448716A (en) * | 1992-10-30 | 1995-09-05 | International Business Machines Corporation | Apparatus and method for booting a multiple processor system having a global/local memory architecture |
| EP0596410B1 (en) * | 1992-11-04 | 1999-07-28 | Digital Equipment Corporation | Detection of command synchronisation error |
| US5327548A (en) * | 1992-11-09 | 1994-07-05 | International Business Machines Corporation | Apparatus and method for steering spare bit in a multiple processor system having a global/local memory architecture |
| EP0600623B1 (en) * | 1992-12-03 | 1998-01-21 | Advanced Micro Devices, Inc. | Servo loop control |
| US6157967A (en) * | 1992-12-17 | 2000-12-05 | Tandem Computer Incorporated | Method of data communication flow control in a data processing system using busy/ready commands |
| US5675579A (en) * | 1992-12-17 | 1997-10-07 | Tandem Computers Incorporated | Method for verifying responses to messages using a barrier message |
| US5751932A (en) * | 1992-12-17 | 1998-05-12 | Tandem Computers Incorporated | Fail-fast, fail-functional, fault-tolerant multiprocessor system |
| JP2826028B2 (ja) * | 1993-01-28 | 1998-11-18 | 富士通株式会社 | 分散メモリ型プロセッサシステム |
| US5845329A (en) * | 1993-01-29 | 1998-12-01 | Sanyo Electric Co., Ltd. | Parallel computer |
| US5473770A (en) * | 1993-03-02 | 1995-12-05 | Tandem Computers Incorporated | Fault-tolerant computer system with hidden local memory refresh |
| JPH0773059A (ja) * | 1993-03-02 | 1995-03-17 | Tandem Comput Inc | フォールトトレラント型コンピュータシステム |
| DE59302826D1 (de) * | 1993-03-16 | 1996-07-11 | Siemens Ag | Synchronisationsverfahren für Automatisierungssysteme |
| JP2819982B2 (ja) * | 1993-03-18 | 1998-11-05 | 株式会社日立製作所 | 範囲指定可能なキャッシュ一致保証機能を有するマルチプロセッサシステム |
| JP2784440B2 (ja) * | 1993-04-14 | 1998-08-06 | インターナショナル・ビジネス・マシーンズ・コーポレイション | データ・ページの転送制御方法 |
| US5479599A (en) * | 1993-04-26 | 1995-12-26 | International Business Machines Corporation | Computer console with group ICON control |
| US5381541A (en) * | 1993-05-26 | 1995-01-10 | International Business Machines Corp. | Computer system having planar board with single interrupt controller and processor card with plural processors and interrupt director |
| JP3004861U (ja) * | 1993-06-04 | 1994-11-29 | ディジタル イクイプメント コーポレイション | 密接に結合された二重のコントローラモジュールを用いた欠陥許容式の記憶装置用制御システム |
| US5435001A (en) * | 1993-07-06 | 1995-07-18 | Tandem Computers Incorporated | Method of state determination in lock-stepped processors |
| US5909541A (en) * | 1993-07-14 | 1999-06-01 | Honeywell Inc. | Error detection and correction for data stored across multiple byte-wide memory devices |
| JPH0793274A (ja) * | 1993-07-27 | 1995-04-07 | Fujitsu Ltd | データ転送方式及びデータ転送装置 |
| US5572620A (en) * | 1993-07-29 | 1996-11-05 | Honeywell Inc. | Fault-tolerant voter system for output data from a plurality of non-synchronized redundant processors |
| US5530907A (en) * | 1993-08-23 | 1996-06-25 | Tcsi Corporation | Modular networked image processing system and method therefor |
| US5548711A (en) * | 1993-08-26 | 1996-08-20 | Emc Corporation | Method and apparatus for fault tolerant fast writes through buffer dumping |
| JPH07129456A (ja) * | 1993-10-28 | 1995-05-19 | Toshiba Corp | コンピュータシステム |
| US5604863A (en) * | 1993-11-01 | 1997-02-18 | International Business Machines Corporation | Method for coordinating executing programs in a data processing system |
| US5504859A (en) * | 1993-11-09 | 1996-04-02 | International Business Machines Corporation | Data processor with enhanced error recovery |
| EP0986008B1 (en) * | 1993-12-01 | 2008-04-16 | Marathon Technologies Corporation | Computer system comprising controllers and computing elements |
| US6161162A (en) * | 1993-12-08 | 2000-12-12 | Nec Corporation | Multiprocessor system for enabling shared access to a memory |
| US5537538A (en) * | 1993-12-15 | 1996-07-16 | Silicon Graphics, Inc. | Debug mode for a superscalar RISC processor |
| JPH07175698A (ja) * | 1993-12-17 | 1995-07-14 | Fujitsu Ltd | ファイルシステム |
| US5535405A (en) * | 1993-12-23 | 1996-07-09 | Unisys Corporation | Microsequencer bus controller system |
| US5606685A (en) * | 1993-12-29 | 1997-02-25 | Unisys Corporation | Computer workstation having demand-paged virtual memory and enhanced prefaulting |
| JPH07219913A (ja) * | 1994-01-28 | 1995-08-18 | Fujitsu Ltd | マルチプロセッサシステムの制御方法及び装置 |
| TW357295B (en) * | 1994-02-08 | 1999-05-01 | United Microelectronics Corp | Microprocessor's data writing, reading operations |
| US5452441A (en) * | 1994-03-30 | 1995-09-19 | At&T Corp. | System and method for on-line state restoration of one or more processors in an N module redundant voting processor system |
| JP2679674B2 (ja) * | 1994-05-02 | 1997-11-19 | 日本電気株式会社 | 半導体製造ライン制御装置 |
| JPH07334416A (ja) * | 1994-06-06 | 1995-12-22 | Internatl Business Mach Corp <Ibm> | コンピュータ・システムにおけるページ・モード・メモリの初期設定の方法および手段 |
| US5566297A (en) * | 1994-06-16 | 1996-10-15 | International Business Machines Corporation | Non-disruptive recovery from file server failure in a highly available file system for clustered computing environments |
| US5636359A (en) * | 1994-06-20 | 1997-06-03 | International Business Machines Corporation | Performance enhancement system and method for a hierarchical data cache using a RAID parity scheme |
| EP0702306A1 (en) * | 1994-09-19 | 1996-03-20 | International Business Machines Corporation | System and method for interfacing risc busses to peripheral circuits using another template of busses in a data communication adapter |
| US5530946A (en) * | 1994-10-28 | 1996-06-25 | Dell Usa, L.P. | Processor failure detection and recovery circuit in a dual processor computer system and method of operation thereof |
| US5557783A (en) * | 1994-11-04 | 1996-09-17 | Canon Information Systems, Inc. | Arbitration device for arbitrating access requests from first and second processors having different first and second clocks |
| US5630045A (en) * | 1994-12-06 | 1997-05-13 | International Business Machines Corporation | Device and method for fault tolerant dual fetch and store |
| US5778443A (en) * | 1994-12-14 | 1998-07-07 | International Business Machines Corp. | Method and apparatus for conserving power and system resources in a computer system employing a virtual memory |
| US5586253A (en) * | 1994-12-15 | 1996-12-17 | Stratus Computer | Method and apparatus for validating I/O addresses in a fault-tolerant computer system |
| WO1996019772A1 (en) * | 1994-12-19 | 1996-06-27 | Philips Electronics N.V. | Variable data processor allocation and memory sharing |
| US5555372A (en) * | 1994-12-21 | 1996-09-10 | Stratus Computer, Inc. | Fault-tolerant computer system employing an improved error-broadcast mechanism |
| FR2730074B1 (fr) * | 1995-01-27 | 1997-04-04 | Sextant Avionique | Architecture de calculateur tolerante aux fautes |
| US5692153A (en) * | 1995-03-16 | 1997-11-25 | International Business Machines Corporation | Method and system for verifying execution order within a multiprocessor data processing system |
| US5864654A (en) * | 1995-03-31 | 1999-01-26 | Nec Electronics, Inc. | Systems and methods for fault tolerant information processing |
| US5727167A (en) * | 1995-04-14 | 1998-03-10 | International Business Machines Corporation | Thresholding support in performance monitoring |
| JP3329986B2 (ja) * | 1995-04-28 | 2002-09-30 | 富士通株式会社 | マルチプロセッサシステム |
| JP3132744B2 (ja) * | 1995-05-24 | 2001-02-05 | 株式会社日立製作所 | 二重化cpu保守交換時の動作一致検証方式 |
| US5632013A (en) * | 1995-06-07 | 1997-05-20 | International Business Machines Corporation | Memory and system for recovery/restoration of data using a memory controller |
| JP3502216B2 (ja) * | 1995-07-13 | 2004-03-02 | 富士通株式会社 | 情報処理装置 |
| JP3595033B2 (ja) * | 1995-07-18 | 2004-12-02 | 株式会社日立製作所 | 高信頼化コンピュータシステム |
| DE19529434B4 (de) * | 1995-08-10 | 2009-09-17 | Continental Teves Ag & Co. Ohg | Microprozessorsystem für sicherheitskritische Regelungen |
| JP3526492B2 (ja) * | 1995-09-19 | 2004-05-17 | 富士通株式会社 | 並列処理システム |
| US5666483A (en) * | 1995-09-22 | 1997-09-09 | Honeywell Inc. | Redundant processing system architecture |
| US5673384A (en) * | 1995-10-06 | 1997-09-30 | Hewlett-Packard Company | Dual disk lock arbitration between equal sized partition of a cluster |
| US5790775A (en) * | 1995-10-23 | 1998-08-04 | Digital Equipment Corporation | Host transparent storage controller failover/failback of SCSI targets and associated units |
| US5708771A (en) * | 1995-11-21 | 1998-01-13 | Emc Corporation | Fault tolerant controller system and method |
| US5732209A (en) * | 1995-11-29 | 1998-03-24 | Exponential Technology, Inc. | Self-testing multi-processor die with internal compare points |
| US5802265A (en) * | 1995-12-01 | 1998-09-01 | Stratus Computer, Inc. | Transparent fault tolerant computer system |
| US5805789A (en) * | 1995-12-14 | 1998-09-08 | International Business Machines Corporation | Programmable computer system element with built-in self test method and apparatus for repair during power-on |
| US5812822A (en) * | 1995-12-19 | 1998-09-22 | Selway; David W. | Apparatus for coordinating clock oscillators in a fully redundant computer system |
| US5941994A (en) * | 1995-12-22 | 1999-08-24 | Lsi Logic Corporation | Technique for sharing hot spare drives among multiple subsystems |
| US5742823A (en) * | 1996-01-17 | 1998-04-21 | Nathen P. Edwards | Total object processing system and method with assembly line features and certification of results |
| US5761518A (en) * | 1996-02-29 | 1998-06-02 | The Foxboro Company | System for replacing control processor by operating processor in partially disabled mode for tracking control outputs and in write enabled mode for transferring control loops |
| US5784625A (en) * | 1996-03-19 | 1998-07-21 | Vlsi Technology, Inc. | Method and apparatus for effecting a soft reset in a processor device without requiring a dedicated external pin |
| US5724501A (en) * | 1996-03-29 | 1998-03-03 | Emc Corporation | Quick recovery of write cache in a fault tolerant I/O system |
| WO1997040401A1 (en) * | 1996-04-23 | 1997-10-30 | Alliedsignal Inc. | Integrated hazard avoidance system |
| TW320701B (ja) * | 1996-05-16 | 1997-11-21 | Resilience Corp | |
| US6141769A (en) * | 1996-05-16 | 2000-10-31 | Resilience Corporation | Triple modular redundant computer system and associated method |
| US5900019A (en) * | 1996-05-23 | 1999-05-04 | International Business Machines Corporation | Apparatus for protecting memory storage blocks from I/O accesses |
| US5787309A (en) * | 1996-05-23 | 1998-07-28 | International Business Machines Corporation | Apparatus for protecting storage blocks from being accessed by unwanted I/O programs using I/O program keys and I/O storage keys having M number of bits |
| US5802397A (en) * | 1996-05-23 | 1998-09-01 | International Business Machines Corporation | System for storage protection from unintended I/O access using I/O protection key by providing no control by I/O key entries over access by CP entity |
| US5809546A (en) * | 1996-05-23 | 1998-09-15 | International Business Machines Corporation | Method for managing I/O buffers in shared storage by structuring buffer table having entries including storage keys for controlling accesses to the buffers |
| US5724551A (en) * | 1996-05-23 | 1998-03-03 | International Business Machines Corporation | Method for managing I/O buffers in shared storage by structuring buffer table having entries include storage keys for controlling accesses to the buffers |
| KR100195065B1 (ko) * | 1996-06-20 | 1999-06-15 | 유기범 | 데이타 통신망 정합장치 |
| US5953742A (en) * | 1996-07-01 | 1999-09-14 | Sun Microsystems, Inc. | Memory management in fault tolerant computer systems utilizing a first and second recording mechanism and a reintegration mechanism |
| US5784386A (en) * | 1996-07-03 | 1998-07-21 | General Signal Corporation | Fault tolerant synchronous clock distribution |
| EP0825506B1 (en) | 1996-08-20 | 2013-03-06 | Invensys Systems, Inc. | Methods and apparatus for remote process control |
| US5790397A (en) | 1996-09-17 | 1998-08-04 | Marathon Technologies Corporation | Fault resilient/fault tolerant computing |
| DE69737573T2 (de) * | 1996-10-29 | 2008-03-06 | Hitachi, Ltd. | Redundantes Datenverarbeitungssystem |
| US6000040A (en) * | 1996-10-29 | 1999-12-07 | Compaq Computer Corporation | Method and apparatus for diagnosing fault states in a computer system |
| US5784394A (en) * | 1996-11-15 | 1998-07-21 | International Business Machines Corporation | Method and system for implementing parity error recovery schemes in a data processing system |
| US6167486A (en) | 1996-11-18 | 2000-12-26 | Nec Electronics, Inc. | Parallel access virtual channel memory system with cacheable channels |
| US5887160A (en) * | 1996-12-10 | 1999-03-23 | Fujitsu Limited | Method and apparatus for communicating integer and floating point data over a shared data path in a single instruction pipeline processor |
| US6161202A (en) * | 1997-02-18 | 2000-12-12 | Ee-Signals Gmbh & Co. Kg | Method for the monitoring of integrated circuits |
| US5805606A (en) * | 1997-03-13 | 1998-09-08 | International Business Machines Corporation | Cache module fault isolation techniques |
| US6151684A (en) * | 1997-03-28 | 2000-11-21 | Tandem Computers Incorporated | High availability access to input/output devices in a distributed system |
| US6119246A (en) * | 1997-03-31 | 2000-09-12 | International Business Machines Corporation | Error collection coordination for software-readable and non-software readable fault isolation registers in a computer system |
| US6502208B1 (en) | 1997-03-31 | 2002-12-31 | International Business Machines Corporation | Method and system for check stop error handling |
| US5951686A (en) * | 1997-03-31 | 1999-09-14 | International Business Machines Corporation | Method and system for reboot recovery |
| US6557121B1 (en) | 1997-03-31 | 2003-04-29 | International Business Machines Corporation | Method and system for fault isolation for PCI bus errors |
| US6065139A (en) * | 1997-03-31 | 2000-05-16 | International Business Machines Corporation | Method and system for surveillance of computer system operations |
| US6393520B2 (en) * | 1997-04-17 | 2002-05-21 | Matsushita Electric Industrial Co., Ltd. | Data processor and data processing system with internal memories |
| US5933857A (en) * | 1997-04-25 | 1999-08-03 | Hewlett-Packard Co. | Accessing multiple independent microkernels existing in a globally shared memory system |
| US5923830A (en) * | 1997-05-07 | 1999-07-13 | General Dynamics Information Systems, Inc. | Non-interrupting power control for fault tolerant computer systems |
| US5896523A (en) * | 1997-06-04 | 1999-04-20 | Marathon Technologies Corporation | Loosely-coupled, synchronized execution |
| US5991893A (en) * | 1997-08-29 | 1999-11-23 | Hewlett-Packard Company | Virtually reliable shared memory |
| US6148387A (en) * | 1997-10-09 | 2000-11-14 | Phoenix Technologies, Ltd. | System and method for securely utilizing basic input and output system (BIOS) services |
| US6260068B1 (en) | 1998-06-10 | 2001-07-10 | Compaq Computer Corporation | Method and apparatus for migrating resources in a multi-processor computer system |
| US6381682B2 (en) | 1998-06-10 | 2002-04-30 | Compaq Information Technologies Group, L.P. | Method and apparatus for dynamically sharing memory in a multiprocessor system |
| US6633916B2 (en) | 1998-06-10 | 2003-10-14 | Hewlett-Packard Development Company, L.P. | Method and apparatus for virtual resource handling in a multi-processor computer system |
| US6199179B1 (en) * | 1998-06-10 | 2001-03-06 | Compaq Computer Corporation | Method and apparatus for failure recovery in a multi-processor computer system |
| US6332180B1 (en) | 1998-06-10 | 2001-12-18 | Compaq Information Technologies Group, L.P. | Method and apparatus for communication in a multi-processor computer system |
| US6647508B2 (en) | 1997-11-04 | 2003-11-11 | Hewlett-Packard Development Company, L.P. | Multiprocessor computer architecture with multiple operating system instances and software controlled resource allocation |
| US6542926B2 (en) | 1998-06-10 | 2003-04-01 | Compaq Information Technologies Group, L.P. | Software partitioned multi-processor system with flexible resource sharing levels |
| US6965974B1 (en) * | 1997-11-14 | 2005-11-15 | Agere Systems Inc. | Dynamic partitioning of memory banks among multiple agents |
| CA2309926A1 (en) | 1997-11-14 | 1999-05-27 | Erik Muench | Method for maintaining the synchronized execution in fault resilient/fault tolerant computer systems |
| US6252583B1 (en) * | 1997-11-14 | 2001-06-26 | Immersion Corporation | Memory and force output management for a force feedback system |
| US6332178B1 (en) | 1997-11-26 | 2001-12-18 | Compaq Computer Corporation | Method for estimating statistics of properties of memory system transactions |
| US6442585B1 (en) | 1997-11-26 | 2002-08-27 | Compaq Computer Corporation | Method for scheduling contexts based on statistics of memory system interactions in a computer system |
| US6163840A (en) * | 1997-11-26 | 2000-12-19 | Compaq Computer Corporation | Method and apparatus for sampling multiple potentially concurrent instructions in a processor pipeline |
| US6374367B1 (en) | 1997-11-26 | 2002-04-16 | Compaq Computer Corporation | Apparatus and method for monitoring a computer system to guide optimization |
| US6237073B1 (en) | 1997-11-26 | 2001-05-22 | Compaq Computer Corporation | Method for providing virtual memory to physical memory page mapping in a computer operating system that randomly samples state information |
| US6175814B1 (en) | 1997-11-26 | 2001-01-16 | Compaq Computer Corporation | Apparatus for determining the instantaneous average number of instructions processed |
| US6195748B1 (en) | 1997-11-26 | 2001-02-27 | Compaq Computer Corporation | Apparatus for sampling instruction execution information in a processor pipeline |
| US6237059B1 (en) | 1997-11-26 | 2001-05-22 | Compaq Computer Corporation | Method for estimating statistics of properties of memory system interactions among contexts in a computer system |
| US6549930B1 (en) | 1997-11-26 | 2003-04-15 | Compaq Computer Corporation | Method for scheduling threads in a multithreaded processor |
| FR2771526B1 (fr) * | 1997-11-27 | 2004-07-23 | Bull Sa | Architecture pour la gestion de donnees vitales dans une machine multi-modulaire et procede pour la mise en oeuvre d'une telle architecture |
| US6185646B1 (en) * | 1997-12-03 | 2001-02-06 | International Business Machines Corporation | Method and apparatus for transferring data on a synchronous multi-drop |
| US6098158A (en) * | 1997-12-18 | 2000-08-01 | International Business Machines Corporation | Software-enabled fast boot |
| US6397281B1 (en) * | 1997-12-23 | 2002-05-28 | Emc Corporation | Bus arbitration system |
| US6502149B2 (en) * | 1997-12-23 | 2002-12-31 | Emc Corporation | Plural bus data storage system |
| EP0926600B1 (en) * | 1997-12-24 | 2003-06-11 | Texas Instruments Inc. | Computer system with processor and memory hierarchy and its operating method |
| JPH11203157A (ja) * | 1998-01-13 | 1999-07-30 | Fujitsu Ltd | 冗長装置 |
| US6249878B1 (en) * | 1998-03-31 | 2001-06-19 | Emc Corporation | Data storage system |
| DE19815263C2 (de) * | 1998-04-04 | 2002-03-28 | Astrium Gmbh | Vorrichtung zur fehlertoleranten Ausführung von Programmen |
| US6058490A (en) * | 1998-04-21 | 2000-05-02 | Lucent Technologies, Inc. | Method and apparatus for providing scaleable levels of application availability |
| US6216051B1 (en) | 1998-05-04 | 2001-04-10 | Nec Electronics, Inc. | Manufacturing backup system |
| US6691183B1 (en) | 1998-05-20 | 2004-02-10 | Invensys Systems, Inc. | Second transfer logic causing a first transfer logic to check a data ready bit prior to each of multibit transfer of a continous transfer operation |
| US6148348A (en) * | 1998-06-15 | 2000-11-14 | Sun Microsystems, Inc. | Bridge interfacing two processing sets operating in a lockstep mode and having a posted write buffer storing write operations upon detection of a lockstep error |
| US6173351B1 (en) * | 1998-06-15 | 2001-01-09 | Sun Microsystems, Inc. | Multi-processor system bridge |
| US6473840B2 (en) * | 1998-06-19 | 2002-10-29 | International Business Machines Corporation | Data processing system having a network and method for managing memory by storing discardable pages in a local paging device |
| US6195739B1 (en) | 1998-06-29 | 2001-02-27 | Cisco Technology, Inc. | Method and apparatus for passing data among processor complex stages of a pipelined processing engine |
| US6836838B1 (en) | 1998-06-29 | 2004-12-28 | Cisco Technology, Inc. | Architecture for a processor complex of an arrayed pipelined processing engine |
| US6101599A (en) * | 1998-06-29 | 2000-08-08 | Cisco Technology, Inc. | System for context switching between processing elements in a pipeline of processing elements |
| US6513108B1 (en) | 1998-06-29 | 2003-01-28 | Cisco Technology, Inc. | Programmable processing engine for efficiently processing transient data |
| US6119215A (en) | 1998-06-29 | 2000-09-12 | Cisco Technology, Inc. | Synchronization and control system for an arrayed processing engine |
| US6247143B1 (en) * | 1998-06-30 | 2001-06-12 | Sun Microsystems, Inc. | I/O handling for a multiprocessor computer system |
| JP2000067009A (ja) | 1998-08-20 | 2000-03-03 | Hitachi Ltd | 主記憶共有型マルチプロセッサ |
| JP2002523854A (ja) * | 1998-08-21 | 2002-07-30 | クリーダンス システムズ コーポレイション | 集積回路のビルトイン自己試験方法及びその装置 |
| US7013305B2 (en) | 2001-10-01 | 2006-03-14 | International Business Machines Corporation | Managing the state of coupling facility structures, detecting by one or more systems coupled to the coupling facility, the suspended state of the duplexed command, detecting being independent of message exchange |
| US6233690B1 (en) * | 1998-09-17 | 2001-05-15 | Intel Corporation | Mechanism for saving power on long latency stalls |
| SE515461C2 (sv) * | 1998-10-05 | 2001-08-06 | Ericsson Telefon Ab L M | Metod och arrangemang för minneshantering |
| US6412079B1 (en) * | 1998-10-09 | 2002-06-25 | Openwave Systems Inc. | Server pool for clustered system |
| US6397345B1 (en) * | 1998-10-09 | 2002-05-28 | Openwave Systems Inc. | Fault tolerant bus for clustered system |
| US6230190B1 (en) * | 1998-10-09 | 2001-05-08 | Openwave Systems Inc. | Shared-everything file storage for clustered system |
| US6728839B1 (en) | 1998-10-28 | 2004-04-27 | Cisco Technology, Inc. | Attribute based memory pre-fetching technique |
| US6763370B1 (en) | 1998-11-16 | 2004-07-13 | Softricity, Inc. | Method and apparatus for content protection in a secure content delivery system |
| US7017188B1 (en) | 1998-11-16 | 2006-03-21 | Softricity, Inc. | Method and apparatus for secure content delivery over broadband access networks |
| US6374402B1 (en) | 1998-11-16 | 2002-04-16 | Into Networks, Inc. | Method and apparatus for installation abstraction in a secure content delivery system |
| US6385747B1 (en) | 1998-12-14 | 2002-05-07 | Cisco Technology, Inc. | Testing of replicated components of electronic device |
| US6173386B1 (en) | 1998-12-14 | 2001-01-09 | Cisco Technology, Inc. | Parallel processor with debug capability |
| US6920562B1 (en) | 1998-12-18 | 2005-07-19 | Cisco Technology, Inc. | Tightly coupled software protocol decode with hardware data encryption |
| US7206877B1 (en) | 1998-12-22 | 2007-04-17 | Honeywell International Inc. | Fault tolerant data communication network |
| JP3809930B2 (ja) * | 1998-12-25 | 2006-08-16 | 株式会社日立製作所 | 情報処理装置 |
| US6564311B2 (en) * | 1999-01-19 | 2003-05-13 | Matsushita Electric Industrial Co., Ltd. | Apparatus for translation between virtual and physical addresses using a virtual page number, a physical page number, a process identifier and a global bit |
| US6526370B1 (en) * | 1999-02-04 | 2003-02-25 | Advanced Micro Devices, Inc. | Mechanism for accumulating data to determine average values of performance parameters |
| US7370071B2 (en) * | 2000-03-17 | 2008-05-06 | Microsoft Corporation | Method for serving third party software applications from servers to client computers |
| US7730169B1 (en) | 1999-04-12 | 2010-06-01 | Softricity, Inc. | Business method and system for serving third party software applications |
| US8099758B2 (en) | 1999-05-12 | 2012-01-17 | Microsoft Corporation | Policy based composite file system and method |
| WO2000070417A1 (en) * | 1999-05-17 | 2000-11-23 | The Foxboro Company | Process control configuration system with parameterized objects |
| US7272815B1 (en) | 1999-05-17 | 2007-09-18 | Invensys Systems, Inc. | Methods and apparatus for control configuration with versioning, security, composite blocks, edit selection, object swapping, formulaic values and other aspects |
| US7089530B1 (en) | 1999-05-17 | 2006-08-08 | Invensys Systems, Inc. | Process control configuration system with connection validation and configuration |
| US7096465B1 (en) | 1999-05-17 | 2006-08-22 | Invensys Systems, Inc. | Process control configuration system with parameterized objects |
| US6754885B1 (en) | 1999-05-17 | 2004-06-22 | Invensys Systems, Inc. | Methods and apparatus for controlling object appearance in a process control configuration system |
| US7043728B1 (en) | 1999-06-08 | 2006-05-09 | Invensys Systems, Inc. | Methods and apparatus for fault-detecting and fault-tolerant process control |
| US6788980B1 (en) | 1999-06-11 | 2004-09-07 | Invensys Systems, Inc. | Methods and apparatus for control using control devices that provide a virtual machine environment and that communicate via an IP network |
| US6501995B1 (en) | 1999-06-30 | 2002-12-31 | The Foxboro Company | Process control system and method with improved distribution, installation and validation of components |
| US6510352B1 (en) | 1999-07-29 | 2003-01-21 | The Foxboro Company | Methods and apparatus for object-based process control |
| US7953931B2 (en) * | 1999-08-04 | 2011-05-31 | Super Talent Electronics, Inc. | High endurance non-volatile memory devices |
| US6499113B1 (en) * | 1999-08-31 | 2002-12-24 | Sun Microsystems, Inc. | Method and apparatus for extracting first failure and attendant operating information from computer system devices |
| WO2001016741A2 (en) * | 1999-08-31 | 2001-03-08 | Times N Systems, Inc. | Semaphore control of shared-memory |
| US6438710B1 (en) * | 1999-08-31 | 2002-08-20 | Rockwell Electronic Commerce Corp. | Circuit and method for improving memory integrity in a microprocessor based application |
| US6681341B1 (en) | 1999-11-03 | 2004-01-20 | Cisco Technology, Inc. | Processor isolation method for integrated multi-processor systems |
| US6529983B1 (en) | 1999-11-03 | 2003-03-04 | Cisco Technology, Inc. | Group and virtual locking mechanism for inter processor synchronization |
| US6708254B2 (en) | 1999-11-10 | 2004-03-16 | Nec Electronics America, Inc. | Parallel access virtual channel memory system |
| US6473660B1 (en) | 1999-12-03 | 2002-10-29 | The Foxboro Company | Process control system and method with automatic fault avoidance |
| US7555683B2 (en) * | 1999-12-23 | 2009-06-30 | Landesk Software, Inc. | Inventory determination for facilitating commercial transactions during diagnostic tests |
| US8019943B2 (en) * | 2000-01-06 | 2011-09-13 | Super Talent Electronics, Inc. | High endurance non-volatile memory devices |
| US6574753B1 (en) * | 2000-01-10 | 2003-06-03 | Emc Corporation | Peer link fault isolation |
| US6779128B1 (en) | 2000-02-18 | 2004-08-17 | Invensys Systems, Inc. | Fault-tolerant data transfer |
| US6892237B1 (en) | 2000-03-28 | 2005-05-10 | Cisco Technology, Inc. | Method and apparatus for high-speed parsing of network messages |
| US6820213B1 (en) | 2000-04-13 | 2004-11-16 | Stratus Technologies Bermuda, Ltd. | Fault-tolerant computer system with voter delay buffer |
| US6687851B1 (en) | 2000-04-13 | 2004-02-03 | Stratus Technologies Bermuda Ltd. | Method and system for upgrading fault-tolerant systems |
| US6901481B2 (en) | 2000-04-14 | 2005-05-31 | Stratus Technologies Bermuda Ltd. | Method and apparatus for storing transactional information in persistent memory |
| US6862689B2 (en) | 2001-04-12 | 2005-03-01 | Stratus Technologies Bermuda Ltd. | Method and apparatus for managing session information |
| US6802022B1 (en) | 2000-04-14 | 2004-10-05 | Stratus Technologies Bermuda Ltd. | Maintenance of consistent, redundant mass storage images |
| US6647516B1 (en) * | 2000-04-19 | 2003-11-11 | Hewlett-Packard Development Company, L.P. | Fault tolerant data storage systems and methods of operating a fault tolerant data storage system |
| US6708331B1 (en) * | 2000-05-03 | 2004-03-16 | Leon Schwartz | Method for automatic parallelization of software |
| US6675315B1 (en) * | 2000-05-05 | 2004-01-06 | Oracle International Corp. | Diagnosing crashes in distributed computing systems |
| US6505269B1 (en) | 2000-05-16 | 2003-01-07 | Cisco Technology, Inc. | Dynamic addressing mapping to eliminate memory resource contention in a symmetric multiprocessor system |
| AU2001290509A1 (en) * | 2000-06-07 | 2001-12-17 | Clifford A. Megerle | System and method to detect the presence of a target organism within an air sample using flow cytometry |
| US6609216B1 (en) | 2000-06-16 | 2003-08-19 | International Business Machines Corporation | Method for measuring performance of code sequences in a production system |
| US6804703B1 (en) * | 2000-06-22 | 2004-10-12 | International Business Machines Corporation | System and method for establishing persistent reserves to nonvolatile storage in a clustered computer environment |
| US6438647B1 (en) | 2000-06-23 | 2002-08-20 | International Business Machines Corporation | Method and apparatus for providing battery-backed immediate write back cache for an array of disk drives in a computer system |
| EP1215577B1 (en) * | 2000-08-21 | 2012-02-22 | Texas Instruments Incorporated | Fault management and recovery based on task-ID |
| EP1213650A3 (en) * | 2000-08-21 | 2006-08-30 | Texas Instruments France | Priority arbitration based on current task and MMU |
| EP1182569B8 (en) * | 2000-08-21 | 2011-07-06 | Texas Instruments Incorporated | TLB lock and unlock operation |
| US6647470B1 (en) * | 2000-08-21 | 2003-11-11 | Micron Technology, Inc. | Memory device having posted write per command |
| US6732289B1 (en) | 2000-08-31 | 2004-05-04 | Sun Microsystems, Inc. | Fault tolerant data storage system |
| GB2370380B (en) | 2000-12-19 | 2003-12-31 | Picochip Designs Ltd | Processor architecture |
| US6948010B2 (en) * | 2000-12-20 | 2005-09-20 | Stratus Technologies Bermuda Ltd. | Method and apparatus for efficiently moving portions of a memory block |
| US6990657B2 (en) * | 2001-01-24 | 2006-01-24 | Texas Instruments Incorporated | Shared software breakpoints in a shared memory system |
| US6886171B2 (en) * | 2001-02-20 | 2005-04-26 | Stratus Technologies Bermuda Ltd. | Caching for I/O virtual address translation and validation using device drivers |
| JP3628265B2 (ja) * | 2001-02-21 | 2005-03-09 | 株式会社半導体理工学研究センター | マルチプロセッサシステム装置 |
| US7017073B2 (en) * | 2001-02-28 | 2006-03-21 | International Business Machines Corporation | Method and apparatus for fault-tolerance via dual thread crosschecking |
| US6829693B2 (en) | 2001-02-28 | 2004-12-07 | International Business Machines Corporation | Auxiliary storage slot scavenger |
| US6766413B2 (en) | 2001-03-01 | 2004-07-20 | Stratus Technologies Bermuda Ltd. | Systems and methods for caching with file-level granularity |
| US6874102B2 (en) * | 2001-03-05 | 2005-03-29 | Stratus Technologies Bermuda Ltd. | Coordinated recalibration of high bandwidth memories in a multiprocessor computer |
| EP1239369A1 (de) * | 2001-03-07 | 2002-09-11 | Siemens Aktiengesellschaft | Fehlertolerante Rechneranordnung und Verfahren zum Betrieb einer derartigen Anordnung |
| US6754788B2 (en) * | 2001-03-15 | 2004-06-22 | International Business Machines Corporation | Apparatus, method and computer program product for privatizing operating system data |
| US6751718B1 (en) * | 2001-03-26 | 2004-06-15 | Networks Associates Technology, Inc. | Method, system and computer program product for using an instantaneous memory deficit metric to detect and reduce excess paging operations in a computer system |
| US7065672B2 (en) * | 2001-03-28 | 2006-06-20 | Stratus Technologies Bermuda Ltd. | Apparatus and methods for fault-tolerant computing using a switching fabric |
| US6928583B2 (en) * | 2001-04-11 | 2005-08-09 | Stratus Technologies Bermuda Ltd. | Apparatus and method for two computing elements in a fault-tolerant server to execute instructions in lockstep |
| US6971043B2 (en) * | 2001-04-11 | 2005-11-29 | Stratus Technologies Bermuda Ltd | Apparatus and method for accessing a mass storage device in a fault-tolerant server |
| US6862693B2 (en) * | 2001-04-13 | 2005-03-01 | Sun Microsystems, Inc. | Providing fault-tolerance by comparing addresses and data from redundant processors running in lock-step |
| US6996750B2 (en) | 2001-05-31 | 2006-02-07 | Stratus Technologies Bermuda Ltd. | Methods and apparatus for computer bus error termination |
| US6799186B2 (en) * | 2001-10-11 | 2004-09-28 | International Business Machines Corporation | SLA monitor calendar buffering |
| US7120901B2 (en) * | 2001-10-26 | 2006-10-10 | International Business Machines Corporation | Method and system for tracing and displaying execution of nested functions |
| US7039774B1 (en) * | 2002-02-05 | 2006-05-02 | Juniper Networks, Inc. | Memory allocation using a memory address pool |
| US6832270B2 (en) * | 2002-03-08 | 2004-12-14 | Hewlett-Packard Development Company, L.P. | Virtualization of computer system interconnects |
| US7242991B2 (en) | 2002-04-15 | 2007-07-10 | Invensys Systems, Inc. | Workflow control configurator for use with process, factory-floor, environmental, computer aided manufacturing-based or other control system |
| KR100450320B1 (ko) * | 2002-05-10 | 2004-10-01 | 한국전자통신연구원 | 디지털 티브이용 영상변환과 오류자동보정 장치 및 방법 |
| JP3606281B2 (ja) * | 2002-06-07 | 2005-01-05 | オムロン株式会社 | プログラマブルコントローラ及びcpuユニット並びに特殊機能モジュール及び二重化処理方法 |
| US7155721B2 (en) | 2002-06-28 | 2006-12-26 | Hewlett-Packard Development Company, L.P. | Method and apparatus for communicating information between lock stepped processors |
| US7136798B2 (en) * | 2002-07-19 | 2006-11-14 | International Business Machines Corporation | Method and apparatus to manage multi-computer demand |
| US20040044508A1 (en) * | 2002-08-29 | 2004-03-04 | Hoffman Robert R. | Method for generating commands for testing hardware device models |
| DE10251912A1 (de) * | 2002-11-07 | 2004-05-19 | Siemens Ag | Synchronisation der Datenverarbeitung in redundanten Datenverarbeitungseinheiten eines Datenverarbeitungssystems |
| GB2396446B (en) * | 2002-12-20 | 2005-11-16 | Picochip Designs Ltd | Array synchronization |
| US8281084B2 (en) * | 2003-01-13 | 2012-10-02 | Emlilex Design & Manufacturing Corp. | Method and interface for access to memory within a first electronic device by a second electronic device |
| US7149923B1 (en) * | 2003-01-17 | 2006-12-12 | Unisys Corporation | Software control using the controller as a component to achieve resiliency in a computer system utilizing separate servers for redundancy |
| DE60327687D1 (de) * | 2003-01-23 | 2009-07-02 | Supercomputing Systems Ag | Fehlertolerantes computergesteuertes System |
| US7779285B2 (en) * | 2003-02-18 | 2010-08-17 | Oracle America, Inc. | Memory system including independent isolated power for each memory module |
| US7467326B2 (en) | 2003-02-28 | 2008-12-16 | Maxwell Technologies, Inc. | Self-correcting computer |
| JP2004302713A (ja) * | 2003-03-31 | 2004-10-28 | Hitachi Ltd | 記憶システム及びその制御方法 |
| DE10328059A1 (de) * | 2003-06-23 | 2005-01-13 | Robert Bosch Gmbh | Verfahren und Vorrichtung zur Überwachung eines verteilten Systems |
| US20050039074A1 (en) * | 2003-07-09 | 2005-02-17 | Tremblay Glenn A. | Fault resilient/fault tolerant computing |
| US7779212B2 (en) * | 2003-10-17 | 2010-08-17 | Micron Technology, Inc. | Method and apparatus for sending data from multiple sources over a communications bus |
| US7107411B2 (en) | 2003-12-16 | 2006-09-12 | International Business Machines Corporation | Apparatus method and system for fault tolerant virtual memory management |
| US7472320B2 (en) | 2004-02-24 | 2008-12-30 | International Business Machines Corporation | Autonomous self-monitoring and corrective operation of an integrated circuit |
| US7321985B2 (en) * | 2004-02-26 | 2008-01-22 | International Business Machines Corporation | Method for achieving higher availability of computer PCI adapters |
| US7761923B2 (en) | 2004-03-01 | 2010-07-20 | Invensys Systems, Inc. | Process control methods and apparatus for intrusion detection, protection and network hardening |
| US20050193378A1 (en) * | 2004-03-01 | 2005-09-01 | Breault Richard E. | System and method for building an executable program with a low probability of failure on demand |
| JP2005267111A (ja) * | 2004-03-17 | 2005-09-29 | Hitachi Ltd | 記憶制御システム及び記憶制御システムの制御方法 |
| US7426656B2 (en) * | 2004-03-30 | 2008-09-16 | Hewlett-Packard Development Company, L.P. | Method and system executing user programs on non-deterministic processors |
| US20050240806A1 (en) * | 2004-03-30 | 2005-10-27 | Hewlett-Packard Development Company, L.P. | Diagnostic memory dump method in a redundant processor |
| US8799706B2 (en) * | 2004-03-30 | 2014-08-05 | Hewlett-Packard Development Company, L.P. | Method and system of exchanging information between processors |
| JP4056488B2 (ja) * | 2004-03-30 | 2008-03-05 | エルピーダメモリ株式会社 | 半導体装置の試験方法及び製造方法 |
| US20060020852A1 (en) * | 2004-03-30 | 2006-01-26 | Bernick David L | Method and system of servicing asynchronous interrupts in multiple processors executing a user program |
| JP2005293427A (ja) * | 2004-04-02 | 2005-10-20 | Matsushita Electric Ind Co Ltd | データ転送処理装置及びデータ転送処理方法 |
| US7237144B2 (en) * | 2004-04-06 | 2007-06-26 | Hewlett-Packard Development Company, L.P. | Off-chip lockstep checking |
| US7296181B2 (en) * | 2004-04-06 | 2007-11-13 | Hewlett-Packard Development Company, L.P. | Lockstep error signaling |
| US7290169B2 (en) * | 2004-04-06 | 2007-10-30 | Hewlett-Packard Development Company, L.P. | Core-level processor lockstepping |
| GB0411054D0 (en) * | 2004-05-18 | 2004-06-23 | Ricardo Uk Ltd | Fault tolerant data processing |
| US7392426B2 (en) * | 2004-06-15 | 2008-06-24 | Honeywell International Inc. | Redundant processing architecture for single fault tolerance |
| US7590823B1 (en) | 2004-08-06 | 2009-09-15 | Xilinx, Inc. | Method and system for handling an instruction not supported in a coprocessor formed using configurable logic |
| US7546441B1 (en) | 2004-08-06 | 2009-06-09 | Xilinx, Inc. | Coprocessor interface controller |
| US7243212B1 (en) * | 2004-08-06 | 2007-07-10 | Xilinx, Inc. | Processor-controller interface for non-lock step operation |
| US7590822B1 (en) | 2004-08-06 | 2009-09-15 | Xilinx, Inc. | Tracking an instruction through a processor pipeline |
| US7346759B1 (en) | 2004-08-06 | 2008-03-18 | Xilinx, Inc. | Decoder interface |
| US7404105B2 (en) | 2004-08-16 | 2008-07-22 | International Business Machines Corporation | High availability multi-processor system |
| TW200609721A (en) * | 2004-09-03 | 2006-03-16 | Inventec Corp | Redundancy control system and method thereof |
| US20060080514A1 (en) * | 2004-10-08 | 2006-04-13 | International Business Machines Corporation | Managing shared memory |
| JP4182948B2 (ja) * | 2004-12-21 | 2008-11-19 | 日本電気株式会社 | フォールト・トレラント・コンピュータシステムと、そのための割り込み制御方法 |
| US7778812B2 (en) * | 2005-01-07 | 2010-08-17 | Micron Technology, Inc. | Selecting data to verify in hardware device model simulation test generation |
| US7418541B2 (en) * | 2005-02-10 | 2008-08-26 | International Business Machines Corporation | Method for indirect access to a support interface for memory-mapped resources to reduce system connectivity from out-of-band support processor |
| US7467204B2 (en) * | 2005-02-10 | 2008-12-16 | International Business Machines Corporation | Method for providing low-level hardware access to in-band and out-of-band firmware |
| EP1715589A1 (en) * | 2005-03-02 | 2006-10-25 | STMicroelectronics N.V. | LDPC decoder in particular for DVB-S2 LDCP code decoding |
| US20060222125A1 (en) * | 2005-03-31 | 2006-10-05 | Edwards John W Jr | Systems and methods for maintaining synchronicity during signal transmission |
| US20060222126A1 (en) * | 2005-03-31 | 2006-10-05 | Stratus Technologies Bermuda Ltd. | Systems and methods for maintaining synchronicity during signal transmission |
| US20060236168A1 (en) * | 2005-04-01 | 2006-10-19 | Honeywell International Inc. | System and method for dynamically optimizing performance and reliability of redundant processing systems |
| US7549082B2 (en) * | 2005-04-28 | 2009-06-16 | Hewlett-Packard Development Company, L.P. | Method and system of bringing processors to the same computational point |
| US7730350B2 (en) * | 2005-04-28 | 2010-06-01 | Hewlett-Packard Development Company, L.P. | Method and system of determining the execution point of programs executed in lock step |
| US8103861B2 (en) * | 2005-04-28 | 2012-01-24 | Hewlett-Packard Development Company, L.P. | Method and system for presenting an interrupt request to processors executing in lock step |
| US7549029B2 (en) * | 2005-05-06 | 2009-06-16 | International Business Machines Corporation | Methods for creating hierarchical copies |
| DE102005038567A1 (de) | 2005-08-12 | 2007-02-15 | Micronas Gmbh | Multi-Prozessor-Architektur und Verfahren zum Steuern von Speicherzugriff bei einer Multi-Prozess-Architektur |
| US8074059B2 (en) * | 2005-09-02 | 2011-12-06 | Binl ATE, LLC | System and method for performing deterministic processing |
| US7519754B2 (en) * | 2005-12-28 | 2009-04-14 | Silicon Storage Technology, Inc. | Hard disk drive cache memory and playback device |
| US20070147115A1 (en) * | 2005-12-28 | 2007-06-28 | Fong-Long Lin | Unified memory and controller |
| JP4816911B2 (ja) * | 2006-02-07 | 2011-11-16 | 日本電気株式会社 | メモリの同期化方法及びリフレッシュ制御回路 |
| WO2007123753A2 (en) | 2006-03-30 | 2007-11-01 | Invensys Systems, Inc. | Digital data processing apparatus and methods for improving plant performance |
| FR2901379B1 (fr) * | 2006-05-19 | 2008-06-27 | Airbus France Sas | Procede et dispositif de consolidation par synchronisation logicielle dans les calculateurs des commandes de vol |
| US8074109B1 (en) * | 2006-11-14 | 2011-12-06 | Unisys Corporation | Third-party voting to select a master processor within a multi-processor computer |
| US8006029B2 (en) * | 2006-11-30 | 2011-08-23 | Intel Corporation | DDR flash implementation with direct register access to legacy flash functions |
| US20080189495A1 (en) * | 2007-02-02 | 2008-08-07 | Mcbrearty Gerald Francis | Method for reestablishing hotness of pages |
| EP2372554B1 (en) * | 2007-03-29 | 2013-03-20 | Fujitsu Limited | Information processing device and error processing method |
| US7472038B2 (en) * | 2007-04-16 | 2008-12-30 | International Business Machines Corporation | Method of predicting microprocessor lifetime reliability using architecture-level structure-aware techniques |
| US7743285B1 (en) * | 2007-04-17 | 2010-06-22 | Hewlett-Packard Development Company, L.P. | Chip multiprocessor with configurable fault isolation |
| US8375188B1 (en) * | 2007-08-08 | 2013-02-12 | Symantec Corporation | Techniques for epoch pipelining |
| US20090049323A1 (en) * | 2007-08-14 | 2009-02-19 | Imark Robert R | Synchronization of processors in a multiprocessor system |
| JP2009087028A (ja) * | 2007-09-28 | 2009-04-23 | Toshiba Corp | メモリシステム及びメモリの読出し方法並びにプログラム |
| JP5148236B2 (ja) | 2007-10-01 | 2013-02-20 | ルネサスエレクトロニクス株式会社 | 半導体集積回路及び半導体集積回路の制御方法 |
| GB2454865B (en) * | 2007-11-05 | 2012-06-13 | Picochip Designs Ltd | Power control |
| US20090133022A1 (en) * | 2007-11-15 | 2009-05-21 | Karim Faraydon O | Multiprocessing apparatus, system and method |
| US7809980B2 (en) * | 2007-12-06 | 2010-10-05 | Jehoda Refaeli | Error detector in a cache memory using configurable way redundancy |
| FR2925191B1 (fr) * | 2007-12-14 | 2010-03-05 | Thales Sa | Architecture de traitement numerique a haute integrite a multiples ressources supervisees |
| US8243614B2 (en) * | 2008-03-07 | 2012-08-14 | Honeywell International Inc. | Hardware efficient monitoring of input/output signals |
| US7996714B2 (en) * | 2008-04-14 | 2011-08-09 | Charles Stark Draper Laboratory, Inc. | Systems and methods for redundancy management in fault tolerant computing |
| US8621154B1 (en) | 2008-04-18 | 2013-12-31 | Netapp, Inc. | Flow based reply cache |
| US8161236B1 (en) | 2008-04-23 | 2012-04-17 | Netapp, Inc. | Persistent reply cache integrated with file system |
| US8386664B2 (en) * | 2008-05-22 | 2013-02-26 | International Business Machines Corporation | Reducing runtime coherency checking with global data flow analysis |
| US8281295B2 (en) * | 2008-05-23 | 2012-10-02 | International Business Machines Corporation | Computer analysis and runtime coherency checking |
| CN104407518B (zh) | 2008-06-20 | 2017-05-31 | 因文西斯系统公司 | 对用于过程控制的实际和仿真设施进行交互的系统和方法 |
| US8285670B2 (en) | 2008-07-22 | 2012-10-09 | International Business Machines Corporation | Dynamically maintaining coherency within live ranges of direct buffers |
| US8583845B2 (en) | 2008-08-07 | 2013-11-12 | Nec Corporation | Multi-processor system and controlling method thereof |
| TW201015321A (en) * | 2008-09-25 | 2010-04-16 | Panasonic Corp | Buffer memory device, memory system and data trnsfer method |
| US8762621B2 (en) * | 2008-10-28 | 2014-06-24 | Micron Technology, Inc. | Logical unit operation |
| JP5439808B2 (ja) * | 2008-12-25 | 2014-03-12 | 富士通セミコンダクター株式会社 | 複数バスを有するシステムlsi |
| GB2466661B (en) * | 2009-01-05 | 2014-11-26 | Intel Corp | Rake receiver |
| DE102009007215A1 (de) * | 2009-02-03 | 2010-08-05 | Siemens Aktiengesellschaft | Automatisierungssystem mit einem programmierbaren Matrixmodul |
| JP2010198131A (ja) * | 2009-02-23 | 2010-09-09 | Renesas Electronics Corp | プロセッサシステム、及びプロセッサシステムの動作モード切り替え方法 |
| US8171227B1 (en) | 2009-03-11 | 2012-05-01 | Netapp, Inc. | System and method for managing a flow based reply cache |
| GB2470037B (en) | 2009-05-07 | 2013-07-10 | Picochip Designs Ltd | Methods and devices for reducing interference in an uplink |
| US8127060B2 (en) | 2009-05-29 | 2012-02-28 | Invensys Systems, Inc | Methods and apparatus for control configuration with control objects that are fieldbus protocol-aware |
| US8463964B2 (en) | 2009-05-29 | 2013-06-11 | Invensys Systems, Inc. | Methods and apparatus for control configuration with enhanced change-tracking |
| GB2470771B (en) | 2009-06-05 | 2012-07-18 | Picochip Designs Ltd | A method and device in a communication network |
| GB2470891B (en) | 2009-06-05 | 2013-11-27 | Picochip Designs Ltd | A method and device in a communication network |
| US8966195B2 (en) * | 2009-06-26 | 2015-02-24 | Hewlett-Packard Development Company, L.P. | Direct memory access and super page swapping optimizations for a memory blade |
| JP5676950B2 (ja) * | 2009-08-20 | 2015-02-25 | キヤノン株式会社 | 画像形成装置 |
| GB2474071B (en) | 2009-10-05 | 2013-08-07 | Picochip Designs Ltd | Femtocell base station |
| US8473818B2 (en) * | 2009-10-12 | 2013-06-25 | Empire Technology Development Llc | Reliable communications in on-chip networks |
| DE102009050161A1 (de) * | 2009-10-21 | 2011-04-28 | Siemens Aktiengesellschaft | Verfahren und Vorrichtung zum Testen eines Systems mit zumindest einer Mehrzahl von parallel ausführbaren Softwareeinheiten |
| US8516356B2 (en) | 2010-07-20 | 2013-08-20 | Infineon Technologies Ag | Real-time error detection by inverse processing |
| GB2482869B (en) | 2010-08-16 | 2013-11-06 | Picochip Designs Ltd | Femtocell access control |
| GB2484927A (en) * | 2010-10-26 | 2012-05-02 | Advanced Risc Mach Ltd | Provision of access control data within a data processing system |
| US8443230B1 (en) * | 2010-12-15 | 2013-05-14 | Xilinx, Inc. | Methods and systems with transaction-level lockstep |
| CN102621938A (zh) * | 2011-01-28 | 2012-08-01 | 上海新华控制技术(集团)有限公司 | 过程控制中的三重冗余控制系统及其方法 |
| US8972696B2 (en) | 2011-03-07 | 2015-03-03 | Microsoft Technology Licensing, Llc | Pagefile reservations |
| GB2489919B (en) | 2011-04-05 | 2018-02-14 | Intel Corp | Filter |
| GB2489716B (en) | 2011-04-05 | 2015-06-24 | Intel Corp | Multimode base system |
| GB2491098B (en) | 2011-05-16 | 2015-05-20 | Intel Corp | Accessing a base station |
| JP5699057B2 (ja) * | 2011-08-24 | 2015-04-08 | 株式会社日立製作所 | プログラマブルデバイス、プログラマブルデバイスのリコンフィグ方法および電子デバイス |
| US8924780B2 (en) * | 2011-11-10 | 2014-12-30 | Ge Aviation Systems Llc | Method of providing high integrity processing |
| US8832411B2 (en) | 2011-12-14 | 2014-09-09 | Microsoft Corporation | Working set swapping using a sequentially ordered swap file |
| KR101947726B1 (ko) * | 2012-03-08 | 2019-02-13 | 삼성전자주식회사 | 영상 처리 장치 및 이의 영상 처리 방법 |
| JP5850774B2 (ja) * | 2012-03-22 | 2016-02-03 | ルネサスエレクトロニクス株式会社 | 半導体集積回路装置及びそれを用いたシステム |
| US9378098B2 (en) | 2012-06-06 | 2016-06-28 | Qualcomm Incorporated | Methods and systems for redundant data storage in a register |
| US9569223B2 (en) * | 2013-02-13 | 2017-02-14 | Red Hat Israel, Ltd. | Mixed shared/non-shared memory transport for virtual machines |
| US10102148B2 (en) | 2013-06-13 | 2018-10-16 | Microsoft Technology Licensing, Llc | Page-based compressed storage management |
| CN107219999B (zh) * | 2013-08-31 | 2020-06-26 | 华为技术有限公司 | 一种服务器中内存模块的数据迁移方法及服务器 |
| KR102116984B1 (ko) * | 2014-03-11 | 2020-05-29 | 삼성전자 주식회사 | 메모리 스왑 오퍼레이션 제어 방법 및 이를 적용하는 데이터 처리 시스템 |
| US9684625B2 (en) | 2014-03-21 | 2017-06-20 | Microsoft Technology Licensing, Llc | Asynchronously prefetching sharable memory pages |
| JP6341795B2 (ja) * | 2014-08-05 | 2018-06-13 | ルネサスエレクトロニクス株式会社 | マイクロコンピュータ及びマイクロコンピュータシステム |
| US9632924B2 (en) | 2015-03-02 | 2017-04-25 | Microsoft Technology Licensing, Llc | Using memory compression to reduce memory commit charge |
| US10037270B2 (en) | 2015-04-14 | 2018-07-31 | Microsoft Technology Licensing, Llc | Reducing memory commit charge when compressing memory |
| US11449452B2 (en) | 2015-05-21 | 2022-09-20 | Goldman Sachs & Co. LLC | General-purpose parallel computing architecture |
| ES2929626T3 (es) | 2015-05-21 | 2022-11-30 | Goldman Sachs & Co Llc | Arquitectura de computación paralela de propósito general |
| JP2017146897A (ja) * | 2016-02-19 | 2017-08-24 | 株式会社デンソー | マイクロコントローラ及び電子制御装置 |
| US9595312B1 (en) | 2016-03-31 | 2017-03-14 | Altera Corporation | Adaptive refresh scheduling for memory |
| JP7173985B2 (ja) * | 2017-04-06 | 2022-11-17 | ゴールドマン サックス アンド カンパニー エルエルシー | 汎用並列コンピューティングアーキテクチャ |
| US10802932B2 (en) | 2017-12-04 | 2020-10-13 | Nxp Usa, Inc. | Data processing system having lockstep operation |
| CN108804109B (zh) * | 2018-06-07 | 2021-11-05 | 北京四方继保自动化股份有限公司 | 基于多路功能等价模块冗余仲裁的工业部署和控制方法 |
| US11099748B1 (en) * | 2018-08-08 | 2021-08-24 | United States Of America As Represented By The Administrator Of Nasa | Fault tolerant memory card |
| US10824573B1 (en) | 2019-04-19 | 2020-11-03 | Micron Technology, Inc. | Refresh and access modes for memory |
| US11609845B2 (en) * | 2019-05-28 | 2023-03-21 | Oracle International Corporation | Configurable memory device connected to a microprocessor |
| US11016692B2 (en) * | 2019-09-11 | 2021-05-25 | International Business Machines Corporation | Dynamically switching between memory copy and memory mapping to optimize I/O performance |
| US12105589B2 (en) * | 2022-02-23 | 2024-10-01 | Micron Technology, Inc. | Parity-based error management for a processing system |
| CN114610472B (zh) * | 2022-05-09 | 2022-12-02 | 上海登临科技有限公司 | 异构计算中多进程管理方法及计算设备 |
| CN115729751A (zh) * | 2022-12-01 | 2023-03-03 | 山东航天电子技术研究所 | 一种兼顾健康管理的轻占用无单点可靠性加固方法 |
Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5260540A (en) * | 1975-11-14 | 1977-05-19 | Hitachi Ltd | Synchronization control of double-type system |
| US4733353A (en) * | 1985-12-13 | 1988-03-22 | General Electric Company | Frame synchronization of multiply redundant computers |
Family Cites Families (130)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| FR1587572A (ja) * | 1968-10-25 | 1970-03-20 | ||
| GB1253309A (en) * | 1969-11-21 | 1971-11-10 | Marconi Co Ltd | Improvements in or relating to data processing arrangements |
| GB1308497A (en) * | 1970-09-25 | 1973-02-21 | Marconi Co Ltd | Data processing arrangements |
| US3864670A (en) * | 1970-09-30 | 1975-02-04 | Yokogawa Electric Works Ltd | Dual computer system with signal exchange system |
| SE347826B (ja) * | 1970-11-20 | 1972-08-14 | Ericsson Telefon Ab L M | |
| US3810119A (en) * | 1971-05-04 | 1974-05-07 | Us Navy | Processor synchronization scheme |
| BE790654A (fr) * | 1971-10-28 | 1973-04-27 | Siemens Ag | Systeme de traitement avec des unites de systeme |
| US3760365A (en) * | 1971-12-30 | 1973-09-18 | Ibm | Multiprocessing computing system with task assignment at the instruction level |
| DE2202231A1 (de) * | 1972-01-18 | 1973-07-26 | Siemens Ag | Verarbeitungssystem mit verdreifachten systemeinheiten |
| US3783250A (en) * | 1972-02-25 | 1974-01-01 | Nasa | Adaptive voting computer system |
| US3828321A (en) * | 1973-03-15 | 1974-08-06 | Gte Automatic Electric Lab Inc | System for reconfiguring central processor and instruction storage combinations |
| CH556576A (de) * | 1973-03-28 | 1974-11-29 | Hasler Ag | Einrichtung zur synchronisierung dreier rechner. |
| JPS5024046A (ja) * | 1973-07-04 | 1975-03-14 | ||
| US4099241A (en) * | 1973-10-30 | 1978-07-04 | Telefonaktiebolaget L M Ericsson | Apparatus for facilitating a cooperation between an executive computer and a reserve computer |
| FR2253432A5 (ja) * | 1973-11-30 | 1975-06-27 | Honeywell Bull Soc Ind | |
| FR2253423A5 (ja) * | 1973-11-30 | 1975-06-27 | Honeywell Bull Soc Ind | |
| IT1014277B (it) * | 1974-06-03 | 1977-04-20 | Cselt Centro Studi Lab Telecom | Sistema di controllo di elaboratori di processo operanti in parallelo |
| FR2285458A1 (fr) * | 1974-09-20 | 1976-04-16 | Creusot Loire | Dispositif de retention d'hydrocarbures dans un convertisseur |
| US4015246A (en) * | 1975-04-14 | 1977-03-29 | The Charles Stark Draper Laboratory, Inc. | Synchronous fault tolerant multi-processor system |
| US4015243A (en) * | 1975-06-02 | 1977-03-29 | Kurpanek Horst G | Multi-processing computer system |
| US4034347A (en) * | 1975-08-08 | 1977-07-05 | Bell Telephone Laboratories, Incorporated | Method and apparatus for controlling a multiprocessor system |
| US4224664A (en) * | 1976-05-07 | 1980-09-23 | Honeywell Information Systems Inc. | Apparatus for detecting when the activity of one process in relation to a common piece of information interferes with any other process in a multiprogramming/multiprocessing computer system |
| US4228496A (en) * | 1976-09-07 | 1980-10-14 | Tandem Computers Incorporated | Multiprocessor system |
| US4456952A (en) * | 1977-03-17 | 1984-06-26 | Honeywell Information Systems Inc. | Data processing system having redundant control processors for fault detection |
| JPS53116040A (en) * | 1977-03-18 | 1978-10-11 | Nec Corp | System controller |
| US4358823A (en) * | 1977-03-25 | 1982-11-09 | Trw, Inc. | Double redundant processor |
| US4101960A (en) * | 1977-03-29 | 1978-07-18 | Burroughs Corporation | Scientific processor |
| US4187538A (en) * | 1977-06-13 | 1980-02-05 | Honeywell Inc. | Read request selection system for redundant storage |
| GB1545169A (en) * | 1977-09-22 | 1979-05-02 | Burroughs Corp | Data processor system including data-save controller for protection against loss of volatile memory information during power failure |
| IT1111606B (it) * | 1978-03-03 | 1986-01-13 | Cselt Centro Studi Lab Telecom | Sistema elaborativo modulare multiconfigurabile integrato con un sistema di preelaborazione |
| US4270168A (en) * | 1978-08-31 | 1981-05-26 | United Technologies Corporation | Selective disablement in fail-operational, fail-safe multi-computer control system |
| US4234920A (en) * | 1978-11-24 | 1980-11-18 | Engineered Systems, Inc. | Power failure detection and restart system |
| US4257097A (en) * | 1978-12-11 | 1981-03-17 | Bell Telephone Laboratories, Incorporated | Multiprocessor system with demand assignable program paging stores |
| US4253144A (en) * | 1978-12-21 | 1981-02-24 | Burroughs Corporation | Multi-processor communication network |
| US4380046A (en) * | 1979-05-21 | 1983-04-12 | Nasa | Massively parallel processor computer |
| US4449183A (en) * | 1979-07-09 | 1984-05-15 | Digital Equipment Corporation | Arbitration scheme for a multiported shared functional device for use in multiprocessing systems |
| US4428044A (en) * | 1979-09-20 | 1984-01-24 | Bell Telephone Laboratories, Incorporated | Peripheral unit controller |
| US4315310A (en) * | 1979-09-28 | 1982-02-09 | Intel Corporation | Input/output data processing system |
| DE2939487A1 (de) * | 1979-09-28 | 1981-04-16 | Siemens AG, 1000 Berlin und 8000 München | Rechnerarchitektur auf der basis einer multi-mikrocomputerstruktur als fehlertolerantes system |
| NL7909178A (nl) * | 1979-12-20 | 1981-07-16 | Philips Nv | Rekenmachine met verspreide redundantie welke is verdeeld over verschillende isolatiegebieden voor fouten. |
| FR2474201B1 (fr) * | 1980-01-22 | 1986-05-16 | Bull Sa | Procede et dispositif pour gerer les conflits poses par des acces multiples a un meme cache d'un systeme de traitement numerique de l'information comprenant au moins deux processus possedant chacun un cache |
| US4342083A (en) * | 1980-02-05 | 1982-07-27 | The Bendix Corporation | Communication system for a multiple-computer system |
| JPS56119596A (en) * | 1980-02-26 | 1981-09-19 | Nec Corp | Control signal generator |
| US4351023A (en) * | 1980-04-11 | 1982-09-21 | The Foxboro Company | Process control system with improved system security features |
| US4493019A (en) * | 1980-05-06 | 1985-01-08 | Burroughs Corporation | Pipelined microprogrammed digital data processor employing microinstruction tasking |
| JPS573148A (en) * | 1980-06-06 | 1982-01-08 | Hitachi Ltd | Diagnostic system for other system |
| US4412281A (en) * | 1980-07-11 | 1983-10-25 | Raytheon Company | Distributed signal processing system |
| US4369510A (en) * | 1980-07-25 | 1983-01-18 | Honeywell Information Systems Inc. | Soft error rewrite control system |
| US4392196A (en) * | 1980-08-11 | 1983-07-05 | Harris Corporation | Multi-processor time alignment control system |
| US4399504A (en) * | 1980-10-06 | 1983-08-16 | International Business Machines Corporation | Method and means for the sharing of data resources in a multiprocessing, multiprogramming environment |
| US4375683A (en) * | 1980-11-12 | 1983-03-01 | August Systems | Fault tolerant computational system and voter circuit |
| US4414624A (en) * | 1980-11-19 | 1983-11-08 | The United States Of America As Represented By The Secretary Of The Navy | Multiple-microcomputer processing |
| US4371754A (en) * | 1980-11-19 | 1983-02-01 | Rockwell International Corporation | Automatic fault recovery system for a multiple processor telecommunications switching control |
| US4430707A (en) * | 1981-03-05 | 1984-02-07 | Burroughs Corporation | Microprogrammed digital data processing system employing multi-phase subroutine control for concurrently executing tasks |
| US4455605A (en) * | 1981-07-23 | 1984-06-19 | International Business Machines Corporation | Method for establishing variable path group associations and affiliations between "non-static" MP systems and shared devices |
| US4556952A (en) * | 1981-08-12 | 1985-12-03 | International Business Machines Corporation | Refresh circuit for dynamic memory of a data processor employing a direct memory access controller |
| US4438494A (en) * | 1981-08-25 | 1984-03-20 | Intel Corporation | Apparatus of fault-handling in a multiprocessing system |
| US4920540A (en) * | 1987-02-25 | 1990-04-24 | Stratus Computer, Inc. | Fault-tolerant digital timing apparatus and method |
| US4597084A (en) * | 1981-10-01 | 1986-06-24 | Stratus Computer, Inc. | Computer memory apparatus |
| US4486826A (en) * | 1981-10-01 | 1984-12-04 | Stratus Computer, Inc. | Computer peripheral control apparatus |
| IN160140B (ja) * | 1981-10-10 | 1987-06-27 | Westinghouse Brake & Signal | |
| DE3208573C2 (de) * | 1982-03-10 | 1985-06-27 | Standard Elektrik Lorenz Ag, 7000 Stuttgart | 2 aus 3-Auswahleinrichtung für ein 3-Rechnersystem |
| US4497059A (en) * | 1982-04-28 | 1985-01-29 | The Charles Stark Draper Laboratory, Inc. | Multi-channel redundant processing systems |
| DE3216238C1 (de) * | 1982-04-30 | 1983-11-03 | Siemens AG, 1000 Berlin und 8000 München | Datenverarbeitungsanlage mit virtueller Teiladressierung des Pufferspeichers |
| JPS5914062A (ja) * | 1982-07-15 | 1984-01-24 | Hitachi Ltd | 二重化共有メモリ制御方法 |
| DE3235762A1 (de) * | 1982-09-28 | 1984-03-29 | Fried. Krupp Gmbh, 4300 Essen | Verfahren und vorrichtung zur synchronisation von datenverarbeitungsanlagen |
| NL8203921A (nl) * | 1982-10-11 | 1984-05-01 | Philips Nv | Multipel redundant kloksysteem, bevattende een aantal onderling synchroniserende klokken, en klokschakeling voor gebruik in zo een kloksysteem. |
| US4667287A (en) * | 1982-10-28 | 1987-05-19 | Tandem Computers Incorporated | Multiprocessor multisystem communications network |
| US4473452A (en) * | 1982-11-18 | 1984-09-25 | The Trustees Of Columbia University In The City Of New York | Electrophoresis using alternating transverse electric fields |
| US4590554A (en) * | 1982-11-23 | 1986-05-20 | Parallel Computers Systems, Inc. | Backup fault tolerant computer system |
| US4648035A (en) * | 1982-12-06 | 1987-03-03 | Digital Equipment Corporation | Address conversion unit for multiprocessor system |
| US4541094A (en) * | 1983-03-21 | 1985-09-10 | Sequoia Systems, Inc. | Self-checking computer circuitry |
| US4591977A (en) * | 1983-03-23 | 1986-05-27 | The United States Of America As Represented By The Secretary Of The Air Force | Plurality of processors where access to the common memory requires only a single clock interval |
| US4644498A (en) * | 1983-04-04 | 1987-02-17 | General Electric Company | Fault-tolerant real time clock |
| US4661900A (en) * | 1983-04-25 | 1987-04-28 | Cray Research, Inc. | Flexible chaining in vector processor with selective use of vector registers as operand and result registers |
| US4577272A (en) * | 1983-06-27 | 1986-03-18 | E-Systems, Inc. | Fault tolerant and load sharing processing system |
| US4646231A (en) * | 1983-07-21 | 1987-02-24 | Burroughs Corporation | Method of synchronizing the sequence by which a variety of randomly called unrelated activities are executed in a digital processor |
| JPS6054052A (ja) * | 1983-09-02 | 1985-03-28 | Nec Corp | 処理継続方式 |
| US4912698A (en) * | 1983-09-26 | 1990-03-27 | Siemens Aktiengesellschaft | Multi-processor central control unit of a telephone exchange system and its operation |
| DE3334796A1 (de) * | 1983-09-26 | 1984-11-08 | Siemens AG, 1000 Berlin und 8000 München | Verfahren zum betrieb eines multiprozessor-steuerrechners, insbesondere fuer die zentralsteuereinheit eines fernsprech-vermittlungssystems |
| US4564903A (en) * | 1983-10-05 | 1986-01-14 | International Business Machines Corporation | Partitioned multiprocessor programming system |
| US4631701A (en) * | 1983-10-31 | 1986-12-23 | Ncr Corporation | Dynamic random access memory refresh control system |
| US4783733A (en) * | 1983-11-14 | 1988-11-08 | Tandem Computers Incorporated | Fault tolerant communications controller system |
| US4607365A (en) * | 1983-11-14 | 1986-08-19 | Tandem Computers Incorporated | Fault-tolerant communications controller system |
| US4570261A (en) * | 1983-12-09 | 1986-02-11 | Motorola, Inc. | Distributed fault isolation and recovery system and method |
| WO1985002698A1 (en) * | 1983-12-12 | 1985-06-20 | Parallel Computers, Inc. | Computer processor controller |
| US4608688A (en) * | 1983-12-27 | 1986-08-26 | At&T Bell Laboratories | Processing system tolerant of loss of access to secondary storage |
| US4622631B1 (en) * | 1983-12-30 | 1996-04-09 | Recognition Int Inc | Data processing system having a data coherence solution |
| US4625296A (en) * | 1984-01-17 | 1986-11-25 | The Perkin-Elmer Corporation | Memory refresh circuit with varying system transparency |
| DE3509900A1 (de) * | 1984-03-19 | 1985-10-17 | Konishiroku Photo Industry Co., Ltd., Tokio/Tokyo | Verfahren und vorrichtung zum erzeugen eines farbbilds |
| US4638427A (en) * | 1984-04-16 | 1987-01-20 | International Business Machines Corporation | Performance evaluation for an asymmetric multiprocessor system |
| US4633394A (en) * | 1984-04-24 | 1986-12-30 | International Business Machines Corp. | Distributed arbitration for multiple processors |
| US4589066A (en) * | 1984-05-31 | 1986-05-13 | General Electric Company | Fault tolerant, frame synchronization for multiple processor systems |
| US4823256A (en) * | 1984-06-22 | 1989-04-18 | American Telephone And Telegraph Company, At&T Bell Laboratories | Reconfigurable dual processor system |
| US4959774A (en) * | 1984-07-06 | 1990-09-25 | Ampex Corporation | Shadow memory system for storing variable backup blocks in consecutive time periods |
| JPS6184740A (ja) * | 1984-10-03 | 1986-04-30 | Hitachi Ltd | 汎用オブジエクトコ−ド生成方式 |
| US4827401A (en) * | 1984-10-24 | 1989-05-02 | International Business Machines Corporation | Method and apparatus for synchronizing clocks prior to the execution of a flush operation |
| AU568977B2 (en) * | 1985-05-10 | 1988-01-14 | Tandem Computers Inc. | Dual processor error detection system |
| US4757442A (en) * | 1985-06-17 | 1988-07-12 | Nec Corporation | Re-synchronization system using common memory bus to transfer restart data from non-faulty processor to failed processor |
| US4751639A (en) * | 1985-06-24 | 1988-06-14 | Ncr Corporation | Virtual command rollback in a fault tolerant data processing system |
| US4683570A (en) * | 1985-09-03 | 1987-07-28 | General Electric Company | Self-checking digital fault detector for modular redundant real time clock |
| US4845419A (en) * | 1985-11-12 | 1989-07-04 | Norand Corporation | Automatic control means providing a low-power responsive signal, particularly for initiating data preservation operation |
| JPH0778750B2 (ja) * | 1985-12-24 | 1995-08-23 | 日本電気株式会社 | 高信頼性コンピュータ方式 |
| US4703452A (en) * | 1986-01-03 | 1987-10-27 | Gte Communication Systems Corporation | Interrupt synchronizing circuit |
| US4773038A (en) * | 1986-02-24 | 1988-09-20 | Thinking Machines Corporation | Method of simulating additional processors in a SIMD parallel processor array |
| US4799140A (en) * | 1986-03-06 | 1989-01-17 | Orbital Sciences Corporation Ii | Majority vote sequencer |
| US4757505A (en) * | 1986-04-30 | 1988-07-12 | Elgar Electronics Corp. | Computer power system |
| US4868832A (en) * | 1986-04-30 | 1989-09-19 | Marrington S Paul | Computer power system |
| US4763333A (en) * | 1986-08-08 | 1988-08-09 | Universal Vectors Corporation | Work-saving system for preventing loss in a computer due to power interruption |
| US4819159A (en) * | 1986-08-29 | 1989-04-04 | Tolerant Systems, Inc. | Distributed multiprocess transaction processing system and method |
| IT1213344B (it) * | 1986-09-17 | 1989-12-20 | Honoywell Information Systems | Architettura di calcolatore a tolleranza di guasto. |
| US4774709A (en) * | 1986-10-02 | 1988-09-27 | United Technologies Corporation | Symmetrization for redundant channels |
| GB2211638A (en) * | 1987-10-27 | 1989-07-05 | Ibm | Simd array processor |
| US4847837A (en) * | 1986-11-07 | 1989-07-11 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Local area network with fault-checking, priorities and redundant backup |
| JPS63165950A (ja) * | 1986-12-27 | 1988-07-09 | Pfu Ltd | 共通メモリ方式 |
| US4831520A (en) * | 1987-02-24 | 1989-05-16 | Digital Equipment Corporation | Bus interface circuit for digital data processor |
| US4967353A (en) | 1987-02-25 | 1990-10-30 | International Business Machines Corporation | System for periodically reallocating page frames in memory based upon non-usage within a time period or after being allocated |
| US4805107A (en) | 1987-04-15 | 1989-02-14 | Allied-Signal Inc. | Task scheduler for a fault tolerant multiple node processing system |
| CH675781A5 (ja) * | 1987-04-16 | 1990-10-31 | Bbc Brown Boveri & Cie | |
| US4800462A (en) * | 1987-04-17 | 1989-01-24 | Tandem Computers Incorporated | Electrical keying for replaceable modules |
| US4868826A (en) * | 1987-08-31 | 1989-09-19 | Triplex | Fault-tolerant output circuits |
| US4868818A (en) * | 1987-10-29 | 1989-09-19 | The United States Of America As Represented By The Administrator Of The National Aeronautics And Space Administration | Fault tolerant hypercube computer system architecture |
| AU616213B2 (en) * | 1987-11-09 | 1991-10-24 | Tandem Computers Incorporated | Method and apparatus for synchronizing a plurality of processors |
| US4879716A (en) * | 1987-12-23 | 1989-11-07 | Bull Hn Information Systems Inc. | Resilient data communications system |
| US4907232A (en) * | 1988-04-28 | 1990-03-06 | The Charles Stark Draper Laboratory, Inc. | Fault-tolerant parallel processing system |
| US4937741A (en) * | 1988-04-28 | 1990-06-26 | The Charles Stark Draper Laboratory, Inc. | Synchronization of fault-tolerant parallel processing systems |
| US4873685A (en) * | 1988-05-04 | 1989-10-10 | Rockwell International Corporation | Self-checking voting logic for fault tolerant computing applications |
| US4965717A (en) * | 1988-12-09 | 1990-10-23 | Tandem Computers Incorporated | Multiple processor system having shared memory with private-write capability |
| US5018148A (en) | 1989-03-01 | 1991-05-21 | Ncr Corporation | Method and apparatus for power failure protection |
| US5020059A (en) | 1989-03-31 | 1991-05-28 | At&T Bell Laboratories | Reconfigurable signal processor |
-
1988
- 1988-12-13 US US07/283,573 patent/US4965717A/en not_active Expired - Lifetime
-
1989
- 1989-11-20 CA CA002003342A patent/CA2003342A1/en not_active Abandoned
- 1989-11-20 CA CA002003337A patent/CA2003337A1/en not_active Abandoned
- 1989-12-08 AT AT89122708T patent/ATE158879T1/de active
- 1989-12-08 EP EP19890122707 patent/EP0372578A3/en not_active Withdrawn
- 1989-12-08 DE DE68928360T patent/DE68928360T2/de not_active Expired - Fee Related
- 1989-12-08 EP EP95111006A patent/EP0681239A3/en not_active Withdrawn
- 1989-12-08 EP EP89122708A patent/EP0372579B1/en not_active Expired - Lifetime
- 1989-12-11 JP JP1322461A patent/JPH079625B2/ja not_active Expired - Fee Related
- 1989-12-11 JP JP1322462A patent/JPH02202637A/ja active Pending
-
1990
- 1990-03-19 EP EP90105102A patent/EP0447577A1/en not_active Withdrawn
- 1990-03-19 EP EP90105103A patent/EP0447578A1/en not_active Withdrawn
- 1990-03-20 AU AU52027/90A patent/AU628497B2/en not_active Expired - Fee Related
- 1990-12-17 US US07/629,698 patent/US5146589A/en not_active Expired - Lifetime
-
1991
- 1991-03-05 US US07/664,495 patent/US5276823A/en not_active Expired - Lifetime
- 1991-03-06 US US07/666,495 patent/US5193175A/en not_active Expired - Lifetime
-
1992
- 1992-11-24 US US07/982,074 patent/US5388242A/en not_active Expired - Lifetime
-
1994
- 1994-02-28 JP JP6054483A patent/JPH0713789A/ja active Pending
-
1995
- 1995-01-31 US US08/381,467 patent/US5588111A/en not_active Expired - Lifetime
-
1997
- 1997-03-10 US US08/815,997 patent/US5758113A/en not_active Expired - Lifetime
Patent Citations (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPS5260540A (en) * | 1975-11-14 | 1977-05-19 | Hitachi Ltd | Synchronization control of double-type system |
| US4733353A (en) * | 1985-12-13 | 1988-03-22 | General Electric Company | Frame synchronization of multiply redundant computers |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US5983359A (en) * | 1996-03-18 | 1999-11-09 | Hitachi, Ltd. | Processor fault recovering method for information processing system |
| JP2014095989A (ja) * | 2012-11-08 | 2014-05-22 | Nec Corp | コンピュータシステム、コンピュータシステムの診断方法及び診断プログラム |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0372579B1 (en) | 1997-10-01 |
| EP0681239A3 (en) | 1996-01-24 |
| JPH0713789A (ja) | 1995-01-17 |
| EP0681239A2 (en) | 1995-11-08 |
| US4965717B1 (ja) | 1993-05-25 |
| CA2003342A1 (en) | 1990-06-09 |
| EP0447577A1 (en) | 1991-09-25 |
| AU628497B2 (en) | 1992-09-17 |
| US5193175A (en) | 1993-03-09 |
| US4965717A (en) | 1990-10-23 |
| EP0372579A3 (en) | 1991-07-24 |
| US5588111A (en) | 1996-12-24 |
| US5146589A (en) | 1992-09-08 |
| US5276823A (en) | 1994-01-04 |
| US5758113A (en) | 1998-05-26 |
| DE68928360T2 (de) | 1998-05-07 |
| EP0372578A3 (en) | 1992-01-15 |
| JPH079625B2 (ja) | 1995-02-01 |
| JPH02202637A (ja) | 1990-08-10 |
| CA2003337A1 (en) | 1990-06-09 |
| EP0372579A2 (en) | 1990-06-13 |
| EP0447578A1 (en) | 1991-09-25 |
| AU5202790A (en) | 1991-09-26 |
| DE68928360D1 (de) | 1997-11-06 |
| US5388242A (en) | 1995-02-07 |
| ATE158879T1 (de) | 1997-10-15 |
| EP0372578A2 (en) | 1990-06-13 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JPH02202636A (ja) | フォールトトレラントな能力を備えたコンピュータ | |
| US5317726A (en) | Multiple-processor computer system with asynchronous execution of identical code streams | |
| US5384906A (en) | Method and apparatus for synchronizing a plurality of processors | |
| US5890003A (en) | Interrupts between asynchronously operating CPUs in fault tolerant computer system | |
| US5327553A (en) | Fault-tolerant computer system with /CONFIG filesystem | |
| US5317752A (en) | Fault-tolerant computer system with auto-restart after power-fall | |
| US6073251A (en) | Fault-tolerant computer system with online recovery and reintegration of redundant components | |
| CA1306546C (en) | Dual zone, fault tolerant computer system with error checking on i/o writes | |
| US20050240806A1 (en) | Diagnostic memory dump method in a redundant processor | |
| JPH07117903B2 (ja) | 障害回復方法 | |
| JP3030658B2 (ja) | 電源故障対策を備えたコンピュータシステム及びその動作方法 | |
| US5473770A (en) | Fault-tolerant computer system with hidden local memory refresh | |
| KR19990057809A (ko) | 오류 방지 시스템 | |
| EP0476262B1 (en) | Error handling in a VLSI central processor unit employing a pipelined address and execution module | |
| JPS6146535A (ja) | 擬似エラ−設定制御方式 | |
| JPS6316777B2 (ja) | ||
| JPS60189542A (ja) | プロセツサ暴走検出方式 | |
| JPS60108936A (ja) | 情報処理装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20090201 Year of fee payment: 14 |
|
| LAPS | Cancellation because of no payment of annual fees |