JP2010146586A - 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法 - Google Patents

複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法 Download PDF

Info

Publication number
JP2010146586A
JP2010146586A JP2010013537A JP2010013537A JP2010146586A JP 2010146586 A JP2010146586 A JP 2010146586A JP 2010013537 A JP2010013537 A JP 2010013537A JP 2010013537 A JP2010013537 A JP 2010013537A JP 2010146586 A JP2010146586 A JP 2010146586A
Authority
JP
Japan
Prior art keywords
storage device
storage
data
dedicated
tier
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2010013537A
Other languages
English (en)
Other versions
JP5745770B2 (ja
Inventor
Brett A Penney
エー. ペニー ブレット
Neil A Clarkson
エー. クラークソン ネイル
Geoffrey S Barrall
エス. バラール ジェフリー
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hitachi Data Systems Engineering UK Ltd
Original Assignee
BlueArc UK Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by BlueArc UK Ltd filed Critical BlueArc UK Ltd
Publication of JP2010146586A publication Critical patent/JP2010146586A/ja
Application granted granted Critical
Publication of JP5745770B2 publication Critical patent/JP5745770B2/ja
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0629Configuration or reconfiguration of storage systems
    • G06F3/0632Configuration or reconfiguration of storage systems by initialisation or re-initialisation of storage systems
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0602Interfaces specially adapted for storage systems specifically adapted to achieve a particular effect
    • G06F3/0604Improving or facilitating administration, e.g. storage management
    • G06F3/0607Improving or facilitating administration, e.g. storage management by facilitating the process of upgrading existing storage systems, e.g. for improving compatibility between host and storage device
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0668Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671In-line storage system
    • G06F3/0683Plurality of storage devices
    • G06F3/0689Disk arrays, e.g. RAID, JBOD
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L9/00Cryptographic mechanisms or cryptographic arrangements for secret or secure communications; Network security protocols
    • H04L9/40Network security protocols
    • GPHYSICS
    • G06COMPUTING OR CALCULATING; COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601Interfaces specially adapted for storage systems
    • G06F3/0628Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0661Format or protocol conversion arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/30Definitions, standards or architectural aspects of layered protocol stacks
    • H04L69/32Architecture of open systems interconnection [OSI] 7-layer type protocol stacks, e.g. the interfaces between the data link level and the physical level
    • H04L69/322Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions
    • H04L69/329Intralayer communication protocols among peer entities or protocol data unit [PDU] definitions in the application layer [OSI layer 7]

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Stored Programmes (AREA)

Abstract

【課題】複数のストレージ装置タイプをサポートするのに好適なネットワーク接続ストレージシステム、装置、および方法を提供する。
【解決手段】ネットワーク接続システム、装置、および、方法は、ファイバーチャンネルストレージ装置、ATAストレージ装置、シリアル接続SCSIストレージ装置、シリアルATAストレージ装置、および、固体ストレージ装置のような複数のストレージ装置タイプを有するストレージ装置をサポートする。異なるストレージ装置タイプを有するそれぞれのストレージ装置は、一組の管理ルールに対応づけられる。管理ルールは、例えば、専用ストレージ装置を識別し、専用ストレージ装置を設定し、ディスクプロトコルメッセージを専用ストレージ装置に送信し、専用ストレージ装置から受信されたディスクプロトコルメッセージを処理し、そして、誤り条件および例外条件を処理するためのルールを含んでもよい。
【選択図】図9

Description

本発明は、データストレージシステムに関し、より詳細には、複数のストレージ装置タイプを同時にサポートするネットワーク接続ストレージシステムに関する。
今日の情報化時代において、コンピュータおよび通信システムは、多くの場合、大量のデータストレージを必要とする。データストレージへのアクセスは、通信ネットワークを介して、益々頻繁に提供されている。とりわけ、これは、データストレージ資源を多くのデータストレージユーザが利用できるようにする。
図1は、この分野で知られているイーサネット(登録商標)ローカルエリアネットワーク(LAN)のような通信ネットワーク104を介して多くのユーザ102によってアクセスされるストレージシステム106の概念図を示す。ユーザ102は、通信ネットワーク104を介してストレージシステム106によって提供されるストレージサービスにアクセスする様々なエンティティーを表現する。ユーザ102は、ストレージシステム106の内部または外部に存在してもよい(例えば、以下で説明するように、ストレージシステム106内のサーバーは、通信ネットワーク104を介して、ストレージサービスにアクセスするだけでなく、ストレージサービスを提供してもよい)。
一般的には、ストレージシステム106において使用される2つの種類のネットワーク型データストレージ技術、すなわち、ストレージエリアネットワーク(SAN)およびネットワーク接続ストレージ(NAS)が、存在する。SANは、元来、ファイバーチャンネル(Fibre Channel:FC)ネットワークを用いて生ブロックデータを提供するものとして定義される。NASは、典型的には、LAN104を介してファイルサービスを提供する。
図2は、この分野で知られているSAN型ストレージシステムを示す。SAN型ストレージシステムは、FCネットワーク208を介していくつかのサーバー206と通信できる状態にあるいくつかのストレージ装置210を含む。FCネットワーク208およびストレージ装置210は、SANを表現し、サーバー206は、基本的には、SANのユーザである。それぞれのサーバー206は、典型的には、特定のアプリケーションをサポートする。例えば、電子メールアプリケーションおよびワールドワイドウェブアプリケーションのための個々のサーバーが、存在してもよい。ストレージ装置210によって提供されるストレージ資源は、典型的には、分割され、ストレージ資源の個々の部分は、特定のアプリケーションのためのそれぞれのサーバー206に割り当てられる。それぞれのサーバー206は、それが割り当てられたストレージ資源の部分にしかアクセスすることができない。それぞれのサーバー206は、LAN104に接続される。とりわけ、LAN104は、サーバー間通信を可能にし(例えば、様々なアプリケーション間におけるファイル共有を可能にし、また、一方のアプリケーションから他方のアプリケーションへデータをコピーするのを可能にする)、また、ユーザ102がサーバー206にアクセスするのを可能にする。
図3は、この分野で知られている典型的なNAS型ストレージシステムを示す。NAS型ストレージシステムは、例えばFCネットワーク308を介していくつかの専用ストレージ装置310と通信できる状態にあるNASサーバー306を含む。NASサーバー306は、SANの場合のように、ストレージ資源の一部分を特定のアプリケーションに専有させるのではなく、複数のアプリケーションがストレージ資源をファイルレベルで共有できるように、専用ストレージ装置310を管理および制御する。したがって、NASサーバー306は、ファイルレベルにおけるストレージ資源へのマルチユーザアクセスを提供し、また、必要であれば、あるいは、望ましいならば、すべてのストレージ資源をすべてのアプリケーションが利用できるようにすることによって、容量共有を提供する。NASサーバー306は、LAN104に接続される。とりわけ、LAN104は、ユーザ102がNASサーバー306にアクセスするのを可能にする。
SANおよびNASは、お互いに排他的な技術ではない。例えば、図3に示されるように、FCネットワーク308および専用ストレージ装置310は、基本的には、NASサーバー306によって管理および制御されるSANである。また、図4に示されるように、ストレージシステム106は、SAN技術およびNAS技術の両方を含んでもよく、サーバー206およびNASサーバー306は、LAN104に接続される。
SAN型ストレージシステムに関する1つの問題は、図2を参照して上述したように、サーバー間のデータ転送(様々なアプリケーション間におけるファイル共有および一方のアプリケーションから他方のアプリケーションへのデータのコピーのような)がLAN104を介してなされることである。これは、LAN104のトラフィック負荷を増大させることによって、かつ、サーバー206の処理負荷を増大させることによって、全体的なシステム性能に大きな影響を与えることがある。NAS型ストレージシステムにおいては、そのようなファイル共有およびデータコピーは、LAN104を使用せずに、NASサーバー306によって実行されてもよく、そのために、そのような処理は、全体的なシステム性能にほとんどまたはまったく影響を与えない。
ネットワーク接続システム、装置、および、方法は、ファイバーチャンネルストレージ装置、ATAストレージ装置、シリアル接続SCSIストレージ装置、シリアルATAストレージ装置、および、固体ストレージ装置のような複数のストレージ装置タイプを有するストレージ装置をサポートする。異なるストレージ装置タイプを有するそれぞれのストレージ装置は、一組の管理ルールに対応づけられる。管理ルールは、例えば、専用ストレージ装置を識別し、専用ストレージ装置を設定し、ディスクプロトコルメッセージを専用ストレージ装置に送信し、専用ストレージ装置から受信されたディスクプロトコルメッセージを処理し、そして、誤り条件および例外条件を処理するためのルールを含んでもよい。
本発明の一実施形態においては、通信ネットワークを介してストレージサービスを提供するネットワーク接続ストレージサーバーおよびディスク制御プロトコルを用いてネットワーク接続ストレージサーバーと通信できる状態にある複数の専用ストレージ装置を含むネットワーク接続ストレージシステムが、提供される。複数の専用ストレージ装置は、複数のストレージ装置タイプを有する。異なるストレージ装置タイプを有するそれぞれの専用ストレージ装置は、異なる一組の管理ルールを有する。ネットワーク接続ストレージサーバーは、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理する。ネットワーク接続ストレージサーバーは、典型的には、異なるストレージ装置タイプを有する専用ストレージ装置間のデータ転送を可能にする。専用ストレージ装置は、RAID機能を含んでもよく、さもなければ、ネットワーク接続ストレージサーバーが、RAID機能を専用ストレージ装置に提供してもよい。また、ネットワーク接続ストレージシステムは、いずれかの専用ストレージ装置からのデータを記憶するために、ネットワーク接続ストレージサーバーと通信できる状態にある専用テープストレージ装置を含んでもよい。
本発明の別の実施形態においては、通信ネットワークを介してストレージサービスを提供するためのネットワーク接続ストレージ装置が、提供される。ネットワーク接続ストレージサーバーは、ディスク制御プロトコルを用いて複数の専用ストレージ装置と通信するための少なくとも1つのストレージインタフェースを含み、複数の専用ストレージ装置は、複数のストレージ装置タイプを有し、異なるストレージ装置タイプを有するそれぞれの専用ストレージ装置は、異なる一組の管理ルールを有する。また、ネットワーク接続ストレージサーバーは、複数の専用ストレージ装置上にデータを記憶するためのストレージロジックを含み、ストレージロジックは、少なくとも1つのストレージインタフェースを介して複数の専用ストレージ装置を管理するためのディスク制御ロジックを備え、ディスク制御ロジックは、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理する。ストレージロジックは、典型的には、異なるストレージ装置タイプを有する専用ストレージ装置間のデータ転送を実行するためのデータ転送ロジックを含む。データ転送ロジックは、典型的には、ネットワークデータ管理プロトコルを実施するハードウェアコンポーネントを備える。ストレージロジックは、RAID(Redundant Array of Independent Disk)機能を専用ストレージ装置に提供するRAIDロジックを含んでもよい。ストレージロジックは、テープ制御プロトコルを用いて少なくとも1つのストレージインタフェースを介してテープストレージ装置を管理するためのテープ制御ロジックを含んでもよい。ディスク制御ロジックは、典型的には、専用ストレージ装置と通信するためのファイバーチャンネル通信プロトコルを実施し、さらに、ディスク制御プロトコルメッセージをそれぞれの専用ストレージ装置と交換するためのディスク制御プロトコルを実施するハードウェアコンポーネントと、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するように適切にプログラムされたプログラマブルプロセッサーを含むソフトウェアコンポーネントとを含む。
本発明のさらに別の実施形態においては、ネットワーク接続ストレージシステムにおいて、異なるストレージ装置タイプを有するストレージ装置をネットワークストレージサーバーによってサポートするための方法が、提供される。この方法は、ディスク制御プロトコルを用いてネットワークストレージサーバーと通信できる状態にある複数の専用ストレージ装置ごとに一組の管理ルールを保持するステップであり、複数の専用ストレージ装置が、複数のストレージ装置タイプを有し、異なるストレージ装置タイプを有する専用ストレージ装置のそれぞれが、異なる一組の管理ルールを有する、前記保持するステップと、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップとを含む。それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、新しい専用ストレージ装置が存在することを示す指示を受信するステップと、新しい専用ストレージ装置を識別するために、様々な専用ストレージ装置およびストレージ装置タイプのための管理ルールの組を使用するステップとを含んでもよい。異なるストレージ装置タイプを有するそれぞれの専用ストレージ装置は、異なる形で設定されてもよく、その場合には、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールに基づいて、それぞれの異なる専用ストレージ装置を設定するステップを含んでもよい。それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、ディスク制御プロトコルメッセージを専用ストレージ装置に送信するステップであり、少なくともいくつかのディスク制御プロトコルメッセージは、専用ストレージ装置およびストレージ装置タイプごとの一組の管理ルールに基づいて異なる専用ストレージ装置ごとに異なる形でフォーマットされる、前記送信するステップを含んでもよい。異なるストレージ装置タイプを有するそれぞれの専用ストレージ装置は、最大キューサイズを有してもよく、その場合には、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、専用ストレージ装置およびストレージ装置タイプごとの一組の管理ルールに基づいて、それぞれの専用ストレージ装置にキューイングすることのできるディスク制御プロトコルメッセージの数を決定するステップを含んでもよい。異なるストレージ装置タイプを有するそれぞれの専用ストレージ装置は、好ましいストライプサイズを有してもよく、その場合には、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、専用ストレージ装置およびストレージ装置タイプごとの一組の管理ルールに基づいて、専用ストレージ装置のための好ましいストライプサイズを用いてデータをそれぞれの専用ストレージ装置に書き込むステップを含んでもよい。それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、ディスク制御プロトコルメッセージを専用ストレージ装置から受信するステップと、専用ストレージ装置およびストレージ装置タイプごとの一組の管理ルールに基づいて、様々な専用ストレージ装置からのディスク制御プロトコルメッセージを処理するステップとを含んでもよい。異なるストレージ装置タイプを有するそれぞれの専用ストレージ装置は、異なる誤り処理ルールおよび例外処理ルールを有してもよく、その場合には、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理するステップは、専用ストレージ装置およびストレージ装置タイプごとの一組の管理ルールに基づいて、異なる専用ストレージ装置ごとに誤りおよび例外を処理するステップを含んでもよい。
本発明のさらに別の実施形態においては、ディスク制御プロトコルを用いて、ネットワーク接続ストレージサーバーと通信できる状態にある複数の専用ストレージ装置を同時にサポートするための手段であり、複数のストレージ装置は、複数のストレージ装置タイプを有する、前記サポートするための手段と、多くのユーザに通信ネットワークを介してストレージサービスを提供するために、複数のストレージ装置を管理するための手段とを備えたネットワーク接続ストレージサーバーが、提供される。
添付の図面を参照して以下の詳細な説明を読むことによって、本発明の上述した特徴をより容易に理解することができる。
(項目1)
ネットワーク接続ストレージシステムであって、
通信ネットワークを介してストレージサービスを提供するネットワーク接続ストレージサーバーと、
ディスク制御プロトコルを用いて該ネットワーク接続ストレージサーバーと通信できる状態にある複数の専用ストレージ装置であって、該複数の専用ストレージ装置が、複数のストレージ装置タイプを有し、異なったストレージ装置タイプを有する該専用ストレージ装置のそれぞれが、異なった一組の管理ルールを有し、該ネットワーク接続ストレージサーバーが、それぞれの専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための該一組の管理ルールを用いて管理する、複数の専用ストレージ装置と
を備える、ネットワーク接続ストレージシステム。
(項目2)
前記複数のストレージ装置タイプが、
ファイバーチャンネルストレージ装置タイプ、
ATAストレージ装置タイプ、
シリアル接続SCSIストレージ装置タイプ、
シリアルATAストレージ装置タイプ、および、
固体ストレージ装置タイプ
の複数を含む、項目1に記載のネットワーク接続ストレージシステム。
(項目3)
前記複数の専用ストレージ装置が、
少なくとも1つのファイバーチャンネルストレージ装置と、
少なくとも1つのATAストレージ装置と
を含む、項目1に記載のネットワーク接続ストレージシステム。
(項目4)
前記ネットワーク接続ストレージサーバーが、異なったストレージ装置タイプを有する専用ストレージ装置間のデータ転送を可能にする、項目1に記載のネットワーク接続ストレージシステム。
(項目5)
前記専用ストレージ装置が、RAID(Redundant Array of Independent Disk)機能を含む、項目1に記載のネットワーク接続ストレージシステム。
(項目6)
前記ネットワーク接続ストレージサーバーが、RAID(Redundant Array of Independent Disk)機能を前記専用ストレージ装置に提供する、項目1に記載のネットワーク接続ストレージシステム。
(項目7)
前記専用ストレージ装置のいずれかからのデータを記憶するために、前記ネットワーク接続ストレージサーバーと通信できる状態にある専用テープストレージ装置をさらに備える、項目1に記載のネットワーク接続ストレージシステム。
(項目8)
特定の専用ストレージ装置およびストレージ装置タイプのための前記管理ルールが、
該専用ストレージ装置を識別するためのルール、
該専用ストレージ装置を設定するためのルール、
ディスクプロトコルメッセージを該専用ストレージ装置に送信するためのルール、
該専用ストレージ装置から受信されたディスクプロトコルメッセージを処理するためのルール、および、
誤り条件および例外条件を処理するためのルール
のうちの少なくとも1つを含む、項目1に記載のネットワーク接続ストレージシステム。
(項目9)
通信ネットワークを介してストレージサービスを提供するためのネットワーク接続ストレージ装置であって、該ネットワーク接続ストレージサーバーが、
ディスク制御プロトコルを用いて複数の専用ストレージ装置と通信するための少なくとも1つのストレージインタフェースであって、該複数の専用ストレージ装置が、複数のストレージ装置タイプを有し、異なったストレージ装置タイプを有する該専用ストレージ装置のそれぞれが、異なった一組の管理ルールを有する、少なくとも1つのストレージインタフェースと、
データを該複数の専用ストレージ装置上に記憶するためのストレージロジックであって、該ストレージロジックが、該少なくとも1つのストレージインタフェースを介して該複数の専用ストレージ装置を管理するためのディスク制御ロジックを備え、該ディスク制御ロジックが、それぞれの専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための該一組の管理ルールを用いて、管理する、ストレージロジックと
を備える、ネットワーク接続ストレージ装置。
(項目10)
前記複数のストレージ装置タイプが、
ファイバーチャンネルストレージ装置タイプ、
ATAストレージ装置タイプ、
シリアル接続SCSIストレージ装置タイプ、
シリアルATAストレージ装置タイプ、および、
固体ストレージ装置タイプ
の複数を含む、項目9に記載のネットワーク接続ストレージ装置。
(項目11)
前記複数の専用ストレージ装置が、
少なくとも1つのファイバーチャンネルストレージ装置と、
少なくとも1つのATAストレージ装置と
を含む、項目9に記載のネットワーク接続ストレージ装置。
(項目12)
前記ストレージロジックが、
異なったストレージ装置タイプを有する専用ストレージ装置間のデータ転送を実行するためのデータ転送ロジックをさらに備える、項目9に記載のネットワーク接続ストレージ装置。
(項目13)
前記データ転送ロジックが、ネットワークデータ管理プロトコルをインプリメントするハードウェアコンポーネントを備える、項目12に記載のネットワーク接続ストレージ装置。
(項目14)
前記ストレージロジックが、RAID(Redundant Array of Independent Disk)機能を専用ストレージ装置に提供するRAIDロジックをさらに備える、項目9に記載のネットワーク接続ストレージ装置。
(項目15)
前記ストレージロジックが、テープ制御プロトコルを用いて前記少なくとも1つのストレージインタフェースを介してテープストレージ装置を管理するためのテープ制御ロジックをさらに備える、項目9に記載のネットワーク接続ストレージ装置。
(項目16)
前記ディスク制御ロジックが、
前記専用ストレージ装置と通信するためのファイバーチャンネル通信プロトコルをインプリメントし、ディスク制御プロトコルメッセージを該専用ストレージ装置の各々と交換するための前記ディスク制御プロトコルをインプリメントするハードウェアコンポーネントと、
それぞれの専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理するように適切にプログラムされたプログラマブルプロセッサーと
を備える、項目9に記載のネットワーク接続ストレージ装置。
(項目17)
特定の専用ストレージ装置およびストレージ装置タイプのための前記管理ルールが、
該専用ストレージ装置を識別するためのルール、
該専用ストレージ装置を設定するためのルール、
ディスクプロトコルメッセージを該専用ストレージ装置に送信するためのルール、
該専用ストレージ装置から受信されたディスクプロトコルメッセージを処理するためのルール、および、
誤り条件および例外条件を処理するためのルール、
のうちの少なくとも1つを含む、項目9に記載のネットワーク接続ストレージシステム。
(項目18)
ネットワーク接続ストレージシステムにおけるネットワークストレージサーバーによって、異なったストレージ装置タイプを有するストレージ装置をサポートするための方法であって、
ディスク制御プロトコルを用いて、該ネットワークストレージサーバーと通信できる状態にある複数の専用ストレージ装置の各々に一組の管理ルールを保持することであって、該複数の専用ストレージ装置が、複数のストレージ装置タイプを有し、異なったストレージ装置タイプを有する該専用ストレージ装置のそれぞれが、異なった一組の管理ルールを有する、保持することと、
それぞれの専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための該一組の管理ルールを用いて、管理することと
を包含する、方法。
(項目19)
前記複数のストレージ装置タイプが、
ファイバーチャンネルストレージ装置タイプ、
ATAストレージ装置タイプ、
シリアル接続SCSIストレージ装置タイプ、
シリアルATAストレージ装置タイプ、および、
固体ストレージ装置タイプ
の複数を含む、項目18に記載の方法。
(項目20)
前記複数の専用ストレージ装置が、
少なくとも1つのファイバーチャンネルストレージ装置と、
少なくとも1つのATAストレージ装置と
を含む、項目18に記載の方法。
(項目21)
前記専用ストレージ装置の各々を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、
新たな専用ストレージ装置が存在することを示す指示を受信することと、
該新たな専用ストレージ装置を識別するために、該様々な専用ストレージ装置およびストレージ装置タイプのための前記管理ルールの組を使用することと
を備える、項目18に記載の方法。
(項目22)
異なったストレージ装置タイプを有する前記専用ストレージ装置の各々が、異なった態様で設定され、
各専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールに基づいて、該異なった専用ストレージ装置の各々を設定することを包含する、項目18に記載の方法。
(項目23)
前記専用ストレージ装置の各々を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、ディスク制御プロトコルメッセージを該専用ストレージ装置に送信することであって、該ディスク制御プロトコルメッセージのうちの少なくともいくつかが、該専用ストレージ装置およびストレージ装置タイプの各々の該一組の管理ルールに基づいて、異なった専用ストレージ装置ごとに異なった態様でフォーマットされる、送信することを包含する、項目18に記載の方法。
(項目24)
異なったストレージ装置タイプを有する前記専用ストレージ装置の各々が、最大キューサイズを有し、各専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、該専用ストレージ装置およびストレージ装置タイプの各々の該管理ルールに基づいて、各専用ストレージ装置にキューイングすることのできるディスク制御プロトコルメッセージの数を決定することを包含する、項目18に記載の方法。
(項目25)
異なったストレージ装置タイプを有する前記専用ストレージ装置の各々が、好ましいストライプサイズを有し、各専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、該専用ストレージ装置およびストレージ装置タイプの各々の該一組の管理ルールに基づいて、該専用ストレージ装置のための該好ましいストライプサイズを用いてデータを各専用ストレージ装置に書き込むことを包含する、項目18に記載の方法。
(項目26)
前記専用ストレージ装置の各々を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、
ディスク制御プロトコルメッセージを該専用ストレージ装置から受信することと、
該専用ストレージ装置およびストレージ装置タイプの各々の該一組の管理ルールに基づいて、異なった専用ストレージ装置からの該ディスク制御プロトコルメッセージを処理することと
を包含する、項目18に記載の方法。
(項目27)
異なったストレージ装置タイプを有する前記専用ストレージ装置の各々が、異なった誤り処理ルールおよび例外処理ルールを有し、各専用ストレージ装置を、該専用ストレージ装置およびストレージ装置タイプのための前記一組の管理ルールを用いて、管理することが、該専用ストレージ装置およびストレージ装置タイプの各々の該一組の管理ルールに基づいて、異なった専用ストレージ装置ごとに誤りおよび例外を処理することを包含する、項目18に記載の方法。
(項目28)
ネットワーク接続ストレージサーバーであって、
ディスク制御プロトコルを用いて、該ネットワーク接続ストレージサーバーと通信できる状態にある複数の専用ストレージ装置を同時にサポートするための手段であって、該複数のストレージ装置が、複数のストレージ装置タイプを有する、サポートするための手段と、
複数のユーザに通信ネットワークを介してストレージサービスを提供するために、該複数のストレージ装置を管理するための手段と
を備える、ネットワーク接続ストレージサーバー。
(項目29)
前記複数のストレージ装置タイプが、
ファイバーチャンネルストレージ装置タイプ、
ATAストレージ装置タイプ、
シリアル接続SCSIストレージ装置タイプ、
シリアルATAストレージ装置タイプ、および、
固体ストレージ装置タイプ
の複数を含む、項目28に記載のネットワーク接続ストレージ装置。
(項目30)
前記複数の専用ストレージ装置が、
少なくとも1つのファイバーチャンネルストレージ装置と、
少なくとも1つのATAストレージ装置と
を含む、項目28に記載のネットワーク接続ストレージ装置。
この分野で知られているイーサネット(登録商標)ローカルエリアネットワーク(LAN)のような通信ネットワークを介して多くのユーザによってアクセスされるストレージシステムの概念図である。 この分野で知られているSAN型ストレージシステムを示す図である。 この分野で知られているNAS型ストレージシステムを示す図である。 SAN技術およびNAS技術の両方を含むストレージシステム106を示す図である。 この分野で知られているファイバーチャンネルストレージ装置を使用した典型的なNAS型ストレージシステムを示す図である。 この分野で知られているATAストレージ装置を使用した典型的なNAS型ストレージシステムを示す図である。 NASサーバーが複数のストレージ装置タイプを有するストレージ装置を同時にサポートする本発明の典型的な実施形態を示す図である。 様々なレベルまたは階層のストレージを提供するために、NASサーバーが、2つのクラスのFCストレージ装置、2つのクラスのATAストレージ装置、および、テープストレージ装置を同時にサポートする本発明の典型的な実施形態を示す図である。 本発明の特定の実施形態によるNASサーバーのアーキテクチャーを示す概略ブロック図である。 本発明の実施形態による異なるストレージ装置タイプを有するストレージ装置をサポートするための典型的なディスク制御ロジックを示すロジックフローチャートである。
本発明は、NAS型ストレージシステムに関し、より詳細には、ディスク制御プロトコル(典型的には、SCSIディスク制御プロトコル)を用いて制御されかつ異なるストレージ装置タイプを有するストレージ装置を同時にサポートするNAS型ストレージシステムに関する。本明細書および添付の特許請求の範囲のために、「ストレージ装置タイプ」という用語は、ストレージ装置の基本的なストレージ技術を意味することを意図したものである。ストレージ装置タイプの例は、ファイバーチャンネル(FC)、ATA(以前は、IDEとして知られていた)、シリアル接続SCSI(SAS)、シリアルATA(SATA)、および、様々な種類の固体ストレージを含む。「ストレージ装置タイプ」という用語は、いくつかの例を挙げると、例えば、ストレージ装置のディスクの回転速度、ストレージ装置のストレージ容量、ストレージ装置に必要とされるアクセス時間、ストレージ装置への通信インタフェースの種類、および、ストレージ装置がRAIDコントローラを含むかどうかのようなその他のストレージ装置特徴を意味することを意図したものではない。したがって、例えば、15,000RPMおよび10,000RPMのディスク回転速度および異なるストレージ容量を有する異なるクラスのFCストレージ装置は、FCストレージ装置タイプであると考えられ、7,200RPMおよび5,400RPMのディスク回転速度および異なるストレージ容量を有する異なるクラスのATAストレージ装置は、ATAストレージ装置タイプであると考えられる。また、例えば、ファイバーチャンネル通信インタフェースおよびRAIDコントローラを有するATAストレージ装置は、ATAストレージ装置タイプであると考えられる。ストレージ装置は、ディスク制御プロトコルを用いて制御されるので、本発明は、テープストレージ装置(これは、SCSIテープ制御プロトコルであってもよいテープ制御プロトコルを用いて制御される)のような、ディスク制御プロトコルを用いて制御されないストレージ装置には適用されないが、ある種の固体ストレージ装置のような、ディスク制御プロトコルを用いて制御される非ディスクストレージ装置には適用される。
典型的なNAS型ストレージシステムは、1つのストレージ装置タイプを有するストレージ装置だけを同時にサポートする。例えば、あるベンダーは、複数のFCストレージ装置を備えたNAS型ストレージシステムを提供し、また、あるベンダーは、複数のATAストレージ装置を備えたNAS型ストレージシステムを提供する。FCストレージ装置を使用するNAS型ストレージシステムは、典型的には、ATAストレージ装置を使用するNAS型ストレージシステムよりも高速でありかつ信頼性が高いが、ATAストレージ装置を使用するNAS型ストレージシステムは、典型的には、FCストレージ装置を使用するNAS型ストレージシステムほど高価ではなく、かつ、FCストレージ装置を使用するNAS型ストレージシステムよりも大きなストレージ容量を提供する。したがって、異なる種類のNAS型ストレージシステムは、典型的には、異なるアプリケーションを対象とする。例えば、FCストレージ装置を備えたNAS型ストレージシステムは、典型的には、速度および信頼性が重要な企業システムを対象とするのに対して、ATAストレージ装置を備えたNAS型ストレージシステムは、典型的には、大量の安価なストレージ(テープの代わりにアーカイブするような)から恩恵を受けるアプリケーションを対象とする。
図5は、FCストレージ装置を使用する典型的なNAS型ストレージシステムを示す。具体的には、NASサーバー506は、FCスイッチ508を介して、FCストレージ装置510、510、および、510(以下、個々に、FCストレージ装置510と呼ばれ、また、集合的にも、FCストレージ装置510と呼ばれる)に接続される。FCストレージ装置510は、異なるクラスのFC装置を含んでもよい。FCストレージ装置510は、RAIDコントローラを含んでもよい。FCストレージ装置510が、RAIDコントローラを含まなければ、典型的には、NASサーバー506が、RAID機能をFCストレージ装置510に提供する。
図6は、ATAストレージ装置を使用する典型的なNAS型ストレージシステムを示す。具体的には、NASサーバー606は、FCリンク608、608、および、608を介して、ATAストレージ装置610、610、および、610(以下、個々に、ATAストレージ装置610と呼ばれ、また、集合的にも、ATAストレージ装置610と呼ばれる)に接続される。ATAストレージ装置610は、異なるクラスのATA装置を含んでもよい。ATAストレージ装置610は、RAIDコントローラを含んでもよい。ATAストレージ装置610が、RAIDコントローラを含まなければ、典型的には、NASサーバー606が、RAID機能をATAストレージ装置610に提供する。
本発明の様々な実施形態においては、NAS型ストレージシステムは、複数のストレージ装置タイプを有するストレージ装置を同時にサポートする。異なるストレージ装置タイプは、異なる特徴(例えば、性能、容量、コスト)を有するので、複数のストレージ装置タイプを有するストレージ装置を同時にサポートする能力は、NAS型ストレージシステムが異なるレベルまたは階層のストレージを提供するのを可能にする。異なる種類のストレージ装置は、例えば、ストレージソリューション全体のスケーラビリティ、フレキシビリティ、および、マネージャビリティを維持しながら、ストレージ要件を、性能、容量、および、予算(コスト)の要件に合致させるのを可能にするために、NAS型ストレージシステムに追加されてもよく、あるいは、NAS型ストレージシステムから除去されてもよい。したがって、とりわけ、多層ストレージは、スケーラビリティおよびフレキシビリティのあるストレージソリューションを可能にし、それは、単純化されかつ統合されたストレージ管理による高いレベルの性能を提供する。様々な階層のストレージを使用するので、テープにバックアップすることなく、データを長期間にわたりオンライン状態に維持することができ、データが必要とされるときに、データをテープから復元する必要性を軽減する。これは、また、必要とされるバックアップウィンドウを減少させることに貢献する。なぜなら、テープよりも大きな容量およびテープよりも高い性能を有するストレージ装置にデータをバックアップすることができるからである。したがって、多層ストレージによれば、データは、ストレージ装置により長く残存し、そのために、より容易にユーザアクセスに応じることができる。
多層NAS型ストレージシステム内においては、データは、どのストレージ装置に記憶されてもよく、また、データは、スナップショット、バルクデータ移動/コピー、および、ポリシーに基づいた方法のような様々なデータ移送方法を用いて、ストレージのいずれかの階層からいずれかの階層へ移送されてもよい。例えば、スナップショットを用いて、ボリュームのスナップショットが、取り出され、そして、変更が、ストレージのより低い実行階層へ移送されてもよい。バルクデータ移動/コピーを用いて、データは、ひとまとめにして、一方の階層から他方の階層へ移動されてもよい。ポリシーに基づいた移送は、定義された時間期間よりも古いデータがストレージの階層から階層へ移送されるシステム上で実施されてもよい。データの移送は、より高い実行階層からより低い実行階層へとは限らない。むしろ、データの移動は、より高い実行階層からより低い実行階層への、あるいは、より低い実行階層からより高い実行階層への双方向の移動であってもよい。多層ストレージは、ストレージソリューション全体の統合管理および中央管理を維持しながら、より高価なストレージを解放するのを可能にし、かつ、頻繁にアクセスされないかまたは高い性能を必要としないアプリケーションのためにそれほど高価ではないストレージを使用するのを可能にする。
データ移送は、イントラサーバー(すなわち、NASサーバーの専用ストレージ間の)またはインターサーバー(すなわち、2つのNASサーバー間の)であってもよい。したがって、データは、同じNASサーバー上の1つかまたはそれ以上のボリュームに移送されてもよく、あるいは、データは、バックアップおよび/または障害回復のために、同じデータセンターかまたは別の場所に配置された別のNASサーバーに移送されてもよい。上述したオプションのいずれかを使用すれば、移送されたデータは、読み込み/書き込みが可能である。
本発明の典型的な実施形態においては、すべてのストレージ装置は、同じタイプの通信インタフェース(典型的には、ファイバーチャンネル)を有し、すべてのストレージ装置がRAIDコントローラを含むかまたはすべてのストレージ装置がRAIDコントローラを含まない。ストレージ装置がRAIDコントローラを含まずかつNASサーバーがRAID機能をストレージ装置に提供する本発明の実施形態においては、付加的なストレージ装置を接続することは、典型的には、NASサーバーの処理負荷を増大させる。したがって、ストレージ装置は、RAIDコントローラを含むことが好ましい。
図7は、本発明の典型的な実施形態を示し、この実施形態においては、NASサーバー706は、FCストレージ装置710、ATAストレージ装置712、固体ストレージ装置714、および、将来的に、SASストレージ装置716およびSATAストレージ装置718(本明細書が作成された時点においては、SASストレージ装置およびSATAストレージ装置は、まだ市販されていないが、どのようにすればNASサーバー706によってそのような装置をサポートすることができかつ多層NAS型ストレージシステムに統合することができるかは、この分野に精通する者には本明細書の教示から明白なことである)を含む複数のストレージ装置タイプを有するストレージ装置を同時にサポートする。この例においては、すべてのストレージ装置は、ファイバーチャンネル通信インタフェースを有し、NASサーバー706は、FCスイッチ708を介して、ストレージ装置と通信する。
本発明の特定の一実施形態においては、多層NAS型ストレージシステムは、様々なレベルまたは階層のストレージを提供するために、2つのクラスのFCストレージ装置、2つのクラスのATAストレージ装置、および、テープストレージ装置をサポートする。
図8は、本発明の典型的な実施形態を示し、この実施形態においては、NASサーバー806は、様々なレベルまたは階層のストレージを提供するために、2つのクラスのFCストレージ装置、2つのクラスのATAストレージ装置、および、テープストレージ装置を同時にサポートする。具体的には、NASサーバー806は、15,000RPMで動作するFCストレージ装置810、10,000RPMで動作するFCストレージ装置812、7,200RPMで動作するATAストレージ装置814、5,400RPMで動作するATAストレージ装置816、および、テープストレージ装置818をサポートする。15,000RPMのFCストレージ装置810は、きわめて高い性能のストレージを提供する。10,000RPMのFCストレージ装置812は、高い性能のストレージを提供する。7,200RPMのATAストレージ装置814は、中程度の性能のストレージを提供する。5,400RPMのATAストレージ装置816は、低い性能のストレージを提供し、アーカイブアプリケーションに適している。テープストレージ装置818は、長期間のテープバックアップストレージに適している。この例においては、すべてのストレージ装置は、ファイバーチャンネル通信インタフェースを有し、NASサーバー806は、FCスイッチ808を介して、ストレージ装置と通信する。
複数のストレージ装置タイプを有するストレージ装置をNAS型ストレージシステムに統合するためには、互換性のある通信インタフェース(典型的には、ファイバーチャンネル)を有するストレージ装置をただ単に接続し、特定のディスク制御プロトコル(典型的には、SCSI)を使用し、そして、それらのストレージ装置がNAS型ストレージシステム内において高い信頼性で動作すること(あるいは、まったく動作しないこと)を期待するだけでは不十分である。
異なるストレージ装置タイプを有するストレージ装置がNAS型ストレージシステム内において高い信頼性で動作しない(あるいは、まったく動作しない)1つの理由は、ディスク制御メッセージのフォーマットが、一般的には、特定のディスク制御プロトコルのために明確に定義されていても、異なるストレージ装置は、典型的には、ディスク制御プロトコルを異なる形で実施することである。このことは、同じベンダーからの異なるストレージ装置の場合にさえも当てはまることがある(例えば、特定のベンダーからのFCストレージ装置は、そのベンダーからのATAストレージ装置と異なる形でディスク制御プロトコルを実施するかもしれない)。これらの異なる実施方法は、例えば、どのようにして、ストレージ装置が、識別され、設定され、そして、管理されるか、どのようにして、ストレージ装置が、誤り条件または例外条件、タイプ、および、ストレージ装置によってNASサーバーに送信されたメッセージの内容を処理するか、および、どのようにして、ストレージ装置が、NASサーバーによって送信されたメッセージに応答するかに影響を与えるかもしれない。例えば、一方のストレージ装置は、それ自身を識別するための一連番号を使用するかもしれないが、他方のストレージ装置は、それ自身を識別するために、ワールドワイド名を使用するかもしれない。また、ある種のディスク制御メッセージは、ベンダー固有情報を備えることができ、ある種の実施方法は、「標準的な」ディスク制御メッセージを非標準的な形で使用するかもしれない。さらにまた、様々なストレージ装置は、誤り条件または例外条件をまったく異なる形で処理する傾向を有する。
異なるストレージ装置タイプを有するストレージ装置がNAS型ストレージシステム内において適切に動作しないもう1つの理由は、異なるストレージ装置タイプを有するストレージ装置は、典型的には、異なる動作パラメータを有することである。例えば、異なるストレージ装置タイプを有するストレージ装置は、いくつかの例を挙げれば、キューイングすることのできるコマンドの数(例えば、高性能のFCストレージ装置は、典型的には、例えば安価なATA装置よりも多くのコマンドをキューイングすることができる)、「ストライプ」サイズ(データを複数のディスクに同時に書き込むための複数ディスクストレージシステムの良く知られている概念)、好ましい書き込みサイズ(すなわち、それぞれの書き込み動作においてストレージ装置に書き込まれるべきデータブロックの好ましい数)、および、フロー制御を処理する方法などが異なることがある。
したがって、複数のストレージ装置タイプを有するストレージ装置をNAS型ストレージシステムに統合するためには、NASサーバーが、異なるストレージ装置、具体的には、異なるストレージ装置タイプを有するストレージ装置と異なる形で対話することが必要である。したがって、NASサーバーは、典型的には、データを複数のストレージ装置に記憶するためのストレージロジックを含む。ストレージロジックは、ストレージ装置を管理するディスク制御ロジックを含む。ディスク制御ロジックは、それぞれの異なるストレージ装置およびストレージ装置タイプがどのように管理されるかを定義する管理ルールを含む。管理ルールは、一般的には、どのようにして、NASサーバーが、特定のストレージ装置を識別し、設定し、対話するかなどを定める。本発明の一実施形態においては、ディスク制御ロジックは、ハードウェアコンポーネントおよびソフトウェアコンポーネントの両方によって実施される。ハードウェアコンポーネントは、専用ストレージ装置と通信するためのファイバーチャンネル通信プロトコルを実施し、さらに、それぞれのストレージ装置とディスク制御プロトコルメッセージを交換するためのディスク制御プロトコルを実施し、それと同時に、ソフトウェアコンポーネントは、それぞれの専用ストレージ装置を、その専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールを用いて、管理する。実際には、ハードウェアコンポーネントは、キューイングすることのできるコマンドの数、「ストライプ」のサイズ、および、好ましい書き込みサイズのような、ソフトウェアコンポーネントによってプログラムされた設定可能なパラメータを介して、データ処理に関する様々な管理ルールを適用する。ソフトウェアコンポーネントは、ストレージ装置識別情報、設定、および、誤りルールおよび例外ルールを含む管理ルールのような、その他の管理ルール自身を適用する。
図9は、本発明の特定の実施形態によるNASサーバーのアーキテクチャーを示す概略ブロック図である。アーキテクチャーは、図示されるように論理的に大まかに描写された3つの大きなブロック、すなわち、ネットワークサブシステム930、プロトコル/ファイルサブシステム920、および、ストレージサブシステム900に分割される。データパスにおける重要なコンポーネントのすべては、主に、ハードウェアによって(典型的には、フィールドプログラマブルゲートアレイによって)実施される。上述したストレージロジックは、実質的に、ストレージサブシステム900に存在する。ネットワークサブシステム930およびプロトコル/ファイルサブシステム920が、便宜上、示されるが、本質的には、本発明の範囲には含まれず、したがって、さらには説明しない。
とりわけ、ストレージサブシステム900は、プロトコル/ファイルサブシステムからストレージサブシステムへ移動するデータのための第1のデータパイプライン902およびストレージサブシステムからプロトコル/ファイルサブシステムへ移動するデータのための第2のデータパイプライン906を含む。第1のデータパイプライン902と第2のデータパイプライン906との間に配置されたNDMPハードウェアブロック904は、異なるストレージ装置タイプを有するストレージ装置間でイントラサーバーデータ転送をとりわけ実行するためのネットワークデータ管理プロトコル(NDMP)を実施する。ディスク制御ロジックは、FCブロック910および912およびCPU914によって表現され、FCブロック910および912は、ハードウェアコンポーネント(典型的には、単一FPGAによって実施される)であり、CPU914は、ソフトウェアコンポーネントを表現する。FCブロック910および912を包含するハードウェアコンポーネントは、とりわけ、ファイバーチャンネル(ファイバー)ネットワークインタフェース916を介して様々なストレージ装置と通信するためのファイバーチャンネル通信プロトコルを実施し、ストレージ装置とディスク制御プロトコルメッセージを交換するためのディスク制御プロトコルを実施し、そして、セクターキャッシュ908を管理する。ソフトウェアコンポーネントは、異なるストレージ装置およびストレージ装置タイプごとに一組の管理ルールをメモリー915に保持する。ソフトウェアコンポーネントは、とりわけ、様々なデータ処理ルール(キューイングすることのできるコマンドの数、「ストライプ」サイズ、および、好ましい書き込みサイズのような)を適用するために、ハードウェアコンポーネントを設定し、かつ、その他のルール自身(ストレージ装置識別情報、設定、および、誤りルールおよび例外ルールを含む管理ルールのような)を適用する。
新しいストレージ装置が、ファイバーチャンネルネットワークに取り付けられたとき、ソフトウェアコンポーネントは、一般的には、新しい装置が存在するハードウェアコンポーネントから割り込みまたはその他の通知を受信する。ソフトウェアコンポーネントは、様々なストレージ装置およびストレージ装置タイプのための管理ルールを用いて、新しいストレージ装置を識別することを試みる。ソフトウェアコンポーネントが、新しいストレージ装置を識別することができたと仮定すれば、ソフトウェアコンポーネントは、新しいストレージ装置を動作させかつ利用するのに必要な何らかのステップを実行する。これは、典型的には、新しいストレージ装置からある種の情報を得ること、新しいストレージ装置を設定すること、および、新しいストレージ装置をサポートするためのハードウェアコンポーネントを設定することをとりわけ必要とする。そして、ソフトウェアコンポーネントは、新しいストレージ装置を実装し、記憶するために、新しいストレージ装置を使用し始めることができる。
一方のストレージ装置から他方のストレージ装置へのイントラサーバーデータ移送を実行するために、データが、ファイバーネットワークインタフェース916を介して一方のストレージ装置から読み込まれ、FCブロック912へ送られ、そして、第2のデータパイプライン906に送られる。NDMPハードウェア904は、第2のデータパイプライン906からデータを受け取り、そのデータを第1のデータパイプライン902に送出する。そして、データは、FCブロック910へ送られ、そして、ファイバーネットワークインタフェース916から他のストレージ装置へ送られる。この動作は、ハードウェアにおいて完全に処理され、データは、LANまたはプロトコル/ファイルサブシステム920にさえも送られることはない。
図10は、本発明の実施形態による異なるストレージ装置タイプを有するストレージ装置をサポートするための典型的なディスク制御ロジックを示すロジックフローチャートである。ブロック1002において、ディスク制御ロジックは、複数のストレージ装置タイプを有する複数の専用ストレージ装置ごとに一組の管理ルールを保持する。ブロック1004において、新しい専用ストレージ装置が存在することを示す指示を受け取ると、ディスク制御ロジックは、ブロック1006において、新しい専用ストレージ装置を識別するために、管理ルールの組を使用し、そして、ブロック1008において、専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールに基づいて新しい専用ストレージ装置を設定してもよい。その後、ブロック1010において、ディスク制御ロジックは、ディスク制御プロトコルメッセージを専用ストレージ装置へ送信してもよく、少なくともいくつかのディスク制御プロトコルメッセージは、適切な一組の管理ルールに基づいて異なる専用ストレージ装置ごとに異なる形でフォーマットされたものである。さらに、ブロック1012において、ディスク制御ロジックは、適切な一組の管理ルールに基づいてそれぞれの専用ストレージ装置にキューイングすることのできるディスク制御プロトコルメッセージの数を決定してもよい。また、ブロック1014において、ディスク制御ロジックは、適切な一組の管理ルールに基づいて、専用ストレージ装置のための好ましいストライプサイズを用いて、それぞれの専用ストレージ装置にデータを書き込んでもよい。ブロック1016において、ディスク制御ロジックは、異なる専用ストレージ装置から受信されたディスク制御プロトコルメッセージを適切な一組の管理ルールに基づいて処理してもよい。ブロック1018において、ディスク制御ロジックは、異なる専用ストレージ装置の誤りおよび例外を適切な一組の管理ルールに基づいて処理してもよい。ディスク制御ロジックは、特定のストレージ装置、ストレージ装置タイプ、または、ストレージアプリケーションに必要であれば、その他の管理目的のために、様々な管理ルールを使用してもよい。
また、上述したロジックフローチャートは、ここで、本発明の様々な側面を説明するのに使用されたことに注意すべきであり、本発明を特定のロジックフローチャートまたはロジック実施方法に限定するものであると解釈すべきではない。説明されたロジックは、全体的な結果を変化させることなく、さもなければ、本発明の真の範囲から逸脱することなく、様々なロジックブロック(例えば、プログラム、モジュール、機能、または、サブルーチン)に分割されてもよい。多くの場合、ロジック構成要素は、全体的な結果を変化させることなく、さもなければ、本発明の真の範囲から逸脱することなく、追加され、変更され、省略され、異なる順序で実行され、あるいは、異なるロジック構成体(例えば、ロジックゲート、ループプリミティブ、条件付きロジック、および、その他のロジック構成体)を用いて実施されてもよい。
本発明は、多くの異なる形態で実施されてもよく、プロセッサー(例えば、マイクロプロセッサー、マイクロコントローラー、ディジタル信号プロセッサー、または、汎用コンピュータ)とともに使用するためのコンピュータプログラムロジック、プログラマブルロジックデバイス(例えば、フィールドプログラマブルゲートアレイ(FPGA)またはその他のPLD)とともに使用するためのプログラマブルロジック、個別部品、集積回路(例えば、特定用途向け集積回路(ASIC))、または、それらの組み合わせを含む何らかのその他の手段を含むが、決してそれらに限定されるものではない。
上述した機能のすべてまたは一部を実施するコンピュータプログラムロジックは、様々な形態で実施されてもよく、ソースコードの形態、コンピュータが実行可能な形態、および、様々な中間の形態(例えば、アセンブラ、コンパイラ、リンカー、または、ロケーターによって生成された形態)を含むが、決してそれらに限定されるものではない。ソースコードは、様々なオペレーティングシステムまたはオペレーティング環境とともに使用するための様々なプログラミング言語(例えば、オブジェクトコード、アセンブリ言語、または、Fortran、C、C++、JAVA(登録商標)、または、HTMLのような高級言語)のいずれかによって実施された一連のコンピュータプログラム命令を含んでもよい。ソースコードは、様々なデータ構造および通信メッセージを定義し、そして、それらを使用してもよい。ソースコードは、コンピュータが実行可能な形態であってもよく(例えば、インタープリターを介して)、あるいは、ソースコードは、コンピュータが実行可能な形態に変換されてもよい(例えば、トランスレータ、アセンブラ、または、コンパイラを介して)。
コンピュータプログラムは、半導体メモリーデバイス(例えば、RAM、ROM、PROM、EEPROM、または、フラッシュプログラマブルRAM)、磁気メモリーデバイス(例えば、ディスケットまたは固定ディスク)、光メモリーデバイス(例えば、CD−ROM)、PCカード(例えば、PCMCIAカード)、または、その他のメモリーデバイスのような有形のストレージ媒体として、永久的にかまたは一時的に、どのような形態(例えば、ソースコードの形態、コンピュータが実行可能な形態、または、中間の形態)ででも記録されてよい。コンピュータプログラムは、アナログ技術、ディジタル技術、光技術、無線技術(例えば、Bluetooth)、ネットワーク技術、および、インターネットワーク技術を含むが決してそれらに限定されない様々な通信技術のいずれかを用いて、コンピュータに送信可能な信号として、どのような形態ででも記録されてよい。コンピュータプログラムは、印刷文書または電子文書を添付された着脱可能なストレージ媒体(収縮包装された市販のソフトウェア)のような何らかの形態で分配されてもよく、コンピュータシステムによって予めロードされてもよく(例えば、システムROMまたは固定ディスク上に)、あるいは、通信システム(例えば、インターネットまたはワールドワイドウェブ)を介してサーバーまたは電子掲示板から分配されてもよい。
上述した機能のすべてまたは一部を実施するハードウェアロジック(プログラマブルロジックデバイスとともに使用するためのプログラマブルロジックを含む)は、伝統的な人手による方法を用いて設計されてもよく、あるいは、コンピュータ援用設計(CAD)、ハードウェア記述言語(例えば、VHDLまたはAHDL)、または、PLDプログラミング言語(例えば、PALASM、ABEL、または、CUPL)のような様々なツールを用いて、設計され、入手され、シミュレーションされ、あるいは、電子文書化されてもよい。
プログラマブルロジックは、半導体メモリーデバイス(例えば、RAM、ROM、PROM、EEPROM、または、フラッシュプログラマブルRAM)、磁気メモリーデバイス(例えば、ディスケットまたは固定ディスク)、光メモリーデバイス(例えば、CD−ROM)、または、その他のメモリーデバイスのような有形のストレージ媒体に永久的にかまたは一時的に記録されてもよい。プログラマブルロジックは、アナログ技術、ディジタル技術、光技術、無線技術(例えば、Bluetooth)、ネットワーク技術、および、インターネットワーク技術を含むが決してそれらに限定されない様々な通信技術のいずれかを用いて、コンピュータに送信可能な信号として記録されてよい。プログラマブルロジックは、印刷文書または電子文書を添付された着脱可能なストレージ媒体(収縮包装された市販のソフトウェア)として分配されてもよく、コンピュータシステムによって予めロードされてもよく(例えば、システムROMまたは固定ディスク上に)、あるいは、通信システム(例えば、インターネットまたはワールドワイドウェブ)を介してサーバーまたは電子掲示板から分配されてもよい。
本発明は、本発明の真の範囲を逸脱することなく、その他の特定の形態で実施されてもよい。説明された実施形態は、すべての点において、ただ単に説明のためのものであり、限定するものではないと考えるべきである。

Claims (20)

  1. 通信ネットワークを介してストレージサービスを提供するネットワーク接続ストレージサーバーを備えるネットワーク接続ストレージシステムであって、
    該ストレージサーバーは、ディスク制御プロトコルを用いて複数の専用ストレージ装置を管理するように構成され、該複数の専用ストレージ装置は、複数のストレージ装置タイプを有し、異なった特徴を有する複数のストレージ階層を提供し、該ストレージサーバーは、少なくとも1つの所定のストレージ基準に基づいてストレージ階層間でデータを移動させるように構成され、該移動させることは、該ストレージ階層に関連した専用ストレージ装置にディスク制御プロトコルメッセージを送信することを含み、該ディスク制御プロトコルメッセージのうちの少なくとも一部は、それぞれの専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールに従って、異なった専用ストレージ装置のために異なった態様でフォーマットされる、システム。
  2. 前記複数のストレージ階層は、高価なストレージ装置を有する高い階層と、高価でないストレージ装置を有する低い階層とを含む、請求項1に記載のシステム。
  3. 前記複数のストレージ階層は、高い性能のストレージ装置を有する高い階層と、低い性能のストレージ装置を有する低い階層とを含む、請求項1に記載のシステム。
  4. 前記複数のストレージ階層は、RAID(Redundant Array of Independent Disk)ストレージ装置を有する高い階層と、非RAIDストレージ装置を有する低い階層とを含む、請求項1に記載のシステム。
  5. 前記複数のストレージ階層は、ファイバーチャンネルベースのストレージ装置を有する高い階層と、ATA(Advanced Technology Attachment)ベースのストレージ装置を有する低い階層とを含む、請求項1に記載のシステム。
  6. 前記ストレージサーバーは、データ移動ポリシーに基づいてデータを移動させるように構成される、請求項1に記載のシステム。
  7. 前記データ移動ポリシーは、
    前記データの使用の頻度と、
    該データの経過時間と、
    該データにアクセスするための性能要件と
    のうちの少なくとも1つに基づく、請求項6に記載のシステム。
  8. 前記ストレージサーバーは、データをアーカイブするために高い階層から低い階層へとデータを移動させるように構成される、請求項1に記載のシステム。
  9. 前記ストレージサーバーは、アーカイブされたデータを回復するために低い階層から高い階層へとデータを移動させるように構成される、請求項1に記載のシステム。
  10. 前記ストレージサーバーは、データスナップショットをとり、該データスナップショップからの変化を高い階層から低い階層へと移動させるように構成される、請求項1に記載のシステム。
  11. ネットワーク接続システム内のストレージを管理する方法であって、
    該方法は、
    ディスク制御プロトコルを用いて複数の専用ストレージ装置を管理することであって、該複数の専用ストレージ装置は、複数のストレージ装置タイプを有し、異なった特徴を有する複数のストレージ階層を提供する、ことと、
    少なくとも1つの所定のストレージ基準に基づいてストレージ階層間でデータを移動させることであって、該移動させることは、該ストレージ階層に関連した専用ストレージ装置にディスク制御プロトコルメッセージを送信することを含み、該ディスク制御プロトコルメッセージのうちの少なくとも一部は、それぞれの専用ストレージ装置およびストレージ装置タイプのための一組の管理ルールに従って、異なった専用ストレージ装置のために異なった態様でフォーマットされる、ことと
    を含む、方法。
  12. 前記複数のストレージ階層は、高価なストレージ装置を有する高い階層と、高価でないストレージ装置を有する低い階層とを含む、請求項11に記載の方法。
  13. 前記複数のストレージ階層は、高い性能のストレージ装置を有する高い階層と、低い性能のストレージ装置を有する低い階層とを含む、請求項11に記載の方法。
  14. 前記複数のストレージ階層は、RAID(Redundant Array of Independent Disk)ストレージ装置を有する高い階層と、非RAIDストレージ装置を有する低い階層とを含む、請求項11に記載の方法。
  15. 前記複数のストレージ階層は、ファイバーチャンネルベースのストレージ装置を有する高い階層と、ATA(Advanced Technology Attachment)ベースのストレージ装置を有する低い階層とを含む、請求項11に記載の方法。
  16. データ移動ポリシーに基づいてデータが移動させられる、請求項11に記載の方法。
  17. 前記データ移動ポリシーは、
    前記データの使用の頻度と、
    該データの経過時間と、
    該データにアクセスするための性能要件と
    のうちの少なくとも1つに基づく、請求項16に記載の方法。
  18. データをアーカイブするためにデータは高い階層から低い階層へと移動させられる、請求項11に記載の方法。
  19. アーカイブされたデータを回復するためにデータは低い階層から高い階層へと移動させられる、請求項11に記載の方法。
  20. 前記ストレージ階層間でデータを移動させることは、データスナップショットをとることと、該データスナップショップからの変化を高い階層から低い階層へと移動させることとを含む、請求項11に記載の方法。
JP2010013537A 2003-04-04 2010-01-25 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法 Expired - Lifetime JP5745770B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US10/407,145 US7237021B2 (en) 2003-04-04 2003-04-04 Network-attached storage system, device, and method supporting multiple storage device types
US10/407,145 2003-04-04

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
JP2006508612A Division JP5014784B2 (ja) 2003-04-04 2004-01-20 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法

Related Child Applications (1)

Application Number Title Priority Date Filing Date
JP2013119365A Division JP5922061B2 (ja) 2003-04-04 2013-06-06 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法

Publications (2)

Publication Number Publication Date
JP2010146586A true JP2010146586A (ja) 2010-07-01
JP5745770B2 JP5745770B2 (ja) 2015-07-08

Family

ID=33097489

Family Applications (4)

Application Number Title Priority Date Filing Date
JP2006508612A Expired - Lifetime JP5014784B2 (ja) 2003-04-04 2004-01-20 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法
JP2010013537A Expired - Lifetime JP5745770B2 (ja) 2003-04-04 2010-01-25 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法
JP2010178907A Pending JP2011023016A (ja) 2003-04-04 2010-08-09 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法
JP2013119365A Expired - Lifetime JP5922061B2 (ja) 2003-04-04 2013-06-06 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
JP2006508612A Expired - Lifetime JP5014784B2 (ja) 2003-04-04 2004-01-20 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法

Family Applications After (2)

Application Number Title Priority Date Filing Date
JP2010178907A Pending JP2011023016A (ja) 2003-04-04 2010-08-09 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法
JP2013119365A Expired - Lifetime JP5922061B2 (ja) 2003-04-04 2013-06-06 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法

Country Status (4)

Country Link
US (2) US7237021B2 (ja)
EP (1) EP1614024A2 (ja)
JP (4) JP5014784B2 (ja)
WO (1) WO2004095287A2 (ja)

Families Citing this family (118)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6671773B2 (en) * 2000-12-07 2003-12-30 Spinnaker Networks, Llc Method and system for responding to file system requests
US7346135B1 (en) 2002-02-13 2008-03-18 Marvell International, Ltd. Compensation for residual frequency offset, phase noise and sampling phase offset in wireless networks
JP3966459B2 (ja) 2002-05-23 2007-08-29 株式会社日立製作所 ストレージ機器管理方法、システム、およびプログラム
WO2004025476A1 (en) * 2002-09-16 2004-03-25 Tigi Corporation Storage system architectures and multiple caching arrangements
US7263153B2 (en) 2002-10-09 2007-08-28 Marvell International, Ltd. Clock offset compensator
US7319705B1 (en) 2002-10-22 2008-01-15 Marvell International Ltd. Programmable pre-emphasis circuit for serial ATA
US9100218B2 (en) 2002-11-18 2015-08-04 Aol Inc. Enhanced buddy list interface
US7246192B1 (en) 2003-01-10 2007-07-17 Marvell International Ltd. Serial/parallel ATA controller and converter
US8289984B2 (en) 2003-01-13 2012-10-16 Emlilex Design & Manufacturing Corporation Allocation-unit-based virtual formatting methods and devices employing allocation-unit-based virtual formatting methods
JP4651913B2 (ja) 2003-02-17 2011-03-16 株式会社日立製作所 記憶装置システム
JP4322031B2 (ja) 2003-03-27 2009-08-26 株式会社日立製作所 記憶装置
JP4060235B2 (ja) 2003-05-22 2008-03-12 株式会社日立製作所 ディスクアレイ装置及びディスクアレイ装置の制御方法
JP2004348464A (ja) 2003-05-22 2004-12-09 Hitachi Ltd ストレージ装置、及び通信信号の整形回路
US8930583B1 (en) 2003-09-18 2015-01-06 Marvell Israel (M.I.S.L) Ltd. Method and apparatus for controlling data transfer in a serial-ATA system
US7058749B2 (en) * 2003-11-13 2006-06-06 Dell Products L.P. System and method for communications in serial attached SCSI storage network
JP4480386B2 (ja) * 2003-11-28 2010-06-16 株式会社日立製作所 ディスクアレイ装置及びディスクアレイ装置のデータ中継方法
JP4156499B2 (ja) 2003-11-28 2008-09-24 株式会社日立製作所 ディスクアレイ装置
US7302520B2 (en) * 2003-12-02 2007-11-27 Spinnaker Networks, Llc Method and apparatus for data storage using striping
JP4497918B2 (ja) * 2003-12-25 2010-07-07 株式会社日立製作所 ストレージシステム
JP4634049B2 (ja) 2004-02-04 2011-02-16 株式会社日立製作所 ディスクアレイ装置における異常通知制御
CA2557641A1 (en) * 2004-02-27 2005-09-15 Tigi Corporation System and method for data manipulation
US20050278382A1 (en) * 2004-05-28 2005-12-15 Network Appliance, Inc. Method and apparatus for recovery of a current read-write unit of a file system
US7979656B2 (en) 2004-06-01 2011-07-12 Inmage Systems, Inc. Minimizing configuration changes in a fabric-based data protection solution
US9209989B2 (en) * 2004-06-01 2015-12-08 Inmage Systems, Inc. Causation of a data read operation against a first storage system by a server associated with a second storage system according to a host generated instruction
US8868858B2 (en) * 2006-05-19 2014-10-21 Inmage Systems, Inc. Method and apparatus of continuous data backup and access using virtual machines
US7698401B2 (en) * 2004-06-01 2010-04-13 Inmage Systems, Inc Secondary data storage and recovery system
US8224786B2 (en) * 2004-06-01 2012-07-17 Inmage Systems, Inc. Acquisition and write validation of data of a networked host node to perform secondary storage
US7676502B2 (en) * 2006-05-22 2010-03-09 Inmage Systems, Inc. Recovery point data view shift through a direction-agnostic roll algorithm
US8949395B2 (en) 2004-06-01 2015-02-03 Inmage Systems, Inc. Systems and methods of event driven recovery management
US8055745B2 (en) * 2004-06-01 2011-11-08 Inmage Systems, Inc. Methods and apparatus for accessing data from a primary data storage system for secondary storage
US7958292B2 (en) 2004-06-23 2011-06-07 Marvell World Trade Ltd. Disk drive system on chip with integrated buffer memory and support for host memory access
JP4504762B2 (ja) * 2004-08-19 2010-07-14 株式会社日立製作所 ストレージネットワークの移行方法、管理装置、管理プログラムおよびストレージネットワークシステム
US7096338B2 (en) 2004-08-30 2006-08-22 Hitachi, Ltd. Storage system and data relocation control device
US7395396B2 (en) * 2004-08-30 2008-07-01 Hitachi, Ltd. Storage system and data relocation control device
US7433901B2 (en) * 2004-09-17 2008-10-07 International Business Machines Corporation Apparatus, system, and method for using multiple criteria to determine collocation granularity for a data source
US7062624B2 (en) * 2004-09-29 2006-06-13 Hitachi, Ltd. Method for managing volume groups considering storage tiers
US7392333B2 (en) * 2004-11-30 2008-06-24 Xyratex Technology Limited Fibre channel environment supporting serial ATA devices
US8180855B2 (en) 2005-01-27 2012-05-15 Netapp, Inc. Coordinated shared storage architecture
US8019842B1 (en) 2005-01-27 2011-09-13 Netapp, Inc. System and method for distributing enclosure services data to coordinate shared storage
JP4585325B2 (ja) * 2005-02-08 2010-11-24 株式会社日立製作所 ディスクアレイ装置
US7870317B2 (en) * 2005-04-29 2011-01-11 Network Appliance, Inc. Storage processor for handling disparate requests to transmit in a storage appliance
JP2008541247A (ja) * 2005-05-13 2008-11-20 クリプトミル テクノロジーズ リミティド モバイルストレージ手段の暗号化制御
CN101366034A (zh) * 2005-05-13 2009-02-11 克赖普托米尔技术有限公司 内容加密防火墙系统
CN100426248C (zh) * 2005-06-03 2008-10-15 鸿富锦精密工业(深圳)有限公司 网络附加存储设备测试系统及方法
US7472210B2 (en) * 2005-06-27 2008-12-30 Emc Corporation Multiplexing and bypass circuit for interfacing either single or dual ported drives to multiple storage processors
US7844701B2 (en) * 2005-08-01 2010-11-30 Network Appliance, Inc. Rule-based performance analysis of storage appliances
US8601225B2 (en) * 2005-09-16 2013-12-03 Inmage Systems, Inc. Time ordered view of backup data on behalf of a host
US8683144B2 (en) * 2005-09-16 2014-03-25 Inmage Systems, Inc. Causation of a data read against a first storage system to optionally store a data write to preserve the version to allow viewing and recovery
EP1934838A4 (en) * 2005-09-30 2010-07-07 Neopath Networks Inc ACCESSING ACCESS FREQUENCY AND FILE ATTRIBUTES TO SUPPORT DIRECTORY BASED STORAGE MANAGEMENT
US7467169B2 (en) * 2005-10-31 2008-12-16 Network Appliance, Inc. Circular and bi-directional mirroring of flexible volumes
JP4775846B2 (ja) * 2006-03-20 2011-09-21 株式会社日立製作所 物理リンクの割当てを制御するコンピュータシステム及び方法
US7716420B2 (en) * 2006-04-28 2010-05-11 Network Appliance, Inc. Methods of converting traditional volumes into flexible volumes
US7721146B2 (en) * 2006-05-04 2010-05-18 Dell Products L.P. Method and system for bad block management in RAID arrays
US8554727B2 (en) * 2006-05-19 2013-10-08 Inmage Systems, Inc. Method and system of tiered quiescing
US8527721B2 (en) * 2008-12-26 2013-09-03 Rajeev Atluri Generating a recovery snapshot and creating a virtual view of the recovery snapshot
US8527470B2 (en) 2006-05-22 2013-09-03 Rajeev Atluri Recovery point data view formation with generation of a recovery view and a coalesce policy
US8838528B2 (en) * 2006-05-22 2014-09-16 Inmage Systems, Inc. Coalescing and capturing data between events prior to and after a temporal window
US8539253B2 (en) * 2006-07-18 2013-09-17 Netapp, Inc. System and method for securing information by obscuring contents of a persistent image
US7634507B2 (en) * 2006-08-30 2009-12-15 Inmage Systems, Inc. Ensuring data persistence and consistency in enterprise storage backup systems
US20080104081A1 (en) * 2006-10-30 2008-05-01 Yasuyuki Mimatsu Tiered storage system with single instance function
US7752180B1 (en) 2006-12-12 2010-07-06 Network Appliance, Inc. File system group consistency point
US7734954B2 (en) * 2007-01-03 2010-06-08 International Business Machines Corporation Method, computer program product, and system for providing a multi-tiered snapshot of virtual disks
US7908656B1 (en) 2007-04-23 2011-03-15 Network Appliance, Inc. Customized data generating data storage system filter for data security
US7809868B1 (en) 2007-04-23 2010-10-05 Network Appliance, Inc. System and method for filtering information in a data storage system
US8825970B1 (en) 2007-04-26 2014-09-02 Netapp, Inc. System and method for mounting a storage volume utilizing a block reference list
US7945724B1 (en) 2007-04-26 2011-05-17 Netapp, Inc. Non-volatile solid-state memory based adaptive playlist for storage system initialization operations
US8156241B1 (en) 2007-05-17 2012-04-10 Netapp, Inc. System and method for compressing data transferred over a network for storage purposes
US20090037162A1 (en) * 2007-07-31 2009-02-05 Gaither Blaine D Datacenter workload migration
US9244502B2 (en) * 2007-09-29 2016-01-26 Dell Products L.P. Methods and systems for managing network attached storage (NAS) within a management subsystem
US7856530B1 (en) 2007-10-31 2010-12-21 Network Appliance, Inc. System and method for implementing a dynamic cache for a data storage system
US8166257B1 (en) 2008-01-24 2012-04-24 Network Appliance, Inc. Automated continuous provisioning of a data storage system
US8321867B1 (en) 2008-01-24 2012-11-27 Network Appliance, Inc. Request processing for stateless conformance engine
US20090210461A1 (en) * 2008-02-14 2009-08-20 Mcchord Austin Network Attached Storage System and Method
CN201199445Y (zh) * 2008-04-28 2009-02-25 鸿富锦精密工业(深圳)有限公司 存储服务器
US8028194B2 (en) * 2008-07-25 2011-09-27 Inmage Systems, Inc Sequencing technique to account for a clock error in a backup system
US8359444B2 (en) 2008-09-24 2013-01-22 Hitachi, Ltd. System and method for controlling automated page-based tier management in storage systems
US8117235B1 (en) * 2008-09-29 2012-02-14 Emc Corporation Techniques for binding resources for use by a consumer tier
TWI380642B (en) * 2008-10-01 2012-12-21 Network bridging apparatus for storage device and data stream transmitting method thereof
US8176012B1 (en) 2008-10-06 2012-05-08 Netapp, Inc. Read-only mirroring for load sharing
US8078622B2 (en) * 2008-10-30 2011-12-13 Network Appliance, Inc. Remote volume access and migration via a clustered server namespace
US8069227B2 (en) * 2008-12-26 2011-11-29 Inmage Systems, Inc. Configuring hosts of a secondary data storage and recovery system
WO2010138628A1 (en) * 2009-05-28 2010-12-02 Marvell World Trade Ltd. Metadata management for virtual volumes
US8880835B2 (en) * 2009-07-07 2014-11-04 International Business Machines Corporation Adjusting location of tiered storage residence based on usage patterns
EP2306292A1 (en) * 2009-09-30 2011-04-06 Alcatel Lucent Data storage system and method of operating a data storage system
JP5532980B2 (ja) 2010-02-01 2014-06-25 富士通株式会社 スイッチ装置、スイッチ制御方法、及びストレージシステム
US8230192B2 (en) * 2010-02-05 2012-07-24 Lsi Corporation System and method for QoS-based storage tiering and migration technique
US8447916B2 (en) * 2010-02-17 2013-05-21 Microsoft Corporation Interfaces that facilitate solid state storage configuration
US8793290B1 (en) 2010-02-24 2014-07-29 Toshiba Corporation Metadata management for pools of storage disks
US8843459B1 (en) * 2010-03-09 2014-09-23 Hitachi Data Systems Engineering UK Limited Multi-tiered filesystem
US8555018B1 (en) * 2010-03-11 2013-10-08 Amazon Technologies, Inc. Techniques for storing data
US20110231670A1 (en) * 2010-03-16 2011-09-22 Shevchenko Oleksiy Yu Secure access device for cloud computing
JP5533252B2 (ja) 2010-05-21 2014-06-25 富士通株式会社 ディスクアレイ装置及びディスクアレイ装置の制御方法
US8918439B2 (en) 2010-06-17 2014-12-23 International Business Machines Corporation Data lifecycle management within a cloud computing environment
CN102375955A (zh) * 2010-08-17 2012-03-14 伊姆西公司 网络文件系统联合命名空间内文件加锁的系统与方法
US8345489B2 (en) 2010-09-02 2013-01-01 International Business Machines Corporation Caching scheme synergy for extent migration between tiers of a storage system
US9129138B1 (en) * 2010-10-29 2015-09-08 Western Digital Technologies, Inc. Methods and systems for a portable data locker
US10108500B2 (en) 2010-11-30 2018-10-23 Red Hat, Inc. Replicating a group of data objects within a storage network
US9311374B2 (en) * 2010-11-30 2016-04-12 Red Hat, Inc. Replicating data objects within a storage network based on resource attributes
US9116914B1 (en) * 2011-04-18 2015-08-25 American Megatrends, Inc. Data migration between multiple tiers in a storage system using policy based ILM for QOS
US8892807B2 (en) * 2011-04-18 2014-11-18 International Business Machines Corporation Emulating a skip read command
US8838927B2 (en) 2011-05-27 2014-09-16 International Business Machines Corporation Systems, methods, and physical computer storage media to optimize data placement in multi-tiered storage systems
JP5652333B2 (ja) 2011-05-31 2015-01-14 富士通株式会社 記憶装置、ストレージシステム及び記憶装置制御方法
US10216651B2 (en) 2011-11-07 2019-02-26 Nexgen Storage, Inc. Primary data storage system with data tiering
US9703500B2 (en) 2012-04-25 2017-07-11 International Business Machines Corporation Reducing power consumption by migration of data within a tiered storage system
CN103076993A (zh) * 2012-12-28 2013-05-01 北京思特奇信息技术股份有限公司 一种密集型系统中的存储系统及方法
US9047239B2 (en) 2013-01-02 2015-06-02 International Business Machines Corporation Determining weight values for storage devices in a storage tier to use to select one of the storage devices to use as a target storage to which data from a source storage is migrated
US20140229695A1 (en) * 2013-02-13 2014-08-14 Dell Products L.P. Systems and methods for backup in scale-out storage clusters
US20140281301A1 (en) * 2013-03-15 2014-09-18 Silicon Graphics International Corp. Elastic hierarchical data storage backend
US9659019B1 (en) * 2013-06-27 2017-05-23 EMC IP Holding Company LLC Burst buffer appliance with storage tiering control functionality based on user specification
US9921747B2 (en) * 2014-01-31 2018-03-20 Hewlett Packard Enterprise Development Lp Unifying memory controller
US9558078B2 (en) 2014-10-28 2017-01-31 Microsoft Technology Licensing, Llc Point in time database restore from storage snapshots
US11625181B1 (en) 2015-08-24 2023-04-11 Pure Storage, Inc. Data tiering using snapshots
US10235104B1 (en) * 2015-09-30 2019-03-19 EMC IP Holding Company LLC IO request system and method
US10067711B2 (en) 2015-11-01 2018-09-04 International Business Machines Corporation Data transfer between data storage libraries
US10069896B2 (en) 2015-11-01 2018-09-04 International Business Machines Corporation Data transfer via a data storage drive
US10303362B2 (en) * 2017-02-15 2019-05-28 Netapp, Inc. Methods for reducing initialization duration and performance impact during configuration of storage drives
US11947799B1 (en) 2019-10-11 2024-04-02 Amzetta Technologies, Llc Systems and methods for using the TRIM command with solid state devices
CN113489639B (zh) * 2021-06-16 2022-12-02 杭州深渡科技有限公司 一种网关多接口的数据通信方法和系统

Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05307532A (ja) * 1992-03-06 1993-11-19 Hitachi Ltd ファイル最適配置方法
JPH07123129A (ja) * 1993-10-28 1995-05-12 Hitachi Ltd 通信パラメータ管理システム
JPH0944381A (ja) * 1995-07-31 1997-02-14 Toshiba Corp データ格納方法およびデータ格納装置
JPH09214935A (ja) * 1996-02-02 1997-08-15 Mitsubishi Electric Corp 映像情報提供システム
JPH09259037A (ja) * 1996-03-21 1997-10-03 Toshiba Corp 情報記憶装置
JPH11231924A (ja) * 1998-02-10 1999-08-27 Yaskawa Electric Corp 異種コントローラの指令生成・監視装置
JP2000200156A (ja) * 1999-01-07 2000-07-18 Hitachi Ltd ディスクアレイ制御装置
JP2000339098A (ja) * 1999-03-25 2000-12-08 Dell Usa Lp ストレージドメイン管理システム
JP2001075873A (ja) * 1999-09-07 2001-03-23 Fujitsu Ltd データバックアップ方法、データバックアップシステム及び記録媒体
JP2001101039A (ja) * 1999-10-04 2001-04-13 Kubota Corp 階層ストレージ管理装置
JP2002269023A (ja) * 2001-01-08 2002-09-20 Hewlett Packard Co <Hp> 効率最適化方法およびパフォーマンス最適化システム
JP2002304353A (ja) * 2001-04-05 2002-10-18 Sony Corp 情報提供装置、通信システムおよび通信方法
JP2003023440A (ja) * 2001-07-09 2003-01-24 Denso Corp ゲートウェイ装置、コンピュータ、通信評価システム

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPS61115124A (ja) * 1984-11-09 1986-06-02 Mitsubishi Electric Corp 固定デイスク装置の制御方法
JPH02171913A (ja) * 1988-12-26 1990-07-03 Nec Corp 光ディスク装置制御方式
US5941972A (en) * 1997-12-31 1999-08-24 Crossroads Systems, Inc. Storage router and method for providing virtual local storage
JP4412685B2 (ja) * 1998-09-28 2010-02-10 株式会社日立製作所 記憶制御装置及びこれを用いたデータ格納システムの取り扱い方法
US6425034B1 (en) * 1998-10-30 2002-07-23 Agilent Technologies, Inc. Fibre channel controller having both inbound and outbound control units for simultaneously processing both multiple inbound and outbound sequences
US6446141B1 (en) * 1999-03-25 2002-09-03 Dell Products, L.P. Storage server system including ranking of data source
JP3416557B2 (ja) * 1999-03-26 2003-06-16 三洋電機株式会社 静止画システム
IL150079A0 (en) * 1999-12-07 2002-12-01 Data Foundation Inc Scalable storage architecture
US7509420B2 (en) * 2000-02-18 2009-03-24 Emc Corporation System and method for intelligent, globally distributed network storage
US6834324B1 (en) 2000-04-10 2004-12-21 Storage Technology Corporation System and method for virtual tape volumes
US6862648B2 (en) * 2000-10-30 2005-03-01 Sun Microsystems, Inc. Interface emulation for storage devices
KR100372915B1 (ko) * 2001-01-02 2003-02-19 김한규 네트워크에 직접 부착 가능한 디스크 시스템
TW561358B (en) * 2001-01-11 2003-11-11 Force Corp Z File switch and switched file system
US6618795B2 (en) * 2001-01-24 2003-09-09 Sony Corporation Method and apparatus for concurrent access to a sequential device
US6763409B1 (en) * 2001-01-31 2004-07-13 Hewlett-Packard Development Company, L.P. Switch-on-the-fly GBIC disk channel adapter and disk channel system
US20040233910A1 (en) 2001-02-23 2004-11-25 Wen-Shyen Chen Storage area network using a data communication protocol
US6898634B2 (en) * 2001-03-06 2005-05-24 Hewlett-Packard Development Company, L.P. Apparatus and method for configuring storage capacity on a network for common use
US6496914B1 (en) * 2001-03-22 2002-12-17 Emc Corporation Method and system for administering storage devices on a network
US20020143942A1 (en) * 2001-03-28 2002-10-03 Hua Li Storage area network resource management
US6950833B2 (en) * 2001-06-05 2005-09-27 Silicon Graphics, Inc. Clustered filesystem
US7092977B2 (en) * 2001-08-31 2006-08-15 Arkivio, Inc. Techniques for storing data based upon storage policies
JP4672931B2 (ja) * 2001-09-07 2011-04-20 株式会社日立製作所 遠隔ファイル共用方法、その装置及びシステム
US7062516B2 (en) * 2001-09-18 2006-06-13 Sun Microsystems, Inc. Methods, systems, and articles of manufacture for implementing a runtime logging service storage infrastructure
US20030135609A1 (en) * 2002-01-16 2003-07-17 Sun Microsystems, Inc. Method, system, and program for determining a modification of a system resource configuration
US7225204B2 (en) * 2002-03-19 2007-05-29 Network Appliance, Inc. System and method for asynchronous mirroring of snapshots at a destination using a purgatory directory and inode mapping
US6938123B2 (en) * 2002-07-19 2005-08-30 Storage Technology Corporation System and method for raid striping
US7127479B2 (en) * 2002-09-16 2006-10-24 Veritas Operating Corporation One-pass node-based message processing
US6952794B2 (en) * 2002-10-10 2005-10-04 Ching-Hung Lu Method, system and apparatus for scanning newly added disk drives and automatically updating RAID configuration and rebuilding RAID data
US6804627B1 (en) * 2002-12-31 2004-10-12 Emc Corporation System and method for gathering and analyzing database performance statistics
US7516272B2 (en) * 2003-03-28 2009-04-07 Emc Corporation Midplane-independent implementations of data storage system enclosures

Patent Citations (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05307532A (ja) * 1992-03-06 1993-11-19 Hitachi Ltd ファイル最適配置方法
JPH07123129A (ja) * 1993-10-28 1995-05-12 Hitachi Ltd 通信パラメータ管理システム
JPH0944381A (ja) * 1995-07-31 1997-02-14 Toshiba Corp データ格納方法およびデータ格納装置
JPH09214935A (ja) * 1996-02-02 1997-08-15 Mitsubishi Electric Corp 映像情報提供システム
JPH09259037A (ja) * 1996-03-21 1997-10-03 Toshiba Corp 情報記憶装置
JPH11231924A (ja) * 1998-02-10 1999-08-27 Yaskawa Electric Corp 異種コントローラの指令生成・監視装置
JP2000200156A (ja) * 1999-01-07 2000-07-18 Hitachi Ltd ディスクアレイ制御装置
JP2000339098A (ja) * 1999-03-25 2000-12-08 Dell Usa Lp ストレージドメイン管理システム
JP2001075873A (ja) * 1999-09-07 2001-03-23 Fujitsu Ltd データバックアップ方法、データバックアップシステム及び記録媒体
JP2001101039A (ja) * 1999-10-04 2001-04-13 Kubota Corp 階層ストレージ管理装置
JP2002269023A (ja) * 2001-01-08 2002-09-20 Hewlett Packard Co <Hp> 効率最適化方法およびパフォーマンス最適化システム
JP2002304353A (ja) * 2001-04-05 2002-10-18 Sony Corp 情報提供装置、通信システムおよび通信方法
JP2003023440A (ja) * 2001-07-09 2003-01-24 Denso Corp ゲートウェイ装置、コンピュータ、通信評価システム

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
CSNA200602332001; HITAC プログラムプロダクト VOS3 データ管理機能/統合ストーレジ管理 DMFISM 解説・ 第8版, 200303, 2-128頁, 株式会社日立製作所 *
JPN6012021474; HITAC プログラムプロダクト VOS3 データ管理機能/統合ストーレジ管理 DMFISM 解説・ 第8版, 200303, 2-128頁, 株式会社日立製作所 *
JPN6013011063; HITAC プログラムプロダクト VOS3 データ管理機能/統合ストーレジ管理 DMFISM 解説・ 第8版, 200303, 1-8,129-201頁, 株式会社日立製作所 *

Also Published As

Publication number Publication date
JP2013225320A (ja) 2013-10-31
JP5922061B2 (ja) 2016-05-24
US20040199515A1 (en) 2004-10-07
JP2011023016A (ja) 2011-02-03
US20070299959A1 (en) 2007-12-27
US7509409B2 (en) 2009-03-24
EP1614024A2 (en) 2006-01-11
WO2004095287A2 (en) 2004-11-04
WO2004095287A3 (en) 2005-06-02
JP5014784B2 (ja) 2012-08-29
JP2006524864A (ja) 2006-11-02
JP5745770B2 (ja) 2015-07-08
US7237021B2 (en) 2007-06-26

Similar Documents

Publication Publication Date Title
JP5922061B2 (ja) 複数のストレージ装置タイプをサポートするネットワーク接続ストレージシステム、装置、および方法
US11228647B2 (en) System and method for sharing SAN storage
US8566517B1 (en) System, method and computer program product for optimization of tape performance using distributed file copies
US8527561B1 (en) System and method for implementing a networked file system utilizing a media library
JP6890675B2 (ja) 複合集合体アーキテクチャー
EP1769329B1 (en) Dynamic loading of virtual volume data in a virtual tape server
US9141542B1 (en) System, method and computer program product for host system LTFS auto-adaptation
US9013823B2 (en) System, method and computer program product for optimization of tape performance
US9760457B2 (en) System, method and computer program product for recovering stub files
US9063657B2 (en) Virtual tape systems using physical tape caching
WO2014059800A1 (zh) 数据交互方法及装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20110112

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20120106

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20120116

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120501

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120727

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120801

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120829

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20120903

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20120928

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20121003

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20121025

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130312

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130607

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130612

A601 Written request for extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A601

Effective date: 20130618

A602 Written permission of extension of time

Free format text: JAPANESE INTERMEDIATE CODE: A602

Effective date: 20130621

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130911

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20131203

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140226

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20140305

A912 Re-examination (zenchi) completed and case transferred to appeal board

Free format text: JAPANESE INTERMEDIATE CODE: A912

Effective date: 20140404

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20150318

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20150507

R150 Certificate of patent or registration of utility model

Ref document number: 5745770

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R360 Written notification for declining of transfer of rights

Free format text: JAPANESE INTERMEDIATE CODE: R360

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313113

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R370 Written measure of declining of transfer procedure

Free format text: JAPANESE INTERMEDIATE CODE: R370

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term