[go: up one dir, main page]

JP7640748B2 - スイッチ間の情報同期方法及び装置 - Google Patents

スイッチ間の情報同期方法及び装置 Download PDF

Info

Publication number
JP7640748B2
JP7640748B2 JP2023569876A JP2023569876A JP7640748B2 JP 7640748 B2 JP7640748 B2 JP 7640748B2 JP 2023569876 A JP2023569876 A JP 2023569876A JP 2023569876 A JP2023569876 A JP 2023569876A JP 7640748 B2 JP7640748 B2 JP 7640748B2
Authority
JP
Japan
Prior art keywords
switch
bgp
route
bgp route
service zone
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2023569876A
Other languages
English (en)
Other versions
JP2024519332A (ja
Inventor
長望 林
夢▲シャオ▼ 陳
昊 李
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
New H3C Technologies Co Ltd
Original Assignee
New H3C Technologies Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by New H3C Technologies Co Ltd filed Critical New H3C Technologies Co Ltd
Publication of JP2024519332A publication Critical patent/JP2024519332A/ja
Application granted granted Critical
Publication of JP7640748B2 publication Critical patent/JP7640748B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • H04L12/02Details
    • H04L12/12Arrangements for remote connection or disconnection of substations or of equipment thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00Data switching networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/02Topology update or discovery
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L45/00Routing or path finding of packets in data switching networks
    • H04L45/02Topology update or discovery
    • H04L45/04Interdomain routing, e.g. hierarchical routing
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L49/00Packet switching elements
    • H04L49/35Switches specially adapted for specific applications
    • H04L49/356Switches specially adapted for specific applications for storage area networks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1095Replication or mirroring of data, e.g. scheduling or transport for data synchronisation between network nodes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/01Protocols
    • H04L67/10Protocols in which an application is distributed across nodes in the network
    • H04L67/1097Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Small-Scale Networks (AREA)

Description

本発明は、ネットワーク通信技術の分野に関し、特に、ストレージ・エリア・ネットワーク(SAN:Storage Area Network)に適用されるスイッチ間の情報同期方法及び装置に関する。
SANにおいて、スイッチは、ネットワークのコアとして、ホスト(Initiator)及び/又はストレージデバイス(Target)などに接続することができる。ここで、スイッチに接続されたホスト及び/又はストレージデバイスなどのデバイスは、アクセスデバイスと呼ばれ、スイッチはアクセススイッチと呼ばれる。
現在、「NVMe over RoCEv2ネットワーク制御最適化技術要件とテスト仕様」には、アクセスデバイスとスイッチの間のインタラクションプロセス及びメッセージパケットが規定されており、スイッチ間で情報を同期させる方法が規定されていない。ここで、NVMeはNon-Volatile Memory express(不揮発性メモリ・ホスト・コントローラ・インタフェース規格)の略で、RoCEv2は、RDMA(Remote Direct Memory Access) over Converged Ethernet version 2の略である。しかし、具体的な実現では、スイッチ間で情報を同期させる必要がある。例えば、スイッチs1が新たにストレージデバイスa1に接続されたとき、スイッチs2に接続されたホストa2は、当該ストレージデバイスa1とデータのやり取りをするために、当該ストレージデバイスa1がオンラインになることを知る必要がある。これに基づいて、ストレージデバイスa1がオンラインになったとき、スイッチs1は、ストレージデバイスa1がオンラインになったという情報をタイムリーにスイッチs2に同期させる必要があり、そうすると、スイッチs2は、この情報をホストa2に転送できる。しかし、現在、ネットワーク制御最適化技術要件とテスト仕様には、スイッチ間の情報同期方法が規定されていない。
本発明の実施例は、SANにおけるスイッチ間の情報同期を実現するために、スイッチ間の情報同期方法及び電子デバイスを提供する。
本発明の実施例は、ストレージ・エリア・ネットワーク(SAN)に適用されるスイッチ間の情報同期方法を提供し、当該方法は、
同期すべき対象データを取得するステップと、
指定されたスイッチとの間で確立されたBGPセッションを介して、前記対象データが付加されているBGPルートを送信して、前記スイッチと同期する必要がある各対象スイッチ間で前記対象データを同期させるステップと、を含む。
本発明の実施例はさらに、電子デバイスを提供し、当該電子デバイスは、プロセッサと、機械可読記憶媒体とを含み、
前記機械可読記憶媒体には前記プロセッサによって実行可能な機械実行可能命令が記憶されており、
前記プロセッサは、上記方法のステップを実施するように機械実行可能命令を実行するために用いられる。
以上の技術案から分かるように、本発明の実施例では、アクセスデバイスのIPサービスゾーン構成情報、及び/又は、アクセスデバイスのデバイス発見情報、及び/又は、スイッチがデフォルトのIPサービスゾーンをサポートするか否かの情報など、SANにおけるスイッチ間で同期すべき対象データを自動的に同期させることにより、SANにおける互いに同期する必要がある全てのスイッチ間で、新たに接続されたアクセスデバイス、新たに追加や変更されたIPサービスゾーン構成情報、デフォルトのIPサービスゾーン機能を有効又は無効にするスイッチなど、互いの変化をタイムリーに感知でき、関連する構成をタイムリーにインテリジェントに調整し、プラグアンドプレイと迅速な障害検知を実現し、最終的に、SANにおけるイーサネットのパケット損失なしと高スループット伝送の実現を支援することができる。
さらに、本発明の実施例では、既存のBGPを拡張して、SANにおけるスイッチをBGPルートの形で同期させることにより、SANへの変更が少なく、ベンダ間の相互運用性と標準化の実現に有利である。
ここで説明される添付図面は、明細書に組み込まれ、本明細書の一部を構成し、本発明に適合する実施例を示し、本明細書と併せて本発明の原理を説明する。
本発明の実施例により提供される方法のフローチャートである。 本発明の実施例により提供されるSANの概略図である。 本発明の実施例により提供される第1のネットワーキングの概略図である。 本発明の実施例により提供される第2のネットワーキングの概略図である。 本発明の実施例により提供される第3のネットワーキングの概略図である。 本発明の実施例により提供される第4のネットワーキングの概略図である。 本発明の実施例により提供される第5のネットワーキングの概略図である。 本発明の実施例により提供される第6のネットワーキングの概略図である。 本発明の実施例により提供されるIPサービスゾーン構成情報の概略図である。 本発明の実施例により提供されるアクセスデバイスのデバイス発見情報の概略図である。 本発明の実施例により提供されるデフォルトのIPサービスゾーン情報の概略図である。 本発明の実施例により提供される実施例のネットワーキングの概略図である。 本発明の実施例により提供される装置の構造図である。 本発明の実施例により提供される電子デバイスの構造図である。
本明細書では、添付図面に示す実施例について詳細に説明する。以下の説明が添付図面に言及している場合、異なる図面における同様の数字は、特に断らない限り、同じ又は類似の要素を指す。以下の実施例に記載される実施形態は、本発明と一致する全ての実施形態を表すものではない。むしろ、それらは、添付の特許請求の範囲に詳述されているように、本発明のいくつかの態様と一致する装置及び方法の例に過ぎない。
本発明において使用される用語は、特定の実施例を説明するためのものであり、本発明を限定することを意図するものではない。本発明の実施例及び添付の特許請求の範囲において使用される単数形の「1つ」、「前記」及び「当該」は、文脈が他の意味を明確に示さない限り、複数形も含むことも意図される。
当業者が本発明の実施例により提供される技術案をよりよく理解し、本発明の実施例の上述の目的、特徴及び利点をより理解しやすくするために、以下、添付図面を合わせて本発明の実施例における技術案をさらに詳細に説明する。
図1は、本発明の実施例により提供される方法のフローチャートである。実施例として、当該方法はSANにおけるスイッチに適用される。オプションで、本方法は、図2に示すSAN内のNVMe over RoCEv2ネットワーク内の任意のスイッチに適用される。ここで、NVMe over RoCEv2ネットワークは、イーサネットTCP/IPプロトコルのUDP層に基づいて実装される。説明を容易にするために、図1に示す方法が適用されるスイッチを、図2に示すスイッチの1つ、すなわちスイッチ201と記される。
図1に示すように、当該方法は、以下のステップを含み得る。
ステップ101において、スイッチ201が同期すべき対象データを取得する。
SANにおいて、同期すべき対象データは、SAN内のアクセスデバイスのIPサービスゾーン構成情報、及び/又は、アクセスデバイスのデバイス発見情報、及び/又は、スイッチ201がデフォルトのIPサービスゾーンをサポートするか否かの情報であってもよい。
例えば、スイッチ201に少なくとも1つの自己定義されたIPサービスゾーンに対応するIPサービスゾーン構成情報が外部から追加された場合、又は、スイッチ201に追加された少なくとも1つの自己定義されたIPサービスゾーンに対応するIPサービスゾーン構成情報が変更された場合、当該新たに追加されたIPサービスゾーン構成情報や変更されたIPサービスゾーン構成情報を、スイッチ210と同期する必要があるSAN内の各対象スイッチ(例えば、図2に示すスイッチ202~スイッチn)に同期させる必要がある。このとき、当該新たに追加されたIPサービスゾーン構成情報や変更されたIPサービスゾーン構成情報等を、上記同期すべき対象データとして決定してもよい。なお、IPサービスゾーン構成情報の具体的な内容については、本実施例は特に限定されず、以下に例を挙げて説明し、ここでは詳細な説明を省略する。
別の例として、本実施例では、スイッチ201がホスト及び/又はストレージデバイスなどのアクセスデバイスに新たに接続されると、新たに接続されたアクセスデバイスは、アクセスメッセージをスイッチ201に送信する。当該アクセスメッセージは、例えば、リンク層発見プロトコル(LLDP:Link Layer Discovery Protocol)パケットであってもよい。スイッチ201は、LLDPパケットなどの上記アクセスメッセージに基づいて、ローカルに新たに接続されたアクセスデバイスのデバイス発見情報を新たに追加する。スイッチ201は、当該デバイス発見情報を、スイッチ210と同期する必要があるSAN内の各対象スイッチに同期させる必要があり、このとき、上記のデバイス発見情報を上記同期すべき対象データとして決定してもよい。なお、デバイス発見情報の具体的な内容については、本実施例は特に限定されず、以下に例を挙げて説明し、ここでは詳細な説明を省略する。
別の例として、本実施例では、スイッチ201がデフォルトのIPサービスゾーン機能を有効又は無効にする場合、スイッチ201は、デフォルトのIPサービスゾーン機能を有効又は無効にする情報を、スイッチ210と同期する必要があるSAN内の各対象スイッチに同期させる必要があり、このとき、スイッチ201がデフォルトのIPサービスゾーン機能を有効又は無効にする旨の情報(すなわち、スイッチ201がデフォルトのIPサービスゾーンをサポートするか否かの情報)を、上記同期すべき対象データとして決定してもよい。なお、スイッチ201がデフォルトのIPサービスゾーンをサポートするか否かの情報の具体的な内容については、本実施例は特に限定されず、以下に例を挙げて説明し、ここでは詳細な説明を省略する。
なお、上記は、同期すべき対象データの決定方法を説明するための一例に過ぎず、上記に示した同期すべき対象データを決定する例は、同時に現れてもよく、同時に現れなくてもよく、本実施例は特に限定しない。また、本実施例において、上記対象データの具体的な内容は一例に過ぎず、限定するためのものではない。本実施例では、SANにおける実際のサービスのニーズに応じて設定してもよい。本実施例では、同期すべき対象データがSANにおけるスイッチ間で同期する必要があるデータであることに着目しただけであり、同期すべき対象データの具体的な形式や内容については特に限定されない。
S102において、スイッチ201が、指定されたスイッチとの間で確立されたBGP(Border Gateway Protocol)セッションを介して、対象データが付加されているBGPルートを送信して、スイッチ201と同期する必要がある各対象スイッチ間で上記対象データを同期させる。
BGPは、上記のIPサービスゾーン構成情報、アクセスデバイスのデバイス発見情報、スイッチ201がデフォルトのIPサービスゾーンをサポートするか否かの情報など、SANにおけるスイッチ間で同期すべきデータをサポートしていない。本実施例では、既存のBGPを拡張することで、拡張されたBGPがSANにおけるスイッチ間で同期すべきデータをサポートする。スイッチ201は、拡張されたBGPに基づいて、対象データが付加されているBGPルート(拡張されたBGPルートとも呼ばれる)を生成してもよい。
その後、ステップ102で説明したように、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信して、スイッチ201と同期する必要がある各対象スイッチ間で上記対象データを同期させる。最終的に、本実施例におけるスイッチ間で同期する必要があるデータは、拡張されたBGPルートを使用して実現される。
ステップ102における指定されたスイッチについては、上記対象スイッチの少なくとも1つであってもよく、上記全ての対象スイッチ以外の非対象スイッチの少なくとも1つであってもよく、本実施例は特に限定されず、以下に例を挙げて説明し、ここでは詳細な説明を省略する。
ステップ102におけるBGPセッションは、内部ボーダーゲートウェイプロトコル(IBGP:Internal Border Gateway Protocol)セッションであってもよく、外部ボーダーゲートウェイプロトコル(EBGP:External Border Gateway Protocol)セッションであってもよい。以下に例を挙げて説明し、ここでは詳細な説明を省略する。
ここまで、図1に示すフローは完了する。
図1に示すフローによって、アクセスデバイスのIPサービスゾーン構成情報、及び/又は、アクセスデバイスのデバイス発見情報、及び/又は、スイッチがデフォルトのIPサービスゾーンをサポートするか否かの情報など、SANにおけるスイッチ間で同期すべき対象データを自動的に同期させることにより、SANにおける互いに同期する必要がある全てのスイッチ間で、新たに接続されたアクセスデバイス、新たに追加や変更されたIPサービスゾーン構成情報、デフォルトのIPサービスゾーン機能を有効又は無効にするスイッチなど、互いの変化をタイムリーに感知でき、関連する構成をタイムリーにインテリジェントに調整し、プラグアンドプレイと迅速な障害検知を実現し、最終的に、SANにおけるイーサネットのパケット損失なしと高スループット伝送の実現を支援することができる。
さらに、本実施例では、既存のBGPを拡張して、SANにおけるスイッチをBGPルートの形で同期させることにより、SANへの変更が少なく、ベンダ間の相互運用性と標準化の実現に有利である。
以下、まずネットワーキングを例として、上記ステップ102、即ち、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信し、スイッチ201と同期する必要がある各対象スイッチ間で上記対象データを同期させることについて説明する。
実施例1:図3は、本発明の実施例により提供される第1のネットワーキングの概略図である。図3に示すネットワーキングは比較的簡単である。図3に示すように、スイッチ201と同期する必要がある各対象スイッチがそれぞれスイッチ202~スイッチ204とすると、スイッチ201~スイッチ204の2つずつの間でIBGPセッションが確立される。
これに基づいて、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、スイッチ201が、スイッチ202~スイッチ204の各スイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することを含み得る。最終的に、スイッチ201と同期する必要があるスイッチ202~スイッチ204間での上記対象データの同期が実現される。
オプションで、本実施例では、任意の2つのスイッチ間でIBGPセッションを確立してBGPルートを送信してもよい。好ましくは、同じBGPルートがSAN内で繰り返し送信されることを避けるために、IBGP特性に従って、スイッチが受信したBGPルートの転送を禁止してもよい。
ここまで、実施例1の説明は完了する。
実施例2:本実施例では、スイッチ201及びスイッチ201と同期する必要がある各対象スイッチのうちの1つをリフレクタとし、残りを当該リフレクタのクライアントとしてもよい。図4は、本発明の実施例により提供される第2のネットワーキングの概略図である。図4に示すように、スイッチ201と同期する必要がある各対象スイッチがそれぞれスイッチ202~スイッチ204とする。本実施例では、スイッチ201~スイッチ204のうちの1つをリフレクタとし、残りのスイッチをクライアントとしてもよい。
本実施例では、リフレクタと各クライアントとの間でIBGPセッションが確立され、クライアント間でIBGPセッションが確立されない。リフレクタは、各クライアントとの間で確立されたIBGPセッションを介して、生成又は受信したBGPルートを各クライアントに転送するが、クライアントは、リフレクタからのBGPルートを受信した後、受信されたBGPルートを転送しない。クライアントは、BGPルートを生成した後、リフレクタとの間で確立されたIBGPセッションを介して、リフレクタにBGPルートを送信し、リフレクタが受信したBGPルートを他のクライアントに転送する。
スイッチ201をリフレクタとし、スイッチ202~スイッチ204をクライアントとする場合、本実施例では、リフレクタであるスイッチ201と各クライアントとの間でIBGPセッションが確立される。クライアントであるスイッチ202~スイッチ204の間ではIBGPセッションが確立されない。これに基づいて、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、リフレクタであるスイッチ201が、各クライアントとの間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートを各クライアントに送信することを含み得る。最終的に、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。ここで、クライアントであるスイッチ202~スイッチ204は、リフレクタであるスイッチ201から送信された上記対象データが付加されているBGPルートを受信した後、同じBGPルートがSAN内で繰り返し送信されることを避けるため、当該受信したBGPルートを転送しない。
さらに、スイッチ202をリフレクタとし(スイッチ203、スイッチ204をリフレクタとするのと類似する)、スイッチ201、スイッチ203~スイッチ204をクライアントとする場合、本実施例では、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、クライアントであるスイッチ201が、リフレクタであるスイッチ202との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートをリフレクタであるスイッチ202に送信することにより、スイッチ202が、上記対象データが付加されているBGPルートを受信した後、スイッチ203との間で確立されたIBGPセッションを介して、当該受信したBGPルートをスイッチ203に転送し、スイッチ204との間で確立されたIBGPセッションを介して、当該受信したBGPルートをスイッチ204に転送することを含み得る。最終的に、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。クライアントであるスイッチ203とスイッチ204は、リフレクタであるスイッチ202から送信された上記対象データが付加されているBGPルートを受信した後、同じBGPルートがSAN内で繰り返し送信されることを避けるため、当該受信したBGPルートを転送しない。
ここまで、実施例2の説明は完了する。
実施例3:本実施例では、スイッチ201及びスイッチ201と同期する必要がある各対象スイッチ以外の1つの非対象スイッチをリフレクタとし、スイッチ201及びスイッチ201と同期する必要がある各対象スイッチを当該リフレクタのクライアントとしてもよい。一例として、ここでの非対象スイッチは、非アクセススイッチ、すなわちホストやストレージデバイスなどのアクセスデバイスに接続されていないスイッチであってもよい。
図5は、本発明の実施例により提供される第3のネットワーキングの概略図である。図5に示すように、スイッチ201と同期する必要がある各対象スイッチがそれぞれスイッチ202~スイッチ204とする。本実施例では、1つの非アクセススイッチ(スイッチ205)をリフレクタとし、スイッチ201~スイッチ204をクライアントとしてもよい。
本実施例では、リフレクタと各クライアントとの間でIBGPセッションが確立され、クライアント間でIBGPセッションが確立されない。リフレクタは、各クライアントとの間で確立されたIBGPセッションを介して、生成又は受信したBGPルートを各クライアントに転送するが、クライアントは、リフレクタからのBGPルートを受信した後、受信されたBGPルートを転送しない。クライアントは、BGPルートを生成した後、リフレクタとの間で確立されたIBGPセッションを介して、リフレクタにBGPルートを送信し、リフレクタが受信したBGPルートを他のクライアントに転送する。
スイッチ205をリフレクタとし、スイッチ201~スイッチ204をクライアントとする場合、本実施例では、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、スイッチ201が、リフレクタであるスイッチ205との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートをリフレクタであるスイッチ205に送信することにより、スイッチ205が、上記対象データが付加されているBGPルートを受信した後、スイッチ202との間で確立されたIBGPセッションを介して、当該受信したBGPルートをスイッチ202に転送し、スイッチ203との間で確立されたIBGPセッションを介して、当該受信したBGPルートをスイッチ203に転送し、スイッチ204との間で確立されたIBGPセッションを介して、当該受信したBGPルートをスイッチ204に転送することを含み得る。最終的に、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。クライアントであるスイッチ202~スイッチ204は、リフレクタであるスイッチ205から送信された上記対象データが付加されているBGPルートを受信した後、同じBGPルートがSAN内で繰り返し送信されることを避けるため、当該受信したBGPルートを転送しない。
ここまで、実施例3の説明は完了する。
実施例4:本実施例では、スイッチ201及びスイッチ201と同期する必要がある各対象スイッチのうちの2つ以上をリフレクタとし、残りを当該リフレクタのクライアントとしてもよい。図6は、本発明の実施例により提供される第4のネットワーキングの概略図である。図6に示すように、スイッチ201と同期する必要がある各対象スイッチがそれぞれスイッチ202~スイッチ204とする。本実施例では、スイッチ201~スイッチ204のスイッチのうちの2つ以上をリフレクタとし、残りのスイッチをクライアントとしてもよい。
本実施例では、リフレクタ間でIBGPセッションが確立され、リフレクタとクライアントとの間でIBGPセッションが確立され、クライアント間でIBGPセッションが確立されない。リフレクタは、各クライアントとの間で確立されたIBGPセッションを介して、生成又は受信したBGPルートを各クライアントに転送するが、クライアントは、リフレクタからのBGPルートを受信した後、受信されたBGPルートを転送しない。クライアントは、BGPルートを生成した後、リフレクタとの間で確立されたIBGPセッションを介して、リフレクタにBGPルートを送信し、リフレクタが受信したBGPルートを他のクライアントに転送する。
スイッチ201、スイッチ204をリフレクタとし、スイッチ202、スイッチ203をクライアントとする場合、本実施例では、スイッチ201とスイッチ204との間でIBGPセッションが確立され、スイッチ201及びスイッチ204のそれぞれと各クライアントとの間でIBGPセッションが確立される。スイッチ202とスイッチ203との間ではIBGPセッションが確立されない。
これに基づいて、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、リフレクタであるスイッチ201が、リフレクタであるスイッチ204との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートをリフレクタであるスイッチ204に送信し、リフレクタであるスイッチ201が、各クライアントとの間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートを各クライアントに送信することを含み得る。最終的に、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。クライアントであるスイッチ202及びスイッチ203は、リフレクタであるスイッチ201から送信された上記対象データが付加されているBGPルートを受信した後、同じBGPルートがSAN内で繰り返し送信されることを避けるため、当該受信したBGPルートを転送しない。
オプションで、本実施例では、リフレクタであるスイッチ204が、上記対象データが付加されているBGPルートを受信した場合、冗長バックアップを実現するために、スイッチ204は、各クライアントとの間で確立されたIBGPセッションを介して、当該対象データが付加されているBGPルートを各クライアントに送信することにより、クライアントであるスイッチ202及びスイッチ203が、異なるBGPセッションを介して、同じBGPルート、すなわち上記対象データが付加されているBGPルートを受信した後、一方のBGPセッションが受信したBGPルートを最適ルートとして決定し、他方のBGPセッションが受信したBGPルートをバックアップして記録してもよい。
その後、リフレクタであるスイッチ201に障害が発生し、クライアントであるスイッチ203とスイッチ201との間のIBGPセッションが切断されたと仮定すると、スイッチ203はスイッチ201から送信された全てのルートを削除するが、このときスイッチ203にはリフレクタであるスイッチ204から送信されたルートと同じルートが記録されているため、スイッチ203は当該記録されているBGPルートを用いて通信を行い、通信の信頼性を向上させることができる。
さらに、スイッチ202及びスイッチ204をリフレクタとし、スイッチ201及びスイッチ203をクライアントとする場合、本実施例では、スイッチ202とスイッチ204との間でIBGPセッションが確立され、スイッチ202及びスイッチ204のそれぞれと各クライアントとの間でIBGPセッションが確立される。スイッチ201とスイッチ203との間ではIBGPセッションが確立されない。これに基づいて、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、ステップ601~ステップ602を含み得る。
ステップ601において、クライアントであるスイッチ201が、リフレクタであるスイッチ202との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートを送信することにより、スイッチ202が、上記対象データが付加されているBGPルートを受信すると、他のクライアントとの間で確立されたIBGPセッションを介して、当該対象データが付加されているBGPルートを他のクライアント、すなわちスイッチ203に送信する。
ステップ602において、クライアントであるスイッチ201が、リフレクタであるスイッチ204との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートを送信することにより、スイッチ204が、上記対象データが付加されているBGPルートを受信すると、他のクライアントとの間で確立されたIBGPセッションを介して、当該対象データが付加されているBGPルートを他のクライアント、すなわちスイッチ203に送信する。
最終的に、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。
なお、上述したように、最終的に、クライアントであるスイッチ203は、異なるBGPセッションを介して、同じBGPルート、すなわち上記対象データが付加されているBGPルートを受信する。クライアントであるスイッチ203が、異なるBGPセッションを介して、同じBGPルート、すなわち上記対象データが付加されているBGPルートを受信した後、一方のBGPセッションが受信したBGPルートを最適ルートとして決定し、他方のBGPセッションが受信したBGPルートをバックアップして記録する。その後、リフレクタであるスイッチ202に障害が発生し、クライアントであるスイッチ203とスイッチ202との間のIBGPセッションが切断されたと仮定すると、スイッチ203はスイッチ202から送信された全てのルートを削除するが、このときスイッチ203にはリフレクタであるスイッチ204から送信されたルートと同じルートが記録されているため、スイッチ203は当該記録されているBGPルートを用いて通信を行い、通信の信頼性を向上させることができる。
本実施例では、クライアントは、リフレクタから送信された上記対象データが付加されているBGPルートを受信した後、同じBGPルートがSAN内で繰り返し送信されることを避けるため、当該受信したBGPルートを転送しない。
ここまで、実施例4の説明は完了する。
実施例5:本実施例では、スイッチ201及びスイッチ201と同期する必要がある各対象スイッチ以外の2つ以上の非対象スイッチをリフレクタとし、スイッチ201及びスイッチ201と同期する必要がある各対象スイッチを当該リフレクタのクライアントとしてもよい。一例として、ここでの非対象スイッチは、非アクセススイッチ、すなわちホストやストレージデバイスなどのアクセスデバイスに接続されていないスイッチであってもよい。
図7は、本発明の実施例により提供される第5のネットワーキングの概略図である。図7に示すように、スイッチ201と同期する必要がある各対象スイッチがそれぞれスイッチ202~スイッチ204とする。本実施例では、2つの非アクセススイッチ(スイッチ205及びスイッチ206)をリフレクタとし、スイッチ201~スイッチ204をクライアントとしてもよい。
本実施例では、リフレクタと各クライアントとの間でIBGPセッションが確立され、リフレクタ間、クライアント間でIBGPセッションが確立されない。リフレクタは、各クライアントとの間で確立されたIBGPセッションを介して、生成又は受信したBGPルートを各クライアントに転送するが、クライアントは、リフレクタからのBGPルートを受信した後、受信されたBGPルートを転送しない。クライアントは、BGPルートを生成した後、リフレクタとの間で確立されたIBGPセッションを介して、リフレクタにBGPルートを送信し、リフレクタが受信したBGPルートを他のクライアントに転送する。
図7に示すスイッチ205及びスイッチ206をリフレクタとし、スイッチ201~スイッチ204をクライアントとする場合、本実施例では、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、ステップ701~ステップ702を含み得る。
ステップ701において、スイッチ201は、リフレクタであるスイッチ205との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートをリフレクタであるスイッチ205に送信することにより、スイッチ205が、上記対象データが付加されているBGPルートを受信した後、スイッチ201以外の各クライアント、すなわちスイッチ202~スイッチ204との間で確立されたIBGPセッションを介して、当該受信したBGPルートを当該各クライアントに転送する。
ステップ702において、スイッチ201は、リフレクタであるスイッチ206との間で確立されたIBGPセッションを介して、対象データが付加されているBGPルートをスイッチ206に送信することにより、スイッチ206が、上記対象データが付加されているBGPルートを受信した後、スイッチ201以外の各クライアント、すなわちスイッチ202~スイッチ204との間で確立されたIBGPセッションを介して、当該受信したBGPルートを当該各クライアントに転送する。
最終的に、上記ステップ701~ステップ702により、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。なお、本実施例では、クライアントであるスイッチ202~スイッチ204は、リフレクタであるスイッチ205又はスイッチ206から送信された上記対象データが付加されているBGPルートを受信した後、同じBGPルートがSAN内で繰り返し送信されることを避けるために、当該受信したBGPルートを転送しない。
また、本実施例では、実施例4と同様に、最終的に、クライアントであるスイッチ202~スイッチ204は、異なるBGPセッションを介して、同じBGPルート、すなわち上記対象データが付加されているBGPルートを受信する。クライアントであるスイッチ202~スイッチ204が、異なるBGPセッションを介して、同じBGPルート、すなわち上記対象データが付加されているBGPルートを受信した後、一方のBGPセッションが受信したBGPルートを最適ルートとして決定し、他方のBGPセッションが受信したBGPルートをバックアップして記録することにより、冗長バックアップを実現し、信頼性を向上させる。例えば、リフレクタであるスイッチ205に障害が発生し、クライアントであるスイッチ203とスイッチ205との間のIBGPセッションが切断されたと仮定すると、スイッチ203はスイッチ205から送信された全てのルートを削除するが、このときスイッチ203にはリフレクタであるスイッチ206から送信されたルートと同じルートが記録されているため、スイッチ203は当該記録されているBGPルートを用いて通信を行い、通信の信頼性を向上させることができる。
ここまで、実施例5の説明は完了する。
実施例6:本実施例は、EBGPセッションを例とする。図8に示すように、本実施例では、スイッチ201と同期する必要がある各対象スイッチがそれぞれスイッチ202~スイッチ204とし、スイッチ201とスイッチ202との間でEBGPセッションが確立され、スイッチ201とスイッチ204との間でEBGPセッションが確立され、スイッチ202とスイッチ203との間でEBGPセッションが確立されてもよい。これに基づいて、上記ステップS102において、スイッチ201は、指定されたスイッチとの間で確立されたBGPセッションを介して、対象データが付加されているBGPルートを送信することは、ステップ801~ステップ802を含み得る。
ステップ801において、スイッチ201は、スイッチ202との間で確立されたEBGPセッションを介して、対象データが付加されているBGPルートをスイッチ202に送信することにより、スイッチ202が、上記対象データが付加されているBGPルートを受信した後、スイッチ203との間で確立されたEBGPセッションを介して、当該受信したBGPルートをスイッチ203に転送する。
ステップ802において、スイッチ201は、スイッチ204との間で確立されたEBGPセッションを介して、対象データが付加されているBGPルートをスイッチ204に送信する。
最終的に、上記ステップ801~ステップ802により、スイッチ201と同期する必要があるスイッチ202~スイッチ204間で上記対象データの同期が実現される。
ここまで、実施例6の説明は完了する。
なお、本実施例では、拡張されたBGPに従ってスイッチ間で情報を同期させることを確保すればよく、具体的なネットワーキング形態は特に限定されない。上記実施例1~6で例示したネットワーキングはあくまで一例であり、限定するためのものではない。
以下、上記ステップ202におけるBGPルートについて説明する。
本実施例では、上記BGPルートは、BGP Updateパケットのマルチプロトコル到達可能NLRI(MP_REACH_NLRI)属性に付加される。
一実施例として、MP_REACH_NLRI属性は少なくとも、アドレスファミリ識別子(AFI:Address Family Identifier)と後続アドレスファミリ識別子(SAFI:Subsequent Address Family Identifier)を含み得る。
ここで、本実施例におけるAFIは、予め指定され、定義済みのAFI値とは異なってもよい。例えば、本実施例では、AFIは6000である。
ここで、この実施例におけるSAFIは、予め指定され、定義済みのSAFI値とは異なってもよい。例えば、本実施例では、SAFIは254である。
オプションで、本実施例では、上記BGPルートは、具体的に、MP_REACH_NLRI属性のNLRIに付加される。上述したように、BGPルートに付加される上記対象データは少なくとも、アクセスデバイスのIPサービスゾーン構成情報、及び/又は、アクセスデバイスのデバイス発見情報、及び/又は、上記スイッチ201がデフォルトのIPサービスゾーンをサポートするか否かの情報を含む。
オプションで、図9に示すように、IPサービスゾーン構成情報は少なくとも、スイッチ201のBGPルート識別子(Route ID)と、IPサービスゾーン識別子(Zone Name)と、IPサービスゾーン構成情報が属するアクセスデバイスのIPアドレス(IP Address)とを含む。ここで、IPサービスゾーン識別子は、自己定義されたIPサービスゾーンの識別子であり、デフォルトのIPサービスゾーンとは異なる。なお、本実施例では、IP Addressは、IPv4アドレスであってもよく、IPv6アドレスであってもよく、特に限定されない。
オプションで、図10に示すように、アクセスデバイスのデバイス発見情報は少なくとも、アクセスデバイスのMACアドレス(MAC address)と、スイッチ201に接続された、アクセスデバイスのポートのポート識別子(Port Name)と、スイッチ201のBGPルート識別子(Route ID)とを含む。オプションで、図10に示すアクセスデバイスのデバイス発見情報は、Port Nameの長さ(ポート識別子の長さと記す)も含み得る。
本実施例では、アクセスデバイスのデバイス発見情報は、アクセスデバイスのデバイス属性情報をさらに含む。
オプションで、アクセスデバイスのデバイス属性情報は少なくとも、アクセスデバイスのIPアドレス(IPv4アドレス又はIPv6アドレス)と、アクセスデバイスの状態情報(少なくともオンライン情報又はオフライン情報を含む)と、アクセスデバイスのロールタイプ(少なくともストレージシステム及び/又はホストを含む)とを含む。本実施例では、アクセスデバイスのIPアドレス、アクセスデバイスの状態情報、アクセスデバイスのロールタイプは、それぞれTLVで表されてもよく、ここでは限定されない。
オプションで、一例では、現在のBGPルートと以前に受信したBGPルートが同じルートであるかどうかを決定する場合、上記アクセスデバイスのMACアドレス、スイッチ201に接続された、アクセスデバイスのポートのポート識別子、及びスイッチ201のBGPルート識別子によって直接決定されてもよい。したがって、一実施例として、アクセスデバイスのMACアドレス、スイッチ201に接続された、アクセスデバイスのポートのポート識別子、及びスイッチ201のBGPルート識別子は、上記NLRIのプレフィックスの一部であると考えられる。
本実施例では、上記スイッチ201がデフォルトのIPサービスゾーンをサポートするか否かの情報は少なくとも、
スイッチ201のBGPルート識別子(Route ID)を含み、又は、
スイッチ201のBGPルート識別子(Route ID)とイネーブル指示値(Enable)を含む。ここで、イネーブル指示値が第1の値である場合、スイッチ201がデフォルトのIPサービスゾーンをサポートすることを表し、前記イネーブル指示値が第2の値である場合、前記スイッチがデフォルトのIPサービスゾーンをサポートしないことを表す。本実施例では、BGPルート識別子とイネーブル指示値はTLVで表されてもよい。図11は、スイッチ201のBGPルート識別子とイネーブル指示値を示す。
上記は、スイッチ202がBGPルートを能動的に送信する例であり、オプションで、本実施例では、スイッチ202は、IBGPセッションやEBGPセッションなどのBGPセッションを介して、他のスイッチから送信されたBGPルートを受信し、受信されたBGPルートに基づいて、対応するルート構成情報エントリをローカルに新たに追加又は更新してもよい。ルート構成情報エントリは、受信されたBGPルートに付加されている同期すべきデータに関連する。例えば、同期すべきデータが新たに追加されたIPサービスゾーン構成情報である場合、ここでのルート構成情報エントリは、当該新たに追加されたIPサービスゾーン構成情報などを含み得る。
オプションで、上述したように、本実施例では、スイッチ202は、異なるBGPセッションを介して同じ同期すべきデータが付加されているBGPルートを受信してもよく、ルート優先方式に従って最適ルートを決定してもよい。
以下、本発明の実施例により提供されるルートの取り消すについて説明する。
本実施例では、上記スイッチ201を例に説明し、スイッチ201が、記憶された少なくとも1つのBGPルートを取り消す必要もある。例えば、スイッチ201に接続されたホストやストレージデバイスがオフラインになった場合、当該オフラインになったホストやストレージデバイスに対応するBGPルートが取り消される必要がある。すなわち、このとき、スイッチ201は、記憶された少なくとも1つのBGPルートを取り消す必要があると判断する。スイッチ201は、記憶された少なくとも1つのBGPルートを取り消す必要があると判断すると、まず、記憶された当該取り消す必要がある少なくとも1つのBGPルートを削除し、BGPセッションを介して通知を送信して、上記各対象スイッチに、前記取り消す必要がある少なくとも1つのBGPルートと当該少なくとも1つのBGPルートに対応するルート構成情報エントリとを削除するように指示する。
同様に、スイッチ201がBGPセッションを介して、取り消すべき少なくとも1つのBGPルートを受信した場合、記憶された当該少なくとも1つのBGPルートと当該少なくとも1つのBGPルートに対応するルート構成情報エントリとを削除する。
オプションで、本実施例では、取り消す必要がある少なくとも1つのBGPルートは、BGP Updateパケットのマルチプロトコル到達不能NLRI(MP_UNREACH_NLRI)属性に付加される。ここで、MP_UNREACH_NLRI属性におけるAFIとSAFIは、上記のMP_REACH_NLRI属性の説明を参照されたい。
以上、本発明の実施例により提供される方法について説明したが、以下、具体的な実施例を挙げてさらに説明する。
図12は、本発明の実施例により提供される実施例のネットワーキングの概略図である。図12において、スイッチ1201とスイッチ1202はリフレクタとして構成され、同じCluster IDで構成される。スイッチ1203とスイッチ1204は、上記リフレクタのクライアントとして構成される。スイッチ1201~スイッチ1204は、同じASに構成され、互いにIBGPピアである。上記実施例4の説明に基づいて、図12では、スイッチ1201とスイッチ1202との間、スイッチ1201とスイッチ1203との間、スイッチ1201とスイッチ1204との間、スイッチ1202とスイッチ1203との間、スイッチ1202とスイッチ1204との間にそれぞれBGPセッションが確立される。
スイッチ1201にホストBのIPサービスゾーン構成が追加されると、スイッチ1201は当該新たに追加されたIPサービスゾーン構成を取得し、当該IPサービスゾーン構成が付加されているBGPルートを生成して記録する。その後、スイッチ1201は、スイッチ1202、スイッチ1203、スイッチ1204との間で確立されたBGPセッションを介して当該BGPルートを送信する。スイッチ1202~スイッチ1204は当該BGPルートを受信、記録、解析して、リモートエンド、すなわちホストBのIPサービスゾーン構成エントリをローカルに新規追加する。
スイッチ1201に既に記録されたホストBのIPサービスゾーン構成を変更する必要がある場合、スイッチ1201は既存の対応するBGPルートを更新する。その後、スイッチ1201は、スイッチ1202、スイッチ1203、スイッチ1204との間で確立されたBGPセッションを介して当該更新されたBGPルートを送信する。スイッチ1202~スイッチ1204は当該更新されたBGPルートを受信、記録、解析して、ローカルに記録されたリモートエンドのIPサービスゾーン構成エントリを更新する。更新されたIPサービスゾーン構成エントリは、上記の変更されたIPサービスゾーン構成エントリと同じである。
スイッチ1201に既に記録されたホストBのIPサービスゾーン構成を削除する必要がある場合、スイッチ1201は既存の対応するBGPルートを取り消す。その後、スイッチ1201は、スイッチ1202、スイッチ1203、スイッチ1204との間で確立されたBGPセッションを介して当該BGPルート取り消し通知を送信する。スイッチ1202~スイッチ1204はBGPルート取り消し通知を受信すると、記録された対応するBGPルート及び記録された対応するリモートエンド(すなわち、ホストB)のIPサービスゾーン構成エントリを削除する。
なお、本実施例において、スイッチ1201に既に記録されたホストBのIPサービスゾーン構成を変更する必要がある場合、上述したように、スイッチ1201に既に記録されたホストBのIPサービスゾーン構成を削除する方法に従って、まず既存の対応するBGPルートを取り消し、次にスイッチ1202~スイッチ1204にBGPルート取り消し通知を送信して、スイッチ1202~スイッチ1204に、記録された対応するBGPルート及び記録された対応するリモートエンド(すなわち、ホストB)のIPサービスゾーン構成エントリを削除するよう指示する。その後、ホストBのIPサービスゾーン構成をスイッチ1201に追加する際の動作を実行する。具体的にどのように実行するかは、主に、変更されたIPサービスゾーン構成が、BGPルートが他のルートと同じルートであるか否かを判定するための特徴パラメータなどの重要な特徴であるか否かに依存する(ここでの特徴パラメータは、上記IPサービスゾーン構成情報であってもよく、自己定義された他のパラメータなどであってもよく、本実施例は特に限定されない)。変更されたIPサービスゾーン構成が重要な特徴であれば、まず既存の対応するBGPルートを取り消し、ホストBのIPサービスゾーン構成をスイッチ1201に追加することで更新を実現する。変更されたIPサービスゾーン構成が重要な特徴でなければ、上述のように、既存の対応するBGPルートを直接更新して送信する。
スイッチ1204がホストやストレージデバイスなどのアクセスデバイスに新たに接続された場合、新たに接続されたアクセスデバイスはオンラインになった後、まずLLDPパケットをスイッチ1204に送信し、スイッチ1204はローカルに新たに接続されたアクセスデバイスのデバイス発見情報を新たに追加し、対応するBGPルートを生成して記録する。その後、クライアントであるスイッチ1204は、リフレクタであるスイッチ1201との間で確立されたBGPセッションを介して、当該BGPルートをスイッチ1201に送信する。クライアントであるスイッチ1204は、リフレクタであるスイッチ1202との間で確立されたBGPセッションを介して、当該BGPルートをスイッチ1202に送信する。リフレクタであるスイッチ1201は、クライアントであるスイッチ1203との間で確立されたBGPセッションを介して、受信されたBGPルートをスイッチ1203に反射する。リフレクタであるスイッチ1202は、クライアントであるスイッチ1203との間で確立されたBGPセッションを介して、受信されたBGPルートをスイッチ1203に反射する。スイッチ1203は、スイッチ1201とスイッチ1202から反射された2つの同じルートを受信し、BGPプロトコル仕様と実際の実装に従って最適ルートを選択する。
なお、最適ルートがスイッチ1201とスイッチ1202のどちらから反射されたBGPルートであっても、スイッチ1201とスイッチ1202から反射されたBGPルートに付加されているルート情報(同期すべきデータとも呼ばれる)は同じであるため、スイッチ1203は、ルート情報からスイッチ1204に新たに接続されたアクセスデバイスのデバイス発見情報を解析することができる。
これに基づいて、最適ルートがスイッチ1201から反射されたBGPルートである場合、スイッチ1201に障害が発生すると、スイッチ1203とスイッチ1201との間のBGPセッションが切断され、スイッチ1203はスイッチ1201から送信された全てのルートを削除するが、このときスイッチ1203はスイッチ1202から送信された同じルートを保持しているため、スイッチ1203にはスイッチ1204によって生成されたBGPルートがある。したがって、スイッチ1201とスイッチ1202の2つのリフレクタを同時に配置することで、冗長バックアップの役割を果たし、信頼性を向上させることができる。
スイッチ1204に接続されたホストやストレージデバイスなどのアクセスデバイスのデバイス発見情報が変更された場合、アクセスデバイスは、LLDPパケットを送信してスイッチ1204に通知し、スイッチ1204は、ローカルに接続されたアクセスデバイスのデバイス発見情報と記録された対応するBGPルートを更新する。
その後、クライアントであるスイッチ1204は、リフレクタであるスイッチ1201との間で確立されたBGPセッションを介して、当該更新されたBGPルートをスイッチ1201に送信する。クライアントであるスイッチ1204は、リフレクタであるスイッチ1202との間で確立されたBGPセッションを介して、当該更新されたBGPルートをスイッチ1202に送信する。
リフレクタであるスイッチ1201は、クライアントであるスイッチ1203との間で確立されたBGPセッションを介して、受信されたBGPルートをクライアントであるスイッチ1203に反射する。
リフレクタであるスイッチ1202は、クライアントであるスイッチ1203との間で確立されたBGPセッションを介して、受信されたBGPルートをクライアントであるスイッチ1203に反射する。
最終的に、スイッチ1203は、スイッチ1201とスイッチ1202から反射された2つの同じルートを受信し、BGPプロトコル仕様と実際の実装に従って最適ルートを選択する。なお、アクセスデバイスのデバイス発見情報が変更されたことは、上記IPサービスゾーン構成が変更された場合と同様であるため、これ以上の説明を省略する。
スイッチ1204に接続されたホストやストレージデバイスなどのアクセスデバイスがオフラインになった場合、スイッチ1204は対応するデバイスがオフラインになったこと(例えば、LLDPがエージングした、接続が切断されたなど)を発見すると、既存のBGPルートを取り消す。その後、クライアントであるスイッチ1204は、リフレクタであるスイッチ1201との間で確立されたBGPセッションを介して、ルート取り消し通知をスイッチ1201に送信する。クライアントであるスイッチ1204は、リフレクタであるスイッチ1202との間で確立されたBGPセッションを介して、ルート取り消し通知をスイッチ1202に送信する。
リフレクタであるスイッチ1201は、クライアントであるスイッチ1203との間で確立されたBGPセッションを介して、上記ルート取り消し通知をスイッチ1203に反射する。
リフレクタであるスイッチ1202は、クライアントであるスイッチ1203との間で確立されたBGPセッションを介して、上記ルート取り消し通知をスイッチ1203に反射する。
最終的に、スイッチ1203は、スイッチ1201とスイッチ1202から反射されたルート取り消し通知を受信した後、対応するBGPルートを削除し、当該BGPルートに対応するデバイス状態情報をオフラインに変更する。
以上は、IPサービスゾーン構成とデバイス発見情報のみを例に説明しており、その他の状況は類推できるため、ここでは説明を省略する。
以下、本発明の実施例により提供される装置について説明する。
図13は、本発明の実施例により提供される装置の構造図である。当該装置は、SANにおけるスイッチに適用される。図13に示すように、当該装置は、
同期すべき対象データを取得するために用いられる取得ユニットと、
指定されたスイッチとの間で確立されたBGPセッションを介して、前記対象データが付加されているBGPルートを送信して、前記スイッチと同期する必要がある各対象スイッチ間で前記対象データを同期させるために用いられるルートユニットと、を含み得る。
オプションで、上記対象データは少なくとも、
アクセスデバイスのIPサービスゾーン構成情報、及び/又は、アクセスデバイスのデバイス発見情報、及び/又は、前記スイッチがデフォルトのIPサービスゾーンをサポートするか否かの情報を含む。
オプションで、上記IPサービスゾーン構成情報は少なくとも、
前記スイッチのBGPルート識別子(Route ID)と、IPサービスゾーン識別子と、前記IPサービスゾーン構成情報が属するアクセスデバイスのIPアドレスとを含み、前記IPサービスゾーン識別子は、自己定義されたIPサービスゾーンの識別子であり、デフォルトのIPサービスゾーンとは異なる。
オプションで、上記アクセスデバイスのデバイス発見情報は少なくとも、
アクセスデバイスのMACアドレスと、前記スイッチに接続された、アクセスデバイスのポートのポート識別子と、前記スイッチのBGPルート識別子(Route ID)とを含む。
オプションで、上記アクセスデバイスのデバイス発見情報は、アクセスデバイスのデバイス属性情報をさらに含み、
前記アクセスデバイスのデバイス属性情報は少なくとも、アクセスデバイスのIPアドレスと、アクセスデバイスの状態情報と、アクセスデバイスのロールタイプとを含み、
前記IPアドレスは、IPv4アドレス又はIPv6アドレスであり、
前記状態情報は少なくとも、オンライン情報又はオフライン情報を含み、
前記ロールタイプは少なくとも、ストレージシステム及び/又はホストを含む。
オプションで、上記スイッチがデフォルトのIPサービスゾーンをサポートするか否かの情報は少なくとも、
前記スイッチのBGPルート識別子(Route ID)を含み、又は、
前記スイッチのBGPルート識別子(Route ID)とイネーブル指示値を含み、
前記イネーブル指示値が第1の値である場合、前記スイッチがデフォルトのIPサービスゾーンをサポートすることを表し、前記イネーブル指示値が第2の値である場合、前記スイッチがデフォルトのIPサービスゾーンをサポートしないことを表す。
オプションで、上記指定されたスイッチは、前記対象スイッチの少なくとも1つであり、又は、
前記指定されたスイッチは、前記スイッチ及び前記対象スイッチ以外の少なくとも1つの非対象スイッチである。
本実施例では、ルートユニットは、さらに、指定されたスイッチとの間で確立されたBGPセッションを介して他のスイッチから送信されたBGPルートを受信するとき、受信されたBGPルートに基づいて、対応するルート構成情報エントリをローカルに新たに追加又は更新するために用いられる。ここで、ルート構成情報エントリは、受信されたBGPルートに付加されている同期すべきデータに関連する。
本実施例では、ルートユニットは、さらに、異なるBGPセッションを介して、同じ同期すべきデータが付加されているBGPルートを受信するとき、ルート優先方式に従って最適ルートを決定するために用いられる。
本実施例では、ルートユニットは、さらに、前記BGPルートを記憶し、記憶された少なくとも1つのBGPルートを取り消す必要がある場合、記憶された当該取り消す必要がある少なくとも1つのBGPルートを削除し、指定されたスイッチとの間で確立されたBGPセッションを介して通知を送信して、前記対象スイッチに前記取り消す必要がある少なくとも1つのBGPルートと当該少なくとも1つのBGPルートに対応するルート構成情報エントリとを削除するように指示する。
本実施例では、ルートユニットは、さらに、指定されたスイッチとの間で確立されたBGPセッションを介して、取り消すべき少なくとも1つのBGPルートを受信した場合、記憶された当該少なくとも1つのBGPルートと当該少なくとも1つのBGPルートに対応するルート構成情報エントリとを削除するために用いられる。
本実施例では、BGPルートは、BGP UpdateパケットのMP_REACH_NLRI属性に付加され、MP_REACH_NLRI属性におけるAFIとSAFIは、予め指定されており、定義済みのAFI値とSAFI値と競合しない。
本実施例では、取り消す必要がある少なくとも1つのBGPルートは、BGP UpdateパケットのMP_UNREACH_NLRI属性に付加され、前記MP_UNREACH_NLRI属性におけるAFIとSAFIは、予め指定されており、定義済みのAFI値とSAFI値と競合しない。
ここまで、図13に示す装置の構造の説明は完了する。
本発明の実施例はさらに図13に示す装置のハードウェア構造を提供する。図14は、本発明の実施例により提供される電子デバイスの構造図である。図14に示すように、当該ハードウェア構造は、プロセッサと、機械可読記憶媒体とを含み得、機械可読記憶媒体には前記プロセッサによって実行可能な機械実行可能命令が記憶されており、前記プロセッサは、本発明の上記実施例に開示された方法を実施するように機械実行可能命令を実行するために用いられる。
上述の方法と同様の思想に基づき、本発明の実施例はさらに、コンピュータ命令が記憶されている機械可読記憶媒体を提供し、前記コンピュータ命令がプロセッサによって実行されると、本発明の上記実施例に開示された方法を実施することができる。
例示的に、上記機械可読記憶媒体は、任意の電子的、磁性的、光学的又は他の物理的記憶装置であってもよく、実行可能な命令、データなどの情報を含むか、又は記憶することができる。例えば、機械可読記憶媒体は、ラドムアクセスメモリ(RAM:Radom Access Memory)、揮発性メモリ、不揮発性メモリ、フラッシュメモリ、ストレージドライブ(ハードドライブなど)、ソリッドステートドライブ、任意の記憶ディスク(光ディスク、DVDなど)、又は類似の記憶媒体や、これらの組み合わせであってもよい。
上記実施例で説明したシステム、装置、モジュール又はユニットは、具体的には、コンピュータチップ、エンティティ、又は何らかの機能を有する製品によって実現されてもよい。典型的な実現デバイスはコンピュータであり、コンピュータの具体的な形態は、パーソナルコンピュータ、ラップトップコンピュータ、携帯電話、カメラ付き電話、スマートフォン、パーソナルデジタルアシスタント、メディアプレーヤ、ナビゲーションデバイス、電子メール送受信デバイス、ゲーム機、タブレット、ウェアラブルデバイス、又はこれらのデバイスの任意のいくつかの組み合わせであってもよい。
なお、説明の便宜上、上記の装置を説明するときに機能によって様々なユニットに分けてそれぞれ説明する。もちろん、本発明を実施する際に、各ユニットの機能は、同一又は複数のソフトウェア及び/又はハードウェアで実現されてもよい。
当業者であれば分かるように、本発明の実施例が、方法、システム、又はコンピュータプログラム製品として提供されてもよい。したがって、本発明は、ハードウェアだけからなる実施例、ソフトウェアだけからなる実施例、又はソフトウェアとハードウェアを組み合わせた実施例なる形態を用いてもよい。さらに、本発明の実施例は、コンピュータで使用可能なプログラムコードを含む1つ又は複数のコンピュータで使用可能な記憶媒体(磁気ディスクメモリ、CD-ROM、光学メモリなどを含むが、これらに限定されない)において実施されるコンピュータプログラム製品の形態であってもよい。
本発明は、本発明の実施例による方法、デバイス(システム)、及びコンピュータプログラム製品のフローチャート及び/又はブロック図を参照して説明される。フローチャート及び/又はブロック図における各フロー及び/又はブロック、並びにフロー及び/又はブロックの組み合わせは、コンピュータプログラム命令によって実現されてもよいことが理解されるべきである。これらのコンピュータプログラム命令は、マシンを生成するために、汎用コンピュータ、専用コンピュータ、組み込みプロセッサ、又は他のプログラマブル可能なデータ処理デバイスのプロセッサに提供されてもよく、それにより、コンピュータ又は他のプログラマブル可能なデータ処理デバイスのプロセッサによって実行される命令により、フローチャートの1つ又は複数のフロー、及び/又はブロック図の1つ又は複数のブロックにおいて指定される機能を実現するための装置が生成される。
また、これらのコンピュータプログラム命令は、コンピュータ又は他のプログラマブル可能なデータ処理デバイスに特定の方法で動作するように指示することができるコンピュータ可読メモリに記憶されてもよく、これにより、当該コンピュータ可読メモリに記憶された命令により、フローチャートの1つ又は複数のフロー及び/又はブロック図の1つ又は複数のブロックにおいて指定される機能を実現するための命令装置を含む製品が生成される。
これらのコンピュータプログラム命令は、コンピュータ又は他のプログラマブル可能なデータ処理デバイスにロードされてもよく、それにより、一連の動作ステップがコンピュータ又は他のプログラマブル可能なデバイス上で実行されることで、コンピュータにより実施される処理が生成され、それによりコンピュータ又は他のプログラマブル可能なデバイス上で実行される命令により、フローチャートの1つ又は複数のフロー及び/又はブロック図の1つ又は複数のブロックにおいて指定される機能を実現するためのステップを提供する。
以上は、本発明の実施例に過ぎず、本発明を限定するものではない。当業者にとって、本発明は様々な変更及び変化が可能である。本発明の精神と原理の範囲内で行われたいかなる修正、同等な置換、改善などは、いずれも本発明の特許請求の範囲に含まれるものとするべきである。

Claims (14)

  1. ストレージ・エリア・ネットワーク(SAN)に適用されるスイッチ間の情報同期方法であって、SANにおけるスイッチに適用され、
    同期すべき対象データを取得するステップと、
    指定されたスイッチとの間で確立されたBGPセッションを介して、前記対象データが付加されているBGPルートを送信して、前記スイッチと同期する必要がある各対象スイッチ間で前記対象データを同期させるステップと、を含
    前記対象データは少なくとも、
    アクセスデバイスのIPサービスゾーン構成情報、及び/又は、アクセスデバイスのデバイス発見情報、及び/又は、前記スイッチがデフォルトのIPサービスゾーンをサポートするか否かの情報を含む、
    ことを特徴とするスイッチ間の情報同期方法。
  2. 前記IPサービスゾーン構成情報は少なくとも、
    前記スイッチのBGPルート識別子(Route ID)と、IPサービスゾーン識別子と、前記IPサービスゾーン構成情報が属するアクセスデバイスのIPアドレスとを含み、前記IPサービスゾーン識別子は、デフォルトのIPサービスゾーンとは異なる、自己定義されたIPサービスゾーンの識別子である、
    ことを特徴とする請求項に記載の方法。
  3. 前記アクセスデバイスのデバイス発見情報は少なくとも、
    アクセスデバイスのMACアドレスと、前記スイッチに接続された、アクセスデバイスのポートのポート識別子と、前記スイッチのBGPルート識別子(Route ID)とを含む、
    ことを特徴とする請求項に記載の方法。
  4. 前記アクセスデバイスのデバイス発見情報は、アクセスデバイスのデバイス属性情報をさらに含み、
    前記アクセスデバイスのデバイス属性情報は少なくとも、アクセスデバイスのIPアドレスと、アクセスデバイスの状態情報と、アクセスデバイスのロールタイプとを含み、
    前記IPアドレスは、IPv4アドレス又はIPv6アドレスであり、
    前記状態情報は少なくとも、オンライン情報又はオフライン情報を含み、
    前記ロールタイプは少なくとも、ストレージシステム及び/又はホストを含む、
    ことを特徴とする請求項に記載の方法。
  5. 前記スイッチがデフォルトのIPサービスゾーンをサポートするか否かの情報は少なくとも、
    前記スイッチのBGPルート識別子(Route ID)を含み、又は、
    前記スイッチのBGPルート識別子(Route ID)とイネーブル指示値を含み、
    前記イネーブル指示値が第1の値である場合、前記スイッチがデフォルトのIPサービスゾーンをサポートすることを表し、前記イネーブル指示値が第2の値である場合、前記スイッチがデフォルトのIPサービスゾーンをサポートしないことを表す、
    ことを特徴とする請求項に記載の方法。
  6. 前記指定されたスイッチは、前記対象スイッチの少なくとも1つであり、又は、
    前記指定されたスイッチは、前記スイッチ及び前記対象スイッチ以外の少なくとも1つの非対象スイッチである、
    ことを特徴とする請求項1に記載の方法。
  7. 指定されたスイッチとの間で確立されたBGPセッションを介して、他のスイッチから送信されたBGPルートを受信するとき、受信されたBGPルートに基づいて、対応するルート構成情報エントリをローカルに新たに追加又は更新するステップをさらに含み、
    前記ルート構成情報エントリは、受信されたBGPルートに付加されている同期すべきデータに関連する、
    ことを特徴とする請求項1に記載の方法。
  8. 異なるBGPセッションを介して、同じ同期すべきデータが付加されているBGPルートを受信するとき、ルート優先方式に従って最適ルートを決定するステップをさらに含む、
    ことを特徴とする請求項1に記載の方法。
  9. 前記BGPルートを記憶するステップと、
    記憶された少なくとも1つのBGPルートを取り消す必要がある場合、記憶された当該取り消す必要がある少なくとも1つのBGPルートを削除し、指定されたスイッチとの間で確立されたBGPセッションを介して通知を送信して、前記対象スイッチに、前記取り消す必要がある少なくとも1つのBGPルートと当該少なくとも1つのBGPルートに対応するルート構成情報エントリとを削除するように指示するステップと、をさらに含む、
    ことを特徴とする請求項1に記載の方法。
  10. 指定されたスイッチとの間で確立されたBGPセッションを介して、取り消すべき少なくとも1つのBGPルートを受信した場合、記憶された当該少なくとも1つのBGPルートと当該少なくとも1つのBGPルートに対応するルート構成情報エントリとを削除するステップをさらに含む、
    ことを特徴とする請求項1に記載の方法。
  11. 前記BGPセッションは、
    内部ボーダーゲートウェイプロトコル(IBGP)セッション、又は外部ボーダーゲートウェイプロトコル(EBGP)セッションである、
    ことを特徴とする請求項1に記載の方法。
  12. 前記BGPルートは、BGP UpdateパケットのMP_REACH_NLRI属性に付加され、前記MP_REACH_NLRI属性におけるアドレスファミリ識別子(AFI)と後続アドレスファミリ識別子(SAFI)は、予め指定されており、定義済みのAFI値とSAFI値と競合しない、
    ことを特徴とする請求項1~のいずれか一項に記載の方法。
  13. 取り消す必要がある少なくとも1つのBGPルートは、BGP UpdateパケットのMP_UNREACH_NLRI属性に付加され、前記MP_UNREACH_NLRI属性におけるアドレスファミリ識別子(AFI)と後続アドレスファミリ識別子(SAFI)は、予め指定されており、定義済みのAFI値とSAFI値と競合しない、
    ことを特徴とする請求項又は10に記載の方法。
  14. 電子デバイスであって、プロセッサと、機械可読記憶媒体とを含み、
    前記機械可読記憶媒体には前記プロセッサによって実行可能な機械実行可能命令が記憶されており、
    前記プロセッサは、請求項1~1のいずれか一項に記載の方法を実施するように機械実行可能命令を実行するために用いられる、ことを特徴とする電子デバイス。
JP2023569876A 2021-10-28 2021-10-28 スイッチ間の情報同期方法及び装置 Active JP7640748B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2021/127193 WO2023070475A1 (zh) 2021-10-28 2021-10-28 交换机之间的信息同步方法及装置

Publications (2)

Publication Number Publication Date
JP2024519332A JP2024519332A (ja) 2024-05-10
JP7640748B2 true JP7640748B2 (ja) 2025-03-05

Family

ID=86160338

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2023569876A Active JP7640748B2 (ja) 2021-10-28 2021-10-28 スイッチ間の情報同期方法及び装置

Country Status (6)

Country Link
US (1) US20240275712A1 (ja)
EP (1) EP4333405A4 (ja)
JP (1) JP7640748B2 (ja)
KR (1) KR20230172602A (ja)
CN (1) CN116195233A (ja)
WO (1) WO2023070475A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099385A (ja) 2001-06-28 2003-04-04 Intersan Inc ストレージエリアネットワークへのアプリケーションデータ経路の自動生成
CN1890943A (zh) 2003-12-19 2007-01-03 英特尔公司 用于服务器和存储区网络之间的光学连网的方法和架构
JP2007129702A (ja) 2005-10-31 2007-05-24 Agilent Technol Inc Vpnトポロジの準リアルタイム更新を発見及び提供する方法及びシステム

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7707304B1 (en) * 2001-09-28 2010-04-27 Emc Corporation Storage switch for storage area network
US20050068968A1 (en) * 2003-09-30 2005-03-31 Shlomo Ovadia Optical-switched (OS) network to OS network routing using extended border gateway protocol
US7318108B2 (en) * 2004-12-22 2008-01-08 Cisco Technology, Inc. Method and apparatus providing prioritized convergence in border gateway protocol
US8265074B2 (en) * 2007-12-10 2012-09-11 Cisco Technology, Inc. Collecting network performance data from multiple autonomous systems
CN101471940B (zh) * 2007-12-28 2012-09-05 华为技术有限公司 一种边界网关协议路由同步的方法、系统及装置
US9270754B2 (en) * 2013-06-06 2016-02-23 Cisco Technology, Inc. Software defined networking for storage area networks
CN104506511A (zh) * 2014-12-15 2015-04-08 蓝盾信息安全技术股份有限公司 一种sdn网络动态目标防御系统及方法
CN104639630B (zh) * 2015-02-02 2018-05-11 新华三技术有限公司 一种端到端区域数据同步方法和装置
CN104822101B (zh) * 2015-04-08 2018-08-24 新华三技术有限公司 Fabric网络同步端口诊断信息的方法及装置
WO2018000442A1 (zh) * 2016-07-01 2018-01-04 华为技术有限公司 业务功能链sfc中用于转发报文的方法、装置和系统
US10581798B2 (en) * 2017-10-27 2020-03-03 At&T Intellectual Property I, L.P. Network based distribution for compute resource and application accessibility
US11218508B2 (en) * 2018-06-27 2022-01-04 Cisco Technology, Inc. Assurance of security rules in a network
US10855584B2 (en) * 2018-12-28 2020-12-01 Alibaba Group Holding Limited Client-equipment-peering virtual route controller
CN110011921B (zh) * 2019-03-22 2021-07-06 新华三技术有限公司合肥分公司 一种路由同步方法、装置、网络设备及存储介质
CN116094978A (zh) * 2019-11-15 2023-05-09 华为技术有限公司 一种信息上报方法和信息处理方法及设备
CN113132227A (zh) * 2019-12-30 2021-07-16 华为技术有限公司 更新路由信息的方法、装置、计算机设备和存储介质
CN111901240B (zh) * 2020-07-17 2023-04-18 厦门网宿有限公司 一种路由更新方法、网络加速系统、服务器及交换机
CN112867086B (zh) * 2021-01-29 2022-02-22 新华三信息安全技术有限公司 一种报文处理方法及装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003099385A (ja) 2001-06-28 2003-04-04 Intersan Inc ストレージエリアネットワークへのアプリケーションデータ経路の自動生成
CN1890943A (zh) 2003-12-19 2007-01-03 英特尔公司 用于服务器和存储区网络之间的光学连网的方法和架构
JP2007129702A (ja) 2005-10-31 2007-05-24 Agilent Technol Inc Vpnトポロジの準リアルタイム更新を発見及び提供する方法及びシステム

Also Published As

Publication number Publication date
CN116195233A (zh) 2023-05-30
US20240275712A1 (en) 2024-08-15
EP4333405A4 (en) 2024-07-17
JP2024519332A (ja) 2024-05-10
EP4333405A1 (en) 2024-03-06
KR20230172602A (ko) 2023-12-22
WO2023070475A1 (zh) 2023-05-04

Similar Documents

Publication Publication Date Title
JP6047229B2 (ja) 情報中心ネットワークにおける名前ベースの近隣探索及びマルチホップサービス探索
US11611509B2 (en) Communication method, communications device, and communications system
CN103441936B (zh) 转发邻接链路的发布方法
US10097460B2 (en) Routing in an communications network having a distributed S/PGW architecture
WO2011157151A2 (zh) 实现容灾备份的方法、设备及系统
JP2007535852A (ja) 近隣キャッシュテーブル同期のための装置及び方法
JP7306642B2 (ja) ループ回避通信方法、ループ回避通信デバイスおよびループ回避通信システム
US11296979B2 (en) Method and system for symmetric integrated routing and bridging
WO2019201209A1 (zh) 报文转发
WO2011044828A1 (zh) 一种路由撤销的方法、装置和系统
CN105340226A (zh) 动态路由设备的主备系统切换的方法及其装置
US8045545B2 (en) Intelligent database exchange for OSPF
CN112995027B (zh) 路由发布方法及vtep节点
JP7640748B2 (ja) スイッチ間の情報同期方法及び装置
WO2011150835A1 (zh) 一种请求获取路由信息的方法和相应的路由设备
CN109873764B (zh) 建立定向ospf邻居关系的方法、装置、电子设备
CN101924684A (zh) 一种路由处理方法、系统和路由器
JP7592899B2 (ja) 自律システム間のマルチキャスト転送方法および装置
WO2019128651A1 (zh) 一种anima网络的信息处理方法、设备及系统
WO2022213783A1 (zh) 一种流量转发的方法及装置
CN102821118B (zh) 一种具备异构节点的网络中业务备份的方法和系统
WO2022068330A1 (zh) 一种检测路由环路的方法、设备及系统
WO2019001487A1 (zh) 一种路径数据的删除方法、一种消息转发方法和装置
CN109067647B (zh) 路由信息维护方法及装置
CN106470246A (zh) 地址解析协议arp表项的同步方法及装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20231110

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20241003

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20241022

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20250117

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20250204

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20250220

R150 Certificate of patent or registration of utility model

Ref document number: 7640748

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150