DRG上のNAT - パート5 - OCIとオンプレミス間のCIDRとBGPの重複

概要

NAT on DRG - パート3 - OCIとオンプレミス間のCIDRの重複では、Oracle Cloud Infrastructure (OCI) VCNと、同じIP範囲のオンプレミス・ネットワークがサイト間VPNを介して接続され、NAT on DRGがIPSecトンネル・アタッチメントで変換を実行していました。その部分のトンネルはポリシーベースでした。暗号化ドメインは、トンネルに入るトラフィックを決定し、Dynamic Routing Gateway (DRG)がオンプレミスへのルートを学習した場所でもあります。

この部では、BGP動的ルーティングと同じユース・ケースを作成します。こうしてほとんどの本番VPNが構築され、FastConnect仮想回線がルーティングされる方法でもあるため、このチュートリアルのルーティング・モデルも期待どおりです。トポロジ、アドレス、およびNAT規則はパート3と同じです。

サイド 実サブネットCIDR 反対側に見えるシャドウCIDR
OCI VCN uc3-vcn-oci 10.0.1.0/24 192.168.10.0/24
オンプレミスLAN 10.0.1.0/24 192.168.20.0/24

変化は、それぞれの側がどこにいるかを学ぶことです。BGPでは、すべてを決定する質問が1つあります: BGPを介して交換されるルートをDRGで変換しますか。 このチュートリアルでテストされた回答は、次のものではありません。

DRG上のNATは、ルートではなくパケットを変換します。したがって、BGPでは、シャドウCIDRをルート交換に自分自身で、両方の側に配置する必要があります:

方向 アドバタイズすべきこと 方法
オンプレミスからOracle 192.168.20.0/24 (オンプレミスのシャドウCIDR) オンプレミス・ルーターは、それをBGPでアドバタイズします。
Oracleからオンプレミスへ 192.168.10.0/24 (OCIのシャドウCIDR) DRGが通知するトンネル・アタッチメントのDRGルート表内の静的ルート。

[!]ノート] NATルールは、ポリシーを保持するアタッチメントを介してDRGを入力するトラフィックを示します。オンプレミスから到着するトラフィックであるIPSecトンネル・アタッチメントの場合。トンネルを経由するトラフィックの場合、DRGは逆変換を自動的に適用します。

オンプレミス・ネットワークは、別のリージョンのVCNでシミュレートされ、1つのOracle LinuxインスタンスがIPSecトンネルでLibreswanを実行し、BGPでFRRouting (FRR)を実行します。演習はパート3のVPNをBGPに変換したもので、スクリーンショット内のリソースの名前はuc3-...です。

イメージ

その他のユースケース

このチュートリアルはシリーズ構成の一部分です。各パーツは、同じビルディングブロックを持つ異なるオーバーラップシナリオを解決します。

ダイアグラム

VCNサブネットCIDRと、DRG上のステートレス1:1 NATのオンプレミスまたはリモート・ネットワーク間のIPの重複、およびIPSecトンネルを介したBGPルート交換

イメージ

図は、このチュートリアルで構成するすべてのオブジェクトを示しています。

前提条件

[!]ノート]このチュートリアルの名前、CIDRおよびIPアドレスは、スクリーンショットのラボから取得されます。シャドウCIDRがネットワーク内の他のものと重複せず、置換するCIDRと同じ接頭辞長を持つかぎり、独自のCIDRを使用できます。

ステップ

ステップ01: OCI側のVCNの確認

OCI側では、通常のVCN、1つのパブリック・サブネット、1つのテスト・インスタンスから始めます。

イメージ

イメージ

イメージ

インターネット・ゲートウェイは、SSHを介してテスト・インスタンスに到達できるように、ここにのみ存在します。

イメージ

イメージ

ステップ02: シミュレートされたオンプレミス・ネットワークの確認

オンプレミス・ネットワークは、別のリージョンのVCNでシミュレートされます。このチュートリアルでは、OCI側と同じアドレス空間を使用します。実際のオンプレミス・ネットワークおよびルーターをお持ちの場合は、この手順を参照して手順05に進んでください。

イメージ

イメージ

VCNには2つのサブネットがあります。これらは、Libreswanインスタンスに、実際のルーターが持つ2つの側面を提供します。

イメージ

イメージ

イメージ

[!]ノート]インスタンスuc3-inst-opは、それ自体宛てではないトラフィックを転送します。これを機能させるには、VNICでソース/宛先チェックのスキップを有効にし、オペレーティング・システムでIP転送を有効にする必要があります(net.ipv4.ip_forward = 1)。

ステップ03: セキュリティ・リストの構成

セキュリティ・リストでは、IPSecトンネル自体と、テストとして使用するPingの2種類のトラフィックが許可されている必要があります。

この演習では、3つのプライベート範囲すべてからICMPを許可します。これは、このチュートリアルのニーズよりも広いです。OCI側で重要なのは、オンプレミスのシャドウCIDR 192.168.20.0/24のみです。シミュレートされたオンプレミス側では、OCIシャドウCIDR 192.168.10.0/24およびローカル10.0.1.0/24も必要です。LANホストからのトラフィックがLibreswanルーターのLAN VNICを通過し、セキュリティ・リストもそこでチェックされるためです。

イメージ

イメージ

[!]ノート]トンネルはVCN内のインスタンスではなくDRGで終わるため、OCI側ではIPSecルールは不要です。これらは、トンネルがLibreswanインスタンスで終わる、シミュレートされたオンプレミス側で必要です。

ステップ04: オンプレミス側でのルーティングの構成

オンプレミス・ホストは、OCIへのアクセス方法を知っている必要があります。OCI側のシャドウCIDR 192.168.10.0/24を使用し、そのルートはオンプレミス・ルーターを指しています。ルータ自体は、ステップ08でBGPのプリフィクスを学習しています。

イメージ

イメージ

ステップ05: DRGを作成してVCNをアタッチする

OCI側に戻り、DRGを作成します。これでVCNアタッチメントが取得され、次のステップで2つのIPSecトンネル・アタッチメントが自動的に追加されます。

イメージ

イメージ

イメージ

[!]ノート] 2つのトンネルの1つがダウンしている間にDRGのスクリーンショットが撮影されました。IPSec接続にはアクティブなトンネルが1つしかないという警告が表示され、DRGリストには「非冗長」と表示されます。両方のトンネルが起動すると、警告は消えます。

ステップ06: BGP動的ルーティングを使用したサイト間VPNの作成

Site-to-Site VPNは、DRGをオンプレミス・ルーターに接続します。これには、ルーターのパブリックIPアドレスを表す顧客構内機器(CPE)オブジェクトと、冗長性のために2つのトンネルを作成するIPSec接続が必要です。パート3との違いは、トンネルのルーティング・タイプです。BGP動的ルーティングでは、各トンネルは次のようになります:

トンネル Oracle VPN IPアドレス 内部IP、Oracle 内部IP、オンプレミス オンプレミスAS
1 168.138.66.213 10.255.255.1/30 10.255.255.2/30 65000
2 168.138.65.198 10.255.255.5/30 10.255.255.6/30 65000

イメージ

イメージ

イメージ

イメージ

イメージ

パート3のポリシーベースのVPNから開始する場合、新しいIPSec接続を作成する必要はありません。各トンネルを編集し、そのルーティングタイプを変更できます。OCI CLIでは、最初のトンネルは次のようになります。

cat > tunnel-1-bgp.json <<'EOF'
{
  "routing": "BGP",
  "bgpSessionConfig": {
    "oracleInterfaceIp": "10.255.255.1/30",
    "customerInterfaceIp": "10.255.255.2/30",
    "customerBgpAsn": "65000"
  }
}
EOF

oci raw-request --http-method PUT \
  --target-uri "https://iaas.ca-montreal-1.oraclecloud.com/20160918/ipsecConnections/<ipsec_connection_ocid>/tunnels/<tunnel_ocid>" \
  --request-body file://tunnel-1-bgp.json

[!]ノート]ルーティング・タイプを変更すると、トンネルが再プロビジョニングされ、その暗号化ドメインが削除されます。トンネルは、オンプレミス・ルーターがルートベースの構成に変更されるまで停止し続けます。

ステップ07: オンプレミス側のLibreswanの構成

オンプレミス・ルーターには、ルートベースのIPSec構成(トンネルごとに1つのトンネル・インタフェース、およびすべてを受け入れるトラフィック・セレクタ)が必要です。実際のルーターを使用する場合は、IKEv1、事前共有キー、ステップ06の内側のアドレスを持つトンネルごとのトンネル・インタフェース、およびローカルおよびリモートのトラフィック・セレクタとしての0.0.0.0/0を使用して構成します。

Libreswanでは、トンネル・インタフェースはVTIインタフェースです。どちらの接続にも同じセレクタ(両側の0.0.0.0/0)があるため、それぞれ独自のマークが取得されます。マークは、Linuxカーネルが2つのトンネルを離れて保持できるようにするもので、0.0.0.0/0セレクタがルーターの他のすべてのトラフィックを取得しないようにするものです。VTIインタフェースにルーティングされたトラフィックのみがマークを取得し、暗号化されます。

conn uc3-t2
    auto=start
    authby=secret
    keyexchange=ike
    ikev2=no
    type=tunnel
    left=%defaultroute
    leftid=40.233.76.145
    leftsubnet=0.0.0.0/0
    right=168.138.66.213
    rightid=168.138.66.213
    rightsubnet=0.0.0.0/0
    ike=aes256-sha256;modp1536
    phase2alg=aes256-sha256
    pfs=yes
    encapsulation=yes
    ikelifetime=28800s
    salifetime=3600s
    mark=1/0xffffffff
    vti-interface=vti1
    vti-routing=no
    vti-shared=no
    leftvti=10.255.255.2/30
conn uc3
    auto=start
    authby=secret
    keyexchange=ike
    ikev2=no
    type=tunnel
    left=%defaultroute
    leftid=40.233.76.145
    leftsubnet=0.0.0.0/0
    right=168.138.65.198
    rightid=168.138.65.198
    rightsubnet=0.0.0.0/0
    ike=aes256-sha256;modp1536
    phase2alg=aes256-sha256
    pfs=yes
    encapsulation=yes
    ikelifetime=28800s
    salifetime=3600s
    mark=2/0xffffffff
    vti-interface=vti2
    vti-routing=no
    vti-shared=no
    leftvti=10.255.255.6/30
# /etc/ipsec.d/uc3-t2.secrets
40.233.76.145 168.138.66.213 : PSK "<shared secret of tunnel 1>"

# /etc/ipsec.d/uc3.secrets
40.233.76.145 168.138.65.198 : PSK "<shared secret of tunnel 2>"
sudo systemctl enable --now ipsec
sudo systemctl restart ipsec

指摘する2つの設定があります。

イメージ

イメージ

イメージ

ステップ08: オンプレミス側でのBGPの構成

トンネルは稼働していますが、まだそれらを通り抜けるものはありません。それがBGPの仕事です。シミュレートされたオンプレミス・ルーター上では、BGPはFRRouting (FRR)によって提供されます。

これは、オンプレミス側で重複を処理する必要があるステップです。ルーターは実際のLAN 10.0.1.0/24を通知しないでください。DRGはアタッチされたVCNと重複するためその接頭辞を無視し、DRGのNATはそれをシャドウCIDRに変換しません。ルーターは、代わりに shadow CIDR 192.168.20.0/24を通知します。ルータのインタフェースにはその範囲のアドレスがないため、Null0への静的ルートは、BGPがアドバタイズできるようにするために必要な接頭辞をルーティング・テーブルに配置します。そのルートはパケットを処理しません。オンプレミスのトラフィックは、宛先がすでに10.0.1.xに変換されて到着します。

2つの接頭辞リストは、交換を明示します。ルーターは独自のシャドウCIDRのみをアドバタイズし、OCIのシャドウCIDRのみを受け入れます。2つ目のフィルタは重要です。これは、OracleがVCNの実際の10.0.1.0/24も通知し(ステップ09でその理由を確認)、その接頭辞がオンプレミスLAN自体であるためです。

sudo dnf -y install frr
sudo sed -i 's/^bgpd=no/bgpd=yes/' /etc/frr/daemons
frr defaults traditional
hostname uc3-inst-op
log syslog informational
service integrated-vtysh-config
!
! The on-premises shadow CIDR. It only exists so that BGP has something to advertise.
ip route 192.168.20.0/24 Null0
!
ip prefix-list TO-OCI seq 10 permit 192.168.20.0/24
ip prefix-list FROM-OCI seq 10 permit 192.168.10.0/24
!
router bgp 65000
 bgp router-id 10.0.99.146
 no bgp ebgp-requires-policy
 neighbor 10.255.255.1 remote-as 31898
 neighbor 10.255.255.1 description OCI-tunnel-1
 neighbor 10.255.255.1 timers 5 15
 neighbor 10.255.255.5 remote-as 31898
 neighbor 10.255.255.5 description OCI-tunnel-2
 neighbor 10.255.255.5 timers 5 15
 !
 address-family ipv4 unicast
  network 192.168.20.0/24
  neighbor 10.255.255.1 soft-reconfiguration inbound
  neighbor 10.255.255.1 prefix-list FROM-OCI in
  neighbor 10.255.255.1 prefix-list TO-OCI out
  neighbor 10.255.255.5 soft-reconfiguration inbound
  neighbor 10.255.255.5 prefix-list FROM-OCI in
  neighbor 10.255.255.5 prefix-list TO-OCI out
 exit-address-family
!
line vty
sudo chown frr:frr /etc/frr/frr.conf
sudo systemctl enable --now frr

イメージ

[!]ノート]行timers 5 15は、BGPキープアライブおよびホールド・タイムを5秒および15秒に設定します。デフォルトのホールドタイムが180秒の場合、ルータがトンネルが消えたことを認識するまでに最大3分かかります。ラボでは、1つのトンネルの障害により、これらのタイマーで約14秒のパケット損失が発生し、トンネルが戻ってきたときの損失は発生しませんでした。

ステップ09: DRGルート表の構成

DRGには2種類のアタッチメントがあり、各種類は独自のDRGルート表を取得します。BGPでは、これらのテーブルは2つのジョブを同時に実行します。パケットを転送し、BGP上で交換するものを決定します。

IPSecトンネル・アタッチメントのルート表では、VCNアタッチメントへの2つの静的ルートが取得され、それぞれが異なる理由により存在します:

搬送先 存在する理由
10.0.1.0/24 転送中。 オンプレミスからのパケットは最初にNATポリシーによって変換され、DRGは変換された宛先(VCNの実際のCIDR)を検索します。
192.168.10.0/24 広告。 DRGは、この表のルートをオンプレミス・ルーターに通知します。このルートにより、OCIのシャドウCIDRがアドバタイズされます。ルート検索の前に192.168.10.xのパケットが10.0.1.xに変換されたため、これを使用するパケットはありません。

これは、オーバーラップに対するOracleの回答の半分です。DRGは、アドバタイズするルートを変換しないため、シャドウCIDRを手動で表に入れる必要があります。

[!]ノート: 2番目のルートのみが静的である必要があります。このチュートリアルでは、インポート・ルート・ディストリビューションなしでカスタムDRGルート表を使用するため、最初の10.0.1.0/24はここでは静的です。IPSecアタッチメントの自動生成されたDRGルート表は、VCNアタッチメントから動的にルーティングされることを学習し、VCNアタッチメントを受け入れるインポート・ルート・ディストリビューションはカスタム表に対して同じことを行います。シャドウCIDR 192.168.10.0/24にはそのようなソースがありません。アタッチメントがそれを所有せず、NATポリシーによってそのルートが作成されないため、静的ルートが表に挿入する唯一の方法です。

イメージ

VCNアタッチメントのルート表は、VCNからのトラフィックを処理し、オンプレミス・シャドウCIDR 192.168.20.0/24にアドレス指定されます。この交通はトンネルに行かなければならない。DRGルート表の静的ルート・ルールは、IPSecトンネルを指すことができないため、ルートはインポート・ルート・ディストリビューションを持つトンネルからインポートされます。BGPでは、インポートされたルートはオンプレミス・ルーターがアドバタイズするルートです。

イメージ

イメージ

イメージ

[!]ノート]このルートがない場合、トンネルおよびBGPセッションが稼働していても、VCNからオンプレミスへのトラフィックはDRGに削除されます。最初にオンプレミス・ルーターが通知する内容を確認します(ステップ13)。

ステップ10: OCI側のVCNルート表の構成

VCN内のインスタンスは、オンプレミス・シャドウCIDRのトラフィックをDRGに送信する必要があります。

イメージ

ステップ11: DRG NATポリシーおよびルールを作成する

これは、チュートリアル全体の手順です。1つのルールを含む1つのDRG NATポリシーでは、両方向ですべての変換が実行されます。

ポリシーはIPSecトンネル・アタッチメントに関連付けられているため、ルールはオンプレミスから到着するトラフィックに対して書き込まれます。このようなパケットには、ソースとしてのオンプレミス・ホスト(10.0.1.x)と、宛先としてのOCIインスタンスのシャドウ・アドレス(192.168.10.x)があります。

  オリジナル 翻訳済 意味
ソース 10.0.1.0/24 192.168.20.0/24 オンプレミスの実際の住所は、OCIでは192.168.20.0/24として表示されます。
宛先 192.168.10.0/24 10.0.1.0/24 OCIのシャドウCIDRは、VCNの実際のCIDRに置き換えられます。

イメージ

イメージ

[!]ノート] VCNの観点から、ソース10.0.1.0/24を192.168.10.0/24に、宛先192.168.20.0/24を10.0.1.0/24に、このルールを記述しようとしています。このルールは警告なしで受け入れられますが、IPSecトンネル・アタッチメントではパケットに一致せず、トラフィックも通過しません。ポリシーを保持するアタッチメントを介してDRGに入るトラフィックのルールを常に書き込みます。

ステップ12: NATポリシーとIPSecトンネル・アタッチメントの関連付け

ポリシーは両方のIPSecトンネル・アタッチメントに関連付けられているため、どのトンネルがトラフィックを運んでも翻訳は同じになります。

イメージ

ステップ13:BGPルート交換の確認

トラフィックを送信する前に、このチュートリアルがシリーズの他のすべての部分と異なるので、BGP上で交換されるものを見る価値があります。このチェックは、オンプレミス・ルーターで実行されます。

イメージ

イメージ

イメージ

イメージ

OCIコンソールには、Oracle側からの同じ交換が表示されます。

イメージ

イメージ

イメージ

イメージ

受け取ったルートは、導入における声明の証明です。NATポリシーはこれらのトンネル・アタッチメントに関連付けられており、DRGは10.0.1.0/24を未翻訳のまま通知します。シャドウCIDR 192.168.10.0/24は、ステップ09で追加された静的ルートのためにのみ存在します。

[!]ノート]オンプレミス・ルーターが実際のCIDR 10.0.1.0/24をアドバタイズするとどうなりますか。演習では、DRGはDRGルート表にインポートせず、トンネルで受信したルートの中にもリストされませんでした。ルーターが192.168.20.0/24を通知した後にのみ、uc3-drgrt-vcn-oci内のルートが表示されます。

ステップ14: 接続のテスト

すべてが整っているので、パケットを送信する時間です。アドレスの最後のオクテットは1:1変換によって保存され、どのアドレスをpingにするかが示されます。

インスタンス 実際のIPアドレス 反対側から使用するアドレス
uc3-inst-oci 10.0.1.92 192.168.10.92
uc3-inst-op-lan 10.0.1.130 192.168.20.130

uc3-inst-ociからオンプレミス・ホストへの記録は次のようになります。

場所 ソース 搬送先 起きたこと
リーフuc3-inst-oci 10.0.1.92 192.168.20.130 ルート表uc3-rt-ociは、192.168.20.0/24をDRGに送信します。
uc3-drgrt-vcn-ociのルート参照 10.0.1.92 192.168.20.130 BGPで学習した192.168.20.0/24のルートは、IPSecトンネルを指します。
DRGをトンネル・アタッチメントに残します 192.168.10.92 10.0.1.130 DRGは、uc3-policy-ociのルールの逆を適用します。
オンプレミス・ルーター 192.168.10.92 10.0.1.130 パケットはトンネルから発信され、LANに転送されます。

そして、これは答えです:

場所 ソース 搬送先 起きたこと
リーフuc3-inst-op-lan 10.0.1.130 192.168.10.92 ルート表uc3-rt-opは、192.168.10.0/24をルーター10.0.1.164に送信します。
オンプレミス・ルーター 10.0.1.130 192.168.10.92 BGPで学習した192.168.10.0/24のルートは、トンネル・インタフェースを指します。
トンネル・アタッチメントのDRGを入力します 192.168.20.130 10.0.1.92 uc3-policy-ociのルールは、ソースと宛先を変換します。
uc3-drgrt-ipsecのルート参照 192.168.20.130 10.0.1.92 10.0.1.0/24はuc3-att-vcn-ociを指します。

イメージ

イメージ

オンプレミス・ホスト上のパケット・キャプチャでは、作業中の翻訳が表示されます。ホストは、OCIインスタンスの実際のアドレス10.0.1.92を認識せず、シャドウ・アドレスのみを認識します。

[opc@uc3-inst-op-lan ~]$ sudo tcpdump -ni any icmp
IP 10.0.1.130 > 192.168.10.92: ICMP echo request, id 18, seq 1, length 64
IP 192.168.10.92 > 10.0.1.130: ICMP echo reply, id 18, seq 1, length 64

[!]ノート] DRGのNATでは、DNSは変換されません。オンプレミス・システムがOCIシステムを名前または逆で検出した場合、使用するDNSレコードは、実際のものではなくシャドウ・アドレスを指している必要があります。

まとめ

OCI VCNと、まったく同じサブネットCIDRを持つオンプレミス・ネットワークは、サイト間VPNを介してBGP動的ルーティングと通信します。NATルールは、パート3と同じIPSecトンネル・アタッチメント上の単一のルールです。違いは、ルートが必要な場所に到達する方法です。

この部分の主な結果は、DRGとBGPのNATが互いに独立していることです。DRGはパケットを変換し、アドバタイズまたは受信したルートを変換しません。アタッチされたVCNと重複する実際のCIDRは、交換では使用されません。Oracleは未翻訳を通知し、受信時にDRGはそれを無視します。したがって、両側はシャドウCIDRを通知します。ルーター自体が発信する接頭辞であるオンプレミス側では、Oracle側では、通知する唯一の目的を持つトンネル・アタッチメントのDRGルート表内の静的ルートです。

NAT on DRG - Part 3 - Overlapping CIDRs between OCI and On-PremisesのポリシーベースのVPNと比較して、変換に合わせた暗号化ドメインがなく、トンネル間のフェイルオーバーはBGPによって処理されます。同じルーティング・モデル(BGPでのシャドウ接頭辞の交換)は、NATポリシーがFastConnect仮想回線アタッチメントに関連付けられている場合に想定されるものです。ただし、このシリーズではテストされていません。

確認

その他の学習リソース

docs.oracle.com/learnの他のラボを調べるか、Oracle Learning YouTubeチャネルで無料のラーニング・コンテンツにアクセスしてください。また、Oracle Learning Explorerになるには、education.oracle.com/learning-explorerにアクセスしてください。

製品ドキュメントについては、Oracle Help Centerを参照してください。