基于 DRG 的 NAT —第 3 部分— OCI 与内部部署之间的 CIDR 重叠

简介

Oracle Cloud Infrastructure (OCI) 和本地网络之间存在 IP 重叠,是一个非常痛苦的地方。在 OCI 中,您仍可以使用不同的 CIDR 重新创建 VCN。由于云项目选择了相同的 10.0.0.0/16,因此不会重新处理具有数千个设备的内部部署网络。当您通过 VPN 连接合作伙伴或客户且在他们的地址计划中没有发言权时,也会出现同样的问题。

通过 DRG 上的 NAT ,动态路由网关 (Dynamic Routing Gateway,DRG) 可以转换站点到站点 VPN 本身上的地址。DRG NAT 策略与 IPSec 隧道附加关联,每一端都显示在唯一的“影子”CIDR 下:

侧边 实际子网 CIDR 在另一端看到的影子 CIDR
OCI VCN uc3-vcn-oci 10.0.1.0/24 192.168.10.0/24
内部部署局域网 10.0.1.0/24 192.168.20.0/24

OCI 中的实例到达 192.168.20.x 上的内部部署主机,内部部署主机到达 192.168.10.x 上的 OCI。内部部署路由器根本不需要 NAT 配置:所有转换都由 DRG 完成。

这个部分比以前的部分有更多的移动部件,因为 VPN 带来了自己的两件事:

[!] 注意 ] NAT 规则描述通过保存策略的附加输入 DRG 的流量。对于从内部部署到达的通信的 IPSec 隧道附件。对于通过隧道离开的流量,DRG 会自动应用反向转换。

在本教程中,使用另一个区域中的第二个 VCN 模拟内部部署网络,并使用 Libreswan 实例作为客户内部部署设备 (customer-premises equipment,CPE)。OCI 端的所有内容都完全符合您对真正的本地路由器的配置。

图像

其他用例

本教程是五个系列的一部分。每个部分都使用相同的构建块解决不同的重叠场景。

图表

在 DRG 上使用无状态 1:1 NAT 的 VCN 子网 CIDR 与内部部署或远程网络之间重叠 IP

图像

该图显示了您在本教程中配置的每个对象:

先决条件

[!] 注意 ] 本教程中的名称、CIDR 和 IP 地址来自屏幕截图中的实验室。您可以自己使用,只要影子 CIDR 与网络中的任何其他内容不重叠,并且其前缀长度与它们替换的 CIDR 相同。

步骤

步骤 01:查看 OCI 端的 VCN

我们从 OCI 端开始使用普通 VCN、一个公共子网和一个测试实例。

图像

图像

图像

互联网网关仅在此处,以便您可以通过 SSH 访问测试实例。

图像

图像

步骤 02:查看模拟的内部部署网络

内部部署网络使用另一个区域中的 VCN 进行模拟。它使用与 OCI 端相同的地址空间,这是本教程的全部要点。如果您拥有真正的本地网络和路由器,您可以阅读此步骤以供参考,并继续执行步骤 05。

图像

图像

VCN 有两个子网。它们一起为 Libreswan 实例提供真实路由器的两端。

图像

图像

图像

[!] 注意 ] 实例 uc3-inst-op 将转发未发送给其自身的流量。要做到这一点,必须在 VNIC 上启用 Skip source/destination check ,并且必须在操作系统 (net.ipv4.ip_forward = 1) 中启用 IP 转发。

步骤 03:配置安全列表

安全列表必须允许两种流量:IPSec 隧道本身和我们用作测试的 ping。

该实验室允许 ICMP 从所有三个私人范围。这比本教程需要的范围更广。在 OCI 方面,唯一重要的领域是本地影子 CIDR 192.168.20.0/24。在模拟的本地部署端,您需要 OCI 影子 CIDR 192.168.10.0/24 和本地 10.0.1.0/24,因为来自 LAN 主机的流量通过 Libreswan 路由器的 LAN VNIC,并且会在那里检查安全列表。

图像

图像

[!] 注意 ] 在 OCI 端,不需要 IPSec 规则,因为隧道在 DRG 上结束,而不是在 VCN 中的实例上。在 Libreswan 实例上,隧道位于模拟的本地端,因此需要这些隧道。

步骤 04:在内部部署端配置路由

本地部署主机必须知道如何访问 OCI。他们使用 OCI 端的影子 CIDR 192.168.10.0/24,其路由指向内部部署路由器。这是内部部署网络必须了解的有关翻译的唯一信息。

图像

图像

步骤 05:创建 DRG 并附加 VCN

回到 OCI 端,我们创建了 DRG。现在将获取 VCN 附加,并在下一步中自动添加两个 IPSec 隧道附加。

图像

图像

图像

[!] 注意:屏幕截图显示一条警告,指出 IPSec 连接只有一个活动隧道,并且 DRG 列表显示不冗余。他们被带走了,两条隧道中的一条倒塌了。当两个隧道都启动时,警告将消失。

步骤 06:创建站点到站点 VPN

站点到站点 VPN 将 DRG 连接到内部部署路由器。它需要一个表示路由器的公共 IP 地址的客户终端设备 (customer-premises equipment,CPE) 对象,以及一个创建两个隧道以实现冗余的 IPSec 连接。

图像

图像

图像

步骤 07:配置隧道的加密域

此步骤特定于基于策略的 VPN 在 DRG 上的 NAT,而配置通常会出现错误。基于策略的隧道具有加密域:Oracle 端的 CIDR 列表和内部部署端的 CIDR 列表。隧道只在这些 CIDR 之间运输。

DRG 在数据包进入隧道后以及数据包发布之前应用 NAT 规则。因此,隧道内部的数据包如下所示:

隧道的侧面 隧道内部的地址 使用理由
Oracle 192.168.10.0/24 OCI 端已转换为其影子 CIDR。
内部部署 10.0.1.0/24 本地部署端使用其真实地址。它没有意识到任何 NAT。

因此,加密域的 Oracle 端是 OCI 的影子 CIDR,而不是 VCN 的实际 CIDR。

编辑加密域还有另一个原因。在基于策略的模式下,DRG 从加密域的内部部署 CIDR 中了解其通往隧道的路由。真正的内部部署 CIDR 10.0.1.0/24 与 VCN 重叠,不会为 DRG 提供可用的路由。OCI 中的实例将流量发送到内部部署影子 CIDR 192.168.20.0/24,因此这是 DRG 需要路由的目标。我们通过添加 192.168.20.0/24 作为第二个内部部署 CIDR 来获得该路由。

您可以使用 OCI CLI 执行同样的操作。对两个隧道重复以下命令:

cat > tunnel-encryption-domain.json <<'EOF'
{
  "routing": "POLICY",
  "encryptionDomainConfig": {
    "oracleTrafficSelector": ["192.168.10.0/24"],
    "cpeTrafficSelector": ["10.0.1.0/24", "192.168.20.0/24"]
  }
}
EOF

oci raw-request --http-method PUT \
  --target-uri "https://iaas.ca-montreal-1.oraclecloud.com/20160918/ipsecConnections/<ipsec_connection_ocid>/tunnels/<tunnel_ocid>" \
  --request-body file://tunnel-encryption-domain.json

[!] 注意 ] 内部部署 CIDR 192.168.20.0/24 从不通过隧道传送流量。其唯一目的是为 DRG 提供指向隧道的内部部署影子 CIDR 的路由。内部部署路由器配置有单对 10.0.1.0/24 和 192.168.10.0/24,如下一步所示。

[!] 注意 ] 更改加密域将重新配置隧道。预计它会下降大约半分钟。

步骤 08:在内部部署端配置 Libreswan

现在,内部部署路由器配置为启动两个隧道。如果使用实际路由器,请使用以下步骤中的值配置它:IKEv1、预共享密钥以及流量选择器 10.0.1.0/24(本地)和 192.168.10.0/24(远程)。

对于 Libreswan,有一件事需要处理。两个隧道使用完全相同的流量选择器,并且 Linux 内核只能为给定的一对子网保存一个 IPSec 策略。两个具有相同选择器的纯连接始终相互采用该策略,并且隧道翻转。解决方案是为每个连接提供自己的标记和自己的 VTI 接口,以便内核可以区分它们。

conn uc3-t2
    auto=start
    authby=secret
    keyexchange=ike
    ikev2=no
    type=tunnel
    left=%defaultroute
    leftid=40.233.76.145
    leftsubnet=10.0.1.0/24
    right=168.138.66.213
    rightid=168.138.66.213
    rightsubnet=192.168.10.0/24
    ike=aes256-sha256;modp1536
    phase2alg=aes256-sha256
    pfs=yes
    encapsulation=yes
    ikelifetime=28800s
    salifetime=3600s
    mark=1/0xffffffff
    vti-interface=vti1
    vti-routing=no
    vti-shared=no
conn uc3
    auto=start
    authby=secret
    keyexchange=ike
    ikev2=no
    type=tunnel
    left=%defaultroute
    leftid=40.233.76.145
    leftsubnet=10.0.1.0/24
    right=168.138.65.198
    rightid=168.138.65.198
    rightsubnet=192.168.10.0/24
    ike=aes256-sha256;modp1536
    phase2alg=aes256-sha256
    pfs=yes
    encapsulation=yes
    ikelifetime=28800s
    salifetime=3600s
    mark=2/0xffffffff
    vti-interface=vti2
    vti-routing=no
    vti-shared=no
# /etc/ipsec.d/uc3-t2.secrets
40.233.76.145 168.138.66.213 : PSK "<shared secret of tunnel 1>"

# /etc/ipsec.d/uc3.secrets
40.233.76.145 168.138.65.198 : PSK "<shared secret of tunnel 2>"
sudo systemctl enable --now ipsec
sudo systemctl restart ipsec

请注意,leftsubnet 是真正的内部部署 CIDR,rightsubnet 是 OCI 的影子 CIDR。这与步骤 07 中的加密域匹配。

最后一部分是通往 OCI 影子 CIDR 的路由。使用 vti-routing=no 时,Libreswan 不会添加路由本身,因此我们使用不同的度量为每个隧道添加一个路由。首选第一条隧道,第二条隧道在第一条隧道出现故障时接管。

sudo ip route replace 192.168.10.0/24 dev vti1 metric 100
sudo ip route replace 192.168.10.0/24 dev vti2 metric 200

[!] 注意:使用 ip route 添加的路由在重新引导后丢失,通过关闭的隧道的路由将流量发送到黑洞。在实验室中,一个小型 systemd 服务每隔几秒钟检查哪条隧道具有活动安全关联 (ipsec whack --trafficstatus),并相应地添加或删除每个隧道的路由。生产路由器对此有自己的机制。

图像

图像

图像

[!] 注意 ] 控制台还列出了 192.168.20.0/24 的条目,但内部部署路由器仅配置了 10.0.1.0/24 和 192.168.10.0/24 对,这是唯一一对传输流量。

步骤 09:配置 DRG 路由表

DRG 现在有两种连接,每种连接都有自己的 DRG 路由表。

IPSec 隧道附件的路由表用于处理来自内部部署的流量。隧道附加上的 NAT 策略首先转换包,然后 DRG 查找转换的目标。该目的地是 VCN 的实际 CIDR,因此该表具有指向 VCN 附加的 10.0.1.0/24 的静态路由。

图像

[!] 注意:此路由是静态的,因为本教程使用了没有导入路由分配的自定义 DRG 路由表。为 IPSec 附加自动生成的 DRG 路由表从 VCN 附加动态学习 10.0.1.0/24,接受 VCN 附加的导入路由分配对定制表执行相同的操作。

VCN 附加的路由表用于处理来自 VCN 的流量,这些流量将发送到内部部署影子 CIDR 192.168.20.0/24。这条路必须通往隧道。您无法将该路由创建为静态路由:DRG 路由表中的静态路由规则接受 VCN 附加或远程对等连接作为下一个跃点,但不接受 IPSec 隧道。必须通过导入路由分配来动态学习路由。

图像

图像

图像

[!] 注意 ] 如果缺少此路由,即使隧道已启动并且 NAT 规则正确无误,DRG 也会丢弃从 VCN 到内部部署的流量。首先检查加密域(步骤 07)的内部部署 CIDR 块。

步骤 10:在 OCI 端配置 VCN 路由表

VCN 中的实例必须将内部部署影子 CIDR 的流量发送到 DRG。

图像

步骤 11:创建 DRG NAT 策略和规则

这是整个教程的步骤。一个具有一个规则的 DRG NAT 策略会向两个方向执行所有转换。

该策略与 IPSec 隧道附件关联,因此将针对从内部部署传输的流量编写规则。此类数据包具有作为源的内部部署主机 (10.0.1.x) 和作为目标的 OCI 实例的影子地址 (192.168.10.x):

  原始 已转换 含义
源 10.0.1.0/24 192.168.20.0/24 本地部署的真实地址在 OCI 中显示为 192.168.20.0/24。
目的地 192.168.10.0/24 10.0.1.0/24 OCI 的影子 CIDR 将替换为 VCN 的实际 CIDR。

图像

图像

[!] 注意:从 VCN 的角度来看,编写此规则很有诱惑力:源 10.0.1.0/24 到 192.168.10.0/24,目标 192.168.20.0/24 到 10.0.1.0/24。接受该规则时没有任何警告,但在 IPSec 隧道附件上,它从不与包匹配,也不通过通信。始终为通过保存策略的附加进入 DRG 的流量编写规则。

步骤 12:将 NAT 策略与 IPSec 隧道附加关联

该策略与两个 IPSec 隧道附加相关联,因此无论哪个隧道承载流量,转换都是相同的。

图像

步骤 13:测试连接

一切都在原地,所以是时候发送一个包了。地址的最后八位字节由 1:1 翻译保留,该翻译告诉你要 ping 的地址:

实例 真实 IP 地址 要从另一端使用的地址
uc3-inst-oci 10.0.1.92 192.168.10.92
uc3-inst-op-lan 10.0.1.130 192.168.20.130

这是从 uc3-inst-oci 到内部部署主机的 ping 操作:

地点 来源 目的地 发生的情况
离开 uc3-inst-oci 10.0.1.92 192.168.20.130 路由表 uc3-rt-oci 将 192.168.20.0/24 发送到 DRG。
uc3-drgrt-vcn-oci 中的路由查找 10.0.1.92 192.168.20.130 192.168.20.0/24 的动态路由指向 IPSec 隧道。
将 DRG 保留在隧道附加上 192.168.10.92 10.0.1.130 DRG 将应用 uc3-policy-oci 中规则的反向操作。数据包现在与加密域匹配。
到达 uc3-inst-op-lan 192.168.10.92 10.0.1.130 主机从 OCI 实例的影子地址中看到 ping。

这就是答案:

地点 来源 目的地 发生的情况
离开 uc3-inst-op-lan 10.0.1.130 192.168.10.92 路由表 uc3-rt-op 将 192.168.10.0/24 发送到路由器 10.0.1.164。
内部部署路由器 10.0.1.130 192.168.10.92 数据包与隧道选择器匹配并且已加密。
在隧道附加上输入 DRG 192.168.20.130 10.0.1.92 uc3-policy-oci 中的规则将转换源和目标。
uc3-drgrt-ipsec 中的路由查找 192.168.20.130 10.0.1.92 10.0.1.0/24 指向 uc3-att-vcn-oci。

图像

图像

内部部署主机上的数据包捕获显示工作中的转换。主机从未看到 OCI 实例的真实地址 10.0.1.92,仅看到其影子地址:

[opc@uc3-inst-op-lan ~]$ sudo tcpdump -ni any icmp
IP 192.168.10.92 > 10.0.1.130: ICMP echo request, id 11, seq 1, length 64
IP 10.0.1.130 > 192.168.10.92: ICMP echo reply, id 11, seq 1, length 64

[!] 注意 ] 注意 DRG 上的 NAT 不会转换 DNS。如果本地系统按名称或其他方式查找 OCI 系统,则他们使用的 DNS 记录必须指向影子地址,而不是实际地址。

结论

现在,OCI VCN 和具有完全相同子网 CIDR 的内部部署网络通过站点到站点 VPN 进行通信。没有任何内容需要重新处理,内部部署路由器根本不执行 NAT。它只需要具有正确选择器的隧道以及到 OCI 影子 CIDR 的路由。转换由 DRG 在 IPSec 隧道附加上完成,并具有单个规则。

与早期部分相比,VPN 增加了两个容易错过的要求。加密域必须描述隧道内的数据包,这意味着 Oracle 端的影子 CIDR 和内部部署端的真实 CIDR。由于静态 DRG 路由无法指向 IPSec 隧道,因此必须从隧道中学习到内部部署影子 CIDR 的路由,方法是将影子 CIDR 添加到加密域的内部部署端并将其导入到 VCN 附加的 DRG 路由表中。

该规则本身遵循与系列其余部分相同的原则:它针对通过保存策略的附加进入 DRG 的流量编写。在 NAT on DRG - Part 4 - Shared Services VCN 中,仅将同一技术与源 NAT 一起使用,以便为多个重叠的 VCN 提供对一个共享服务 VCN 的访问权限。

确认

更多学习资源

通过 docs.oracle.com/learn 浏览其他实验室,或者通过 Oracle Learning YouTube 频道访问更多免费学习内容。此外,请访问 education.oracle.com/learning-explorer 以成为 Oracle Learning Explorer。

有关产品文档,请访问 Oracle 帮助中心。