NAT no DRG - Parte 5 - Sobrepondo CIDRs entre o OCI e o On-Premises com BGP

Introdução

Em NAT no DRG - Parte 3 - Sobrepondo CIDRs entre o OCI e o Local, uma VCN do OCI (Oracle Cloud Infrastructure) e uma rede local com a mesma faixa de IP foram conectadas por meio de uma VPN Site a Site, com NAT no DRG fazendo a tradução nos anexos do túnel IPSec. Os túneis nessa parte eram baseados em política: o domínio de criptografia decidiu qual tráfego foi para o túnel e também era o local onde o Gateway de Roteamento Dinâmico (DRG) aprendeu sua rota para on-premises.

Esta parte cria o mesmo caso de uso com o roteamento dinâmico BGP. É assim que a maioria das VPNs de produção é construída, e é também como um circuito virtual FastConnect troca rotas, então o modelo de roteamento neste tutorial é o que se espera lá também. A topologia, os endereços e a regra NAT são idênticos à Parte 3:

Side CIDR da sub-rede real CIDR de sombra visto pelo outro lado
VCN do OCI uc3-vcn-oci 10.0.1.0/24 192.168.10.0/24
LAN local 10.0.1.0/24 192.168.20.0/24

O que muda é como cada lado aprende onde está o outro lado. Com o BGP, há uma pergunta que decide tudo: o DRG traduz as rotas que são trocadas pelo BGP? A resposta, testada para este tutorial, é não:

NAT no DRG traduz pacotes, não rotas. Portanto, com o BGP, você mesmo precisa colocar os CIDRs de sombra na troca de rotas, nos dois lados:

Direção O que deve ser anunciado Como
Do local para a Oracle 192.168.20.0/24 (o CIDR de sombra do local) O roteador on-premises o anuncia com BGP.
Oracle para local 192.168.10.0/24 (o CIDR de sombra do OCI) Uma rota estática para ela na tabela de roteamento do DRG dos anexos de túnel, que o DRG então divulga.

[!] OBSERVAÇÃO] Uma regra NAT descreve o tráfego que insere o DRG por meio do anexo que contém a política. Para um anexo de túnel IPSec que é o tráfego que chega on-premises. Para o tráfego que sai pelo túnel, o DRG aplica a tradução reversa automaticamente.

A rede on-premises é simulada com uma VCN em outra região, com uma instância do Oracle Linux que executa o Libreswan para os túneis IPSec e o FRRouting (FRR) para BGP. O laboratório é o da Parte 3 com a VPN convertida em BGP, e é por isso que os recursos nas capturas de tela são chamados de uc3-....

imagem

Outros casos de uso

Este tutorial faz parte de uma série. Cada parte resolve um cenário de sobreposição diferente com os mesmos blocos de construção.

Diagrama

IPs sobrepostos entre o CIDR da sub-rede VCN e a rede local ou remota com NAT 1:1 sem monitoramento de estado no DRG, com intercâmbio de rotas BGP pelos túneis IPSec

imagem

O diagrama mostra cada objeto que você configura neste tutorial:

Pré-requisitos

[!] NOTA] Os nomes, CIDRs e endereços IP neste tutorial vêm do laboratório nas capturas de tela. Você pode usar o seu, desde que os CIDRs de sombra não se sobreponham a nada mais em sua rede e tenham o mesmo tamanho de prefixo que o CIDR que eles substituem.

Etapas

Etapa 01: Revisar a VCN no lado do OCI

Começamos no lado da OCI com uma VCN comum, uma sub-rede pública e uma instância de teste.

imagem

imagem

imagem

O gateway de internet só está aqui para que você possa acessar a instância de teste via SSH.

imagem

imagem

Etapa 02: Revise a rede on-premises simulada

A rede on-premises é simulada com uma VCN em outra região. Ele usa o mesmo espaço de endereço do lado da OCI, que é o ponto principal deste tutorial. Se você tiver uma rede e um roteador on-premises reais, poderá ler essa etapa para referência e continuar com a Etapa 05.

imagem

imagem

A VCN tem duas sub-redes. Juntos, eles dão à instância do Libreswan os dois lados que um roteador real tem.

imagem

imagem

imagem

[!] OBSERVAÇÃO] A instância uc3-inst-op encaminha o tráfego que não é endereçado a si mesma. Para que isso funcione, a opção Ignorar verificação de origem/destino deve ser ativada em suas VNICs e o encaminhamento de IP deve ser ativado no sistema operacional (net.ipv4.ip_forward = 1).

Etapa 03: Configurar as listas de segurança

As listas de segurança devem permitir dois tipos de tráfego: o próprio túnel IPSec e o ping que usamos como teste.

O laboratório permite ICMP de todas as três faixas privadas. Isso é mais amplo do que este tutorial precisa. No lado do OCI, a única faixa que importa é o CIDR de sombra local 192.168.20.0/24. No lado on-premises simulado, você precisa do CIDR de sombra 192.168.10.0/24 do OCI e também do 10.0.1.0/24 local, porque o tráfego dos hosts de LAN passa pela VNIC de LAN do roteador Libreswan e a lista de segurança também é verificada lá.

imagem

imagem

[!] OBSERVAÇÃO] No OCI, as regras IPSec não são necessárias porque os túneis terminam no DRG e não em uma instância na VCN. Eles são necessários no lado on-premises simulado, onde os túneis terminam na instância do Libreswan.

Etapa 04: Configurar o roteamento no local

Os hosts locais devem saber como acessar o OCI. Eles usam o CIDR de sombra do OCI, 192.168.10.0/24, e a rota para ele aponta para o roteador local. O próprio roteador aprende esse prefixo com BGP na Etapa 08.

imagem

imagem

Etapa 05: Criar o DRG e anexar a VCN

De volta à OCI, criamos o DRG. Ele obtém um anexo de VCN agora, e dois anexos de túnel IPSec são adicionados automaticamente na próxima etapa.

imagem

imagem

imagem

[!] NOTA] As capturas de tela do DRG foram tiradas enquanto um dos dois túneis estava inativo. Elas mostram uma advertência de que a conexão IPSec tem apenas um único túnel ativo, e a lista DRG mostra Não redundante. O aviso desaparece quando ambos os túneis estão ativos.

Etapa 06: Criar a VPN Site a Site com roteamento dinâmico BGP

A VPN Site a Site conecta o DRG ao roteador on-premises. Ele precisa de um objeto CPE (customer-premises equipment) que represente o endereço IP público do roteador e uma conexão IPSec que crie dois túneis para redundância. A diferença com a Parte 3 é o tipo de roteamento dos túneis. Com o roteamento dinâmico BGP, cada túnel obtém:

Túnel Endereço IP da Oracle VPN Dentro do IP, Oracle Dentro do IP, no local AS On-premises
1 168.138.66.213 10.255.255.1/30 10.255.255.2/30 65000
2 168.138.65.198 10.255.255.5/30 10.255.255.6/30 65000

imagem

imagem

imagem

imagem

imagem

Se você começar pela VPN baseada em política da Parte 3, não precisará criar uma nova conexão IPSec. Você pode editar cada túnel e alterar seu tipo de roteamento. Com a CLI do OCI semelhante a esta para o primeiro túnel:

cat > tunnel-1-bgp.json <<'EOF'
{
  "routing": "BGP",
  "bgpSessionConfig": {
    "oracleInterfaceIp": "10.255.255.1/30",
    "customerInterfaceIp": "10.255.255.2/30",
    "customerBgpAsn": "65000"
  }
}
EOF

oci raw-request --http-method PUT \
  --target-uri "https://iaas.ca-montreal-1.oraclecloud.com/20160918/ipsecConnections/<ipsec_connection_ocid>/tunnels/<tunnel_ocid>" \
  --request-body file://tunnel-1-bgp.json

[!] OBSERVAÇÃO] A alteração do tipo de roteamento reprovisiona o túnel e remove seu domínio de criptografia. O túnel permanece inativo até que o roteador on-premises seja alterado para uma configuração baseada em rota também.

Etapa 07: Configurar o Libreswan no lado local

O roteador on-premises precisa de uma configuração IPSec baseada em rota: uma interface de túnel por túnel e seletores de tráfego que aceitam tudo. Se você usar um roteador real, configure-o com IKEv1, uma chave pré-compartilhada, uma interface de túnel por túnel com os endereços internos da Etapa 06 e 0.0.0.0/0 como seletor de tráfego local e remoto.

Com o Libreswan, uma interface de túnel é uma interface VTI. Ambas as conexões têm os mesmos seletores (0.0.0.0/0 em ambos os lados), portanto cada uma obtém sua própria marca. A marca é o que permite que o kernel do Linux mantenha os dois túneis separados, e também é o que impede que os seletores 0.0.0.0/0 capturem todo o outro tráfego do roteador: apenas o tráfego roteado em uma interface VTI recebe a marca e é criptografado.

conn uc3-t2
    auto=start
    authby=secret
    keyexchange=ike
    ikev2=no
    type=tunnel
    left=%defaultroute
    leftid=40.233.76.145
    leftsubnet=0.0.0.0/0
    right=168.138.66.213
    rightid=168.138.66.213
    rightsubnet=0.0.0.0/0
    ike=aes256-sha256;modp1536
    phase2alg=aes256-sha256
    pfs=yes
    encapsulation=yes
    ikelifetime=28800s
    salifetime=3600s
    mark=1/0xffffffff
    vti-interface=vti1
    vti-routing=no
    vti-shared=no
    leftvti=10.255.255.2/30
conn uc3
    auto=start
    authby=secret
    keyexchange=ike
    ikev2=no
    type=tunnel
    left=%defaultroute
    leftid=40.233.76.145
    leftsubnet=0.0.0.0/0
    right=168.138.65.198
    rightid=168.138.65.198
    rightsubnet=0.0.0.0/0
    ike=aes256-sha256;modp1536
    phase2alg=aes256-sha256
    pfs=yes
    encapsulation=yes
    ikelifetime=28800s
    salifetime=3600s
    mark=2/0xffffffff
    vti-interface=vti2
    vti-routing=no
    vti-shared=no
    leftvti=10.255.255.6/30
# /etc/ipsec.d/uc3-t2.secrets
40.233.76.145 168.138.66.213 : PSK "<shared secret of tunnel 1>"

# /etc/ipsec.d/uc3.secrets
40.233.76.145 168.138.65.198 : PSK "<shared secret of tunnel 2>"
sudo systemctl enable --now ipsec
sudo systemctl restart ipsec

Há duas configurações a serem destacadas:

imagem

imagem

imagem

Etapa 08: Configurar o BGP no lado local

Os túneis estão em cima, mas nada é roteado através deles ainda. Esse é o trabalho do BGP. No roteador on-premises simulado, o BGP é fornecido pelo FRRouting (FRR).

Esta é a etapa em que a sobreposição deve ser tratada no lado on-premises. O roteador não deve divulgar sua LAN real 10.0.1.0/24: o DRG ignora esse prefixo, porque ele se sobrepõe à VCN anexada, e o NAT no DRG não o traduz no CIDR de sombra. O roteador anuncia o shadow CIDR 192.168.20.0/24. Nenhuma interface no roteador tem um endereço nesse intervalo, portanto, uma rota estática para Null0 coloca o prefixo na tabela de roteamento, que é o que o BGP precisa para poder divulgá-lo. Essa rota nunca trata um pacote: o tráfego on-premises chega com seu destino já traduzido de volta para 10.0.1.x.

As duas listas de prefixos tornam a troca explícita. O roteador só anuncia seu próprio CIDR de sombra e só aceita o CIDR de sombra do OCI. O segundo filtro é importante porque a Oracle também divulga o 10.0.1.0/24 real da VCN (você vê por que na Etapa 09) e esse prefixo é a própria LAN local.

sudo dnf -y install frr
sudo sed -i 's/^bgpd=no/bgpd=yes/' /etc/frr/daemons
frr defaults traditional
hostname uc3-inst-op
log syslog informational
service integrated-vtysh-config
!
! The on-premises shadow CIDR. It only exists so that BGP has something to advertise.
ip route 192.168.20.0/24 Null0
!
ip prefix-list TO-OCI seq 10 permit 192.168.20.0/24
ip prefix-list FROM-OCI seq 10 permit 192.168.10.0/24
!
router bgp 65000
 bgp router-id 10.0.99.146
 no bgp ebgp-requires-policy
 neighbor 10.255.255.1 remote-as 31898
 neighbor 10.255.255.1 description OCI-tunnel-1
 neighbor 10.255.255.1 timers 5 15
 neighbor 10.255.255.5 remote-as 31898
 neighbor 10.255.255.5 description OCI-tunnel-2
 neighbor 10.255.255.5 timers 5 15
 !
 address-family ipv4 unicast
  network 192.168.20.0/24
  neighbor 10.255.255.1 soft-reconfiguration inbound
  neighbor 10.255.255.1 prefix-list FROM-OCI in
  neighbor 10.255.255.1 prefix-list TO-OCI out
  neighbor 10.255.255.5 soft-reconfiguration inbound
  neighbor 10.255.255.5 prefix-list FROM-OCI in
  neighbor 10.255.255.5 prefix-list TO-OCI out
 exit-address-family
!
line vty
sudo chown frr:frr /etc/frr/frr.conf
sudo systemctl enable --now frr

imagem

[!] NOTA] A linha timers 5 15 define o BGP keepalive e o tempo de espera para 5 e 15 segundos. Com o tempo de espera padrão de 180 segundos, leva até três minutos antes que o roteador perceba que um túnel se foi. No laboratório, uma falha de um túnel causou cerca de 14 segundos de perda de pacotes com esses temporizadores, e nenhuma perda quando o túnel voltou.

Etapa 09: Configurar as tabelas de roteamento do DRG

O DRG tem dois tipos de anexos, e cada tipo obtém sua própria tabela de roteamento do DRG. Com BGP estas tabelas fazem dois trabalhos de uma só vez: eles encaminham pacotes, e eles decidem o que é trocado sobre BGP.

A tabela de roteamento dos anexos de túnel IPSec obtém duas rotas estáticas, ambas para o anexo da VCN, e cada uma delas está lá por outro motivo:

Destino Por que isso existe
10.0.1.0/24 Encaminhamento. Um pacote on-premises é traduzido pela política NAT primeiro e o DRG procura o destino traduzido, que é o CIDR real da VCN.
192.168.10.0/24 Publicidade. O DRG divulga as rotas dessa tabela para o roteador local. Essa rota faz com que ela anuncie o CIDR de sombra do OCI. Nenhum pacote o usa porque um pacote para 192.168.10.x foi traduzido para 10.0.1.x antes da pesquisa de rota.

Esta é a metade da resposta da Oracle à sobreposição: o DRG não traduz as rotas que ele anuncia; portanto, o CIDR de sombra deve ser colocado na tabela manualmente.

[!] NOTA] Apenas a segunda rota deve ser estática. O primeiro, 10.0.1.0/24, está estático aqui porque este tutorial usa uma tabela de roteamento do DRG personalizada sem uma distribuição de rota de importação. A tabela de roteamento do DRG gerada automaticamente para anexos IPSec aprende que a rota é dinâmica com base no anexo da VCN, e uma distribuição de rota de importação que aceita o anexo da VCN faz o mesmo para uma tabela personalizada. O CIDR de sombra 192.168.10.0/24 não tem essa origem: nenhum anexo a possui e a política NAT não cria uma rota para ela, portanto, uma rota estática é a única maneira de obtê-la na tabela.

imagem

A tabela de roteamento do anexo da VCN trata o tráfego proveniente da VCN e é endereçado ao CIDR de sombra local 192.168.20.0/24. Esse tráfego tem que ir para um túnel. Uma regra de roteamento estático em uma tabela de roteamento do DRG não pode apontar para um túnel IPSec; portanto, a rota é importada dos túneis com uma distribuição de rota de importação. Com o BGP, a rota importada é aquela que o roteador on-premises anuncia.

imagem

imagem

imagem

[!] OBSERVAÇÃO] Se essa rota estiver ausente, o tráfego da VCN para o local será eliminado no DRG, mesmo que os túneis e as sessões BGP estejam ativos. Verifique o que o roteador on-premises anuncia (etapa 13) primeiro.

Etapa 10: Configurar a tabela de roteamento da VCN no lado do OCI

As instâncias na VCN devem enviar o tráfego do CIDR de sombra local para o DRG.

imagem

Etapa 11: Criar a política e a regra NAT do DRG

Este é o passo que todo o tutorial é sobre. Uma política NAT do DRG com uma regra faz toda a tradução, em ambas as direções.

A política está associada aos anexos do túnel IPSec; portanto, a regra é gravada para tráfego que chega de on-premises. Esse pacote tem um host local como origem (10.0.1.x) e o endereço de sombra de uma instância do OCI como destino (192.168.10.x):

  Original Traduzido Significado
Origem 10.0.1.0/24 192.168.20.0/24 Os endereços reais on-premises são apresentados na OCI como 192.168.20.0/24.
Destino 192.168.10.0/24 10.0.1.0/24 O CIDR de sombra do OCI é substituído pelo CIDR real da VCN.

imagem

imagem

[!] OBSERVAÇÃO] É tentador gravar essa regra do ponto de vista da VCN: origem 10.0.1.0/24 para 192.168.10.0/24 e destino 192.168.20.0/24 para 10.0.1.0/24. Essa regra é aceita sem qualquer aviso, mas em um anexo de túnel IPSec ele nunca corresponde a um pacote e nenhum tráfego passa. Sempre grave a regra para o tráfego que entra no DRG por meio do anexo que contém a política.

Etapa 12: Associar a política NAT aos anexos de túnel IPSec

A política está associada aos dois anexos do túnel IPSec, de modo que a tradução seja a mesma, independentemente do túnel que transporta o tráfego.

imagem

Etapa 13: Verificar a troca de rotas BGP

Antes de enviar tráfego vale a pena olhar para o que é trocado em BGP, porque é aqui que este tutorial difere de todas as outras partes da série. A verificação é feita no roteador local.

imagem

imagem

imagem

imagem

A Console do OCI mostra a mesma troca do lado Oracle.

imagem

imagem

imagem

imagem

As rotas recebidas são a prova da declaração na introdução. Uma política NAT está associada a esses anexos de túnel e o DRG ainda divulga 10.0.1.0/24 não traduzido. O CIDR de sombra 192.168.10.0/24 só existe por causa da rota estática que foi adicionada na Etapa 09.

[!] OBSERVAÇÃO] O que acontece quando o roteador on-premises anuncia seu CIDR real 10.0.1.0/24? No laboratório, o DRG não o importou para nenhuma tabela de roteamento do DRG e nem sequer foi listado entre as rotas recebidas no túnel. Somente depois que o roteador anunciou que 192.168.20.0/24 fez a rota em uc3-drgrt-vcn-oci aparecer.

Etapa 14: Testar a conectividade

Tudo está no lugar, então é hora de enviar um pacote. O último octeto de um endereço é preservado pela tradução 1:1, que lhe diz qual endereço para ping:

Instância Endereço IP real Endereço a ser usado do outro lado
uc3-inst-oci 10.0.1.92 192.168.10.92
uc3-inst-op-lan 10.0.1.130 192.168.20.130

Isso é o que acontece com um ping do uc3-inst-oci para o host local:

Onde Origem Destino O que acontece
Deixa uc3-inst-oci 10.0.1.92 192.168.20.130 A tabela de roteamento uc3-rt-oci envia 192.168.20.0/24 para o DRG.
Pesquisa de rota em uc3-drgrt-vcn-oci 10.0.1.92 192.168.20.130 A rota para 192.168.20.0/24, aprendida com BGP, aponta para um túnel IPSec.
Deixa o DRG no anexo de túnel 192.168.10.92 10.0.1.130 O DRG aplica o reverso da regra em uc3-policy-oci.
Roteador on-premises 192.168.10.92 10.0.1.130 O pacote sai do túnel e é encaminhado para a LAN.

E esta é a resposta:

Onde Origem Destino O que acontece
Deixa uc3-inst-op-lan 10.0.1.130 192.168.10.92 A tabela de roteamento uc3-rt-op envia 192.168.10.0/24 para o roteador 10.0.1.164.
Roteador on-premises 10.0.1.130 192.168.10.92 A rota para 192.168.10.0/24, aprendida com BGP, aponta para uma interface de túnel.
Insere o DRG no anexo de túnel 192.168.20.130 10.0.1.92 A regra em uc3-policy-oci traduz origem e destino.
Pesquisa de rota em uc3-drgrt-ipsec 192.168.20.130 10.0.1.92 10.0.1.0/24 aponta para uc3-att-vcn-oci.

imagem

imagem

Uma captura de pacote no host local mostra a tradução no trabalho. O host nunca vê o endereço real 10.0.1.92 da instância do OCI, apenas seu endereço de sombra:

[opc@uc3-inst-op-lan ~]$ sudo tcpdump -ni any icmp
IP 10.0.1.130 > 192.168.10.92: ICMP echo request, id 18, seq 1, length 64
IP 192.168.10.92 > 10.0.1.130: ICMP echo reply, id 18, seq 1, length 64

[!] NOTA] NAT no DRG não traduz DNS. Se os sistemas on-premises encontrarem os sistemas OCI por nome ou o contrário, os registros de DNS que eles usam deverão apontar para os endereços shadow, não para os reais.

Conclusão

Uma VCN do OCI e uma rede local com exatamente o mesmo CIDR de sub-rede se comunicam por meio de uma VPN Site a Site com roteamento dinâmico BGP. A regra NAT é a mesma regra única da Parte 3, nos mesmos anexos de túnel IPSec. O que é diferente é a maneira como as rotas chegam onde precisam estar.

A principal descoberta desta parte é que o NAT no DRG e no BGP são independentes uns dos outros. O DRG traduz pacotes e não traduz as rotas que ele anuncia ou recebe. Um CIDR real que se sobrepõe a uma VCN anexada não é útil na troca: a Oracle o divulga não traduzido e o DRG o ignora quando é recebido. Portanto, os dois lados divulgam seu CIDR shadow. No lado on-premises que é um prefixo, o roteador se origina e, no lado Oracle, é uma rota estática na tabela de roteamento do DRG dos anexos de túnel cuja única finalidade é ser divulgada.

Em comparação com a VPN baseada em política do NAT no DRG - Parte 3 - CIDRs Sobrepostos entre o OCI e o On-Premises, não há domínio de criptografia para se manter em linha com a tradução, e o failover entre os túneis é tratado pelo BGP. O mesmo modelo de roteamento, uma troca de prefixos de sombra sobre BGP, é o que esperar quando a política NAT está associada a um anexo de circuito virtual FastConnect, embora isso não tenha sido testado para essa série.

Confirmações

Mais Recursos de Aprendizado

Explore outros laboratórios em docs.oracle.com/learn ou acesse mais conteúdo de aprendizado gratuito no canal do Oracle Learning YouTube. Além disso, acesse education.oracle.com/learning-explorer para se tornar um Oracle Learning Explorer.

Para obter a documentação do produto, visite o Oracle Help Center.