Amazon Route 53 ResolverインバウンドエンドポイントとDHCPオプションセットで、DNS Firewallを共通VPCに集約する方法を実機検証した

記事タイトルとURLをコピーする

こんにちは。クロスインダストリー第1本部クラウドコンサルティング2課の清水です。

以前、「共通(アウトバウンド)VPCにDNS Firewallルールグループを1つだけ関連付ければ、配下の個別VPCすべての名前解決を一括でフィルタできるのでは」という設計を実機で検証しました(詳しくはこちらの記事で解説しています)。この「転送ルール方式」は、個別VPCから共通VPCへ、特定ドメイン宛のDNSクエリだけをResolverの転送ルールで送り込む仕組みです。ところが検証の結果、DNS Firewallは「関連付けたVPC自身が送出するDNSクエリ」しか評価せず、転送ルールで共通VPC側に送り込んだクエリまでは評価対象に含まれない、ということが分かりました。

「では、共通VPCに1箇所だけDNS Firewallを置いて集中管理する、という当初の狙いはまるごと諦めるしかないのか」、この記事を書き終えたあともこの疑問が引っかかったままでした。調べてみると、AWS公式ドキュメントに次のような記載を見つけました。

DNS queries that pass through Resolver endpoints from on-premises resources into that same VPC that has DNS Firewall associated to its resolver.

出典: How Resolver DNS Firewall works

「Amazon Route 53 Resolverインバウンドエンドポイント(以下、インバウンドエンドポイント)を経由してそのVPCに入ってきたクエリは、そのVPC自身に関連付けたDNS Firewallの評価対象になる」という記載です。想定されている用途はオンプレミス環境からの問い合わせですが、仕組みとしてはクエリがどこから来たパケットかを区別していないはずです。だとすれば、VPC間でも同じことが成立するのではないか。本記事では、この仮説を実機で検証した結果と、その過程で見つかった副作用・制約について解説します。以降、この方式を「インバウンドエンドポイント方式」と呼びます。

検証したい問い

検証環境には、以下の2つのVPCを用意しました。

  • 個別システムVPC役(VPC-A)(DNSクエリを発生させるクライアントEC2を配置)
  • 共通(アウトバウンド)VPC役(VPC-B)(DNS Firewallを関連付ける側)

今回は、VPC-Aで発生するDNSクエリの経路を次のように構成します。

  • VPC-AのDHCPオプションセットを変更し、VPC-A自身のResolver(標準の.2アドレス)ではなく、VPC-Bに作成したインバウンドエンドポイントを向くようにする
  • これにより、VPC-Aで発生するDNSクエリはすべて、VPC-A自身のResolverを経由せず、VPC-Bのインバウンドエンドポイント経由でVPC-BのResolverが処理する

この状態で、DNS FirewallをVPC-Bに関連付けたとき、VPC-A発のクエリはブロックされるのか。これが今回検証したい問いです。もしブロックされるなら、「共通VPCに1箇所だけDNS Firewallを置いて集中管理する」という当初の狙いは、方式を変えることで実現できることになります。

検証シナリオ・構成

個別システムVPC役(VPC-A)にクライアントEC2を、共通(アウトバウンド)VPC役(VPC-B)に検証用のモックDNSサーバーとDNS Firewallルールグループを配置した検証環境を用意し、以下を追加しました。

  • VPC-A ⇔ VPC-B間のVPCピアリング(DHCPオプションセットで指定したDNSサーバーへ実際にIPパケットを届ける必要があるため、実ネットワーク経路が必須になります)
  • VPC-BにResolverインバウンドエンドポイントを新規作成
  • VPC-AのDHCPオプションセットを、標準のAmazonProvidedDNSからインバウンドエンドポイントの割り当てIP(2つ)に変更

DNS Firewallのルールグループには、テストドメインtest.example.internal.をBLOCK対象として登録したドメインリストを用意し、関連付け先はVPC-Bに固定します。転送ルールは使わず、DHCPオプションセットによる経路の切り替えだけで名前解決させる構成です。

VPC-A(クライアントEC2)がDHCPオプションセット変更により自身のResolverを使わなくなり、VPCピアリング経由でVPC-Bのインバウンドエンドポイントへ直接問い合わせに行く様子と、VPC-B側でインバウンドエンドポイント→VPC-BのResolver→検証用モックDNSサーバーという経路にDNS Firewallルールグループが固定関連付けされている構成を図示}}

ポイントは、VPC-A自身のDNS解決の主体を、DHCPオプションセットの変更によってVPC-B側のResolverに完全に切り替えてしまうことです。特定のドメインだけを狙って転送するのではなく、VPC-Aの名前解決の窓口自体をVPC-Bに明け渡す、踏み込んだ構成変更になります。

手順

  1. VPCピアリングとインバウンドエンドポイントのみを作成する(DHCPオプションセットはインバウンドエンドポイントの割り当てIPが確定してから作るため、いったん後回しにします)
  2. aws route53resolver list-resolver-endpoint-ip-addresses でインバウンドエンドポイントの割り当てIPを確認する
  3. 確認したIPを使ってDHCPオプションセットを作成し、VPC-Aに関連付ける
  4. VPC-Aのクライアントインスタンスで/etc/resolv.confを確認し、実際にどのDNSサーバーを見に行っているかを確認する
  5. テストドメインへ問い合わせを行い、結果とResolverクエリログ(vpc_id、firewall_rule_action、resolver_endpointなど)を確認する

結果

DHCPオプションセットの変更後、VPC-Aのクライアントインスタンスの/etc/resolv.confを確認したところ、標準の.2アドレスではなく、インバウンドエンドポイントの割り当てIPがnameserverとして設定されていることを確認できました。

$ cat /etc/resolv.conf
(中略)
nameserver 10.61.0.44
nameserver 10.61.0.113
search ap-northeast-1.compute.internal

この状態で、DNS FirewallをVPC-Bに関連付けた場合と関連付けない場合で、同じテストドメインへの問い合わせ結果を比較しました。

DNS Firewallの関連付け 名前解決の結果 クエリログ
VPC-Bになし NOERRORで正常に解決される firewall_rule_actionフィールドなし
VPC-Bにあり NXDOMAINでブロックされる firewall_rule_action: "BLOCK"、firewall_rule_group_id、firewall_domain_list_idが記録される

ブロックされたときのクエリログです。

{
  "vpc_id": "vpc-0123456789abcdef0",
  "query_name": "test.example.internal.",
  "rcode": "NXDOMAIN",
  "srcaddr": "10.60.0.17",
  "srcids": {
    "resolver_endpoint": "rslvr-in-0123456789abcdef0",
    "resolver_network_interface": "rni-0123456789abcdef0"
  },
  "firewall_rule_action": "BLOCK",
  "firewall_rule_group_id": "rslvr-frg-0123456789abcdef0",
  "firewall_domain_list_id": "rslvr-fdl-0123456789abcdef0"
}

vpc_idはVPC-B(インバウンドエンドポイントを持つ側)を指していました。クエリを実際に処理しているResolverがVPC-B側にある以上、ログ上のvpc_idもVPC-Bになるということです。「解決の主体がどちらのVPCのResolverになっているか」によって、vpc_idもDNS Firewallの評価対象VPCも決まる、という理解を裏付ける結果になりました。

もう1つ興味深いのは、ブロックされたログにもresolver_endpointフィールドが付いていることです。インバウンドエンドポイントへの到達自体がクエリの入り口であり、そこがVPC-BのResolverへの入力そのものだから、と考えると筋が通ります。

検証で見えてきた副作用・制約

ここまでで「仮説通り機能する」ことは確認できましたが、それだけでは検証として不十分です。実際にこの方式を採用したときに困ることがないか、3つの観点で追加検証しました。

任意のドメインでもブロックされるか

最初の検証でブロックを確認できたのは、あらかじめ用意していた特定のテストドメインだけでした。「このドメインだから、たまたまブロックされただけなのでは? 任意のドメインでも同じように評価されるのか?」という疑問が残ります。

そこで、ブロックリストに実在の公開ドメインexample.comを追加し、問い合わせました。

ドメイン ブロックリスト 結果
example.com 登録あり NXDOMAIN、firewall_rule_action: "BLOCK"
example.net 登録なし NOERROR、正常に解決

通常の再帰解決の経路でも、共通VPC側のDNS Firewallが評価していることを確認できました。しかもブロックリストに載っていないドメインは通るので、全滅ではなくルール通りの選択的なフィルタが効いています。「個別VPCの全ドメインが共通VPC側で一元的にフィルタ対象になる」ことが実証できたと言えます。

VPC内部の名前解決は壊れないか

最初の検証でここに一番肝を冷やしました。クエリログに{"query_name": "ip-10-60-0-17.", "rcode": "NXDOMAIN"}のような記録が残っており、「DNS解決の窓口を丸ごと切り替えたことで、インスタンス自身の内部DNS名すら引けなくなったのでは」と見えたからです。

原因を追ったところ、これは方式そのものの制約ではなく、私がDHCPオプションセットにDomainNameを指定し忘れていたことによる自作自演でした。DomainNameを指定しないと検索ドメインが失われ、クエリ名がip-10-60-0-17.のように短縮された形のまま送出されてしまいます。

DHCPオプションセットにDomainName: ap-northeast-1.compute.internalを指定して作り直したところ、以下の通り内部の名前解決は問題なく機能しました。

対象 結果
自分自身のFQDN(ip-10-60-0-17.ap-northeast-1.compute.internal) 正常に解決
自分自身の短縮名(ip-10-60-0-17、検索ドメイン付き) 正常に解決
VPC-B側インスタンスのFQDN 正常に解決
ブロック対象の公開ドメイン 引き続きブロックされたまま

興味深いことに、VPC-B側のResolverはVPC-A側インスタンスの内部DNS名(IPアドレスから機械的に導ける命名規則)も問題なく解決できました。ただし、これはIPベースの命名規則だからこそ成立している可能性があり、リソースベースの命名やPrivate Hosted Zone(以下、PHZ)が同様に解決できるかはまた別の話です。それが次の検証です。

個別VPCだけに関連付けたPrivate Hosted Zoneは解決できるか

VPC個別に関連付けたPHZは、本来そのVPCのResolverでしか引けません。今回の方式ではVPC-Aの名前解決の主体がVPC-BのResolverに切り替わっているため、VPC-Aにだけ関連付けたPHZは解決できなくなるのではないか、という懸念です。

検証用のPHZを作成してVPC-Aにのみ関連付け、レコードを1件登録して3つの経路から問い合わせました。

問い合わせ先 結果
VPC-A自身のResolver(対照) 正常に解決できる
VPC-Bのインバウンドエンドポイント 解決できない(NXDOMAIN)
DHCPオプションセットで設定した既定の経路 解決できない(NXDOMAIN)

対照(VPC-A自身のResolver)では問題なく解決できているので、これはPHZの設定不備ではなく、この方式に固有の制約であることが確認できました。個別VPCに関連付けているPHZを使っている場合、この方式を採用するには共通VPC側にもPHZを関連付け直す必要があります。DNS Firewallの関連付けを1箇所にまとめるために、PHZの関連付け作業は逆に増えてしまう、という本末転倒が起きうる点は要注意です。

なぜこうなるのか

冒頭でも引用した、AWS公式ドキュメントの記載を振り返ります。実は引用した一文の前には、DNS Firewallがフィルタする対象を2つの箇条書きで説明する記載があります。

When a DNS Firewall rule group is associated with your VPC's Route 53 VPC Resolver, the following traffic is filtered by the firewall:

  • DNS queries originating within that VPC and passing through VPC DNS.
  • DNS queries that pass through Resolver endpoints from on-premises resources into that same VPC that has DNS Firewall associated to its resolver.

出典: How Resolver DNS Firewall works

引用した2つの条件のうち、今回の方式が当てはまるのは1つ目です。DHCPオプションセットを変更することで、VPC-Aが送出するクエリの処理主体を、VPC-A自身のResolverからVPC-BのResolverへと丸ごと移してしまうため、VPC-Bから見れば、インバウンドエンドポイント経由で入ってきたクエリは「VPC-B自身が処理するクエリ」そのものであり、VPC-Bに関連付けたDNS Firewallの評価対象に自然と含まれます。

ドキュメントの表現を借りるなら、想定されている利用シーンは「オンプレミス環境からインバウンドエンドポイント経由で入ってくるクエリ」ですが、インバウンドエンドポイントの視点では、クエリがVPCピアリング越しの別VPCから来ようが、オンプレミスの物理ネットワークから来ようが区別しない、ということなのだと理解しています。

まとめ

  • インバウンドエンドポイント経由でVPCに入ってきたクエリは、そのVPCに関連付けたDNS Firewallの評価対象になります。これはVPC間でも成立し、DHCPオプションセットで個別VPCの名前解決の主体を共通VPCのResolverに切り替えれば実現できます
  • この方式では、個別VPCの全ドメインが共通VPC側で一元的にフィルタされます
  • DHCPオプションセットのDomainNameを正しく指定すれば、VPC内部の名前解決(IPベースの命名規則)は維持されます。指定を忘れると検索ドメインが失われ、内部の名前解決が壊れたように見えるので注意してください
  • 個別VPCにのみ関連付けたPrivate Hosted Zoneはこの方式では解決できなくなります。共通VPC側にもPHZを関連付け直す必要があり、既存環境でPHZを多用している場合は移行コストが見た目より高くなりえます
  • 個別VPC側で独自にDNS Firewallを運用する、といった例外対応もできなくなります。個別VPC自身のResolverがそもそも使われなくなるためです
  • 代償として、個別VPCと共通VPCの間にVPCピアリングやAWS Transit Gatewayなどの実ネットワーク経路が必須になり、DNS解決の可用性が共通VPC側に完全に依存する構成になります。この点はトレードオフとして意識しておく必要があります

「共通VPCに1箇所だけDNS Firewallを置いて集中管理したい」という当初の狙いは、実現できることが分かりました。ただし、それは「個別VPCの名前解決の主体そのものを共通VPCに明け渡す」という、踏み込んだ変更を伴います。DNS Firewallの集中管理だけを見て方式を選ぶのではなく、実ネットワーク経路の追加やPHZの移行コストまで含めて、既存環境への影響を評価してから採用を判断することをおすすめします。

参考リンク

しみず (記事一覧)

クロスインダストリー第1本部 クラウドコンサルティング2課

腰痛と戦う駆け出しエンジニア