Kubernetesエンジンの保護

相互信頼されていないワークロード

現時点では、同じクラスタ内で相互に分散したワークロードを実行することはお薦めしません。たとえば、同じクラスタ内で次のワークロードを実行しないでください:

• 開発ワークロードと本番ワークロード
• コントロール・プレーンとデータ・プレーン
• 任意の顧客コードを実行するワークロード

信頼レベルが異なるワークロード

同じクラスタに異なる信頼レベルでアクセスする複数のテナント、チームまたはユーザーがある場合は、別々のクラスタを使用することを検討してください。以降の項で説明するように、KubernetesおよびOKEはワークロードを分離する方法を提供します。ただし、これらの方法は現在、ハード・マルチテナンシには十分ではありません。

Kubeletsにはリソースへの読取りアクセス権があります

OKEによって作成されたクラスタのワーカー・ノードで実行されているkubeletは、kubeletのノードに属していないリソースを変更できません。詳細は、KubernetesドキュメントのNodeRestrictionアドミッション・コントローラの詳細を参照してください。

特にマルチテナント・ワークロードを実行する場合、kubeletはノードに属していないリソースを変更できませんが、kubeletはそれらのリソースを読み取ることができます。このようなリソースには次のものがあります。

• サービス
• エンドポイント
• ノード
• ポッド
• kubeletのノードにバインドされたシークレット、構成マップおよび永続ボリューム

詳細は、Kubernetesドキュメントのノード認可の使用を参照してください。

ノード・プール・コンパートメント

クラスタ内のノード・プールは、コンパートメントをまたがることができます。ただし、複数のコンパートメントを使用すると、ワーカー・ノードをグループ化して管理するのに便利ですが、クラスタ内のワーカー・ノード間の分離は実現されません。ワークロードは、コンパートメントに関係なく任意のノード・プールに対してスケジュールできます。ノード・プールで複数のコンパートメントを使用するための有効なユース・ケースは、ワーカー・ノードに対する動的グループおよびIAMポリシーを簡単に作成することです。複数のコンパートメントに関する無効なユース・ケースは、コンパートメントが一部のタイプのセキュリティ境界または分離を提供することを想定して、顧客ワークロードを実行している各ノード・プールを別々のコンパートメントに配置することです。

ノード・プールのサブネット

ノード・プールにはプライベート・サブネットのみを使用することをお薦めします。サービス・ゲートウェイは、Oracle Cloud Infrastructureサービスへのアクセスを提供するように構成する必要があります。サブネットがインターネット・ゲートウェイを使用してパブリックになっている場合は、サービス・ゲートウェイを使用できません。プライベート・サブネットがインターネットへのアクセスが必要な場合は、NATゲートウェイを使用します。

ポッドがアクセスできるノードの制御

デフォルトでは、ポッドはクラスタ内のどのノードでもスケジュールできます。Kubernetesには、ノードへのポッドの配置を制御するための豊富なポリシー・セットと、エンド・ユーザーが使用できるテイント・ベースのポッドの配置とエビクションが用意されています。多くのクラスタで、これらのポリシーを使用したワークロードの分離は、作成者がツールを使用して採用または適用する規則にすることができます。これらの配置コントロールは、デプロイメント機能を持つユーザーが信頼できない場合、マルチテナント環境では適切ではありません。信頼できないユーザーがコードをデプロイしている場合は、信頼できないグループごとにクラスタを検討する必要があります。

インスタンス・プリンシパルに付与されるアクセスの制限

デフォルトでは、ノード上のすべてのポッドは、インスタンス・メタデータ・エンドポイントを使用してインスタンス・プリンシパル証明書にアクセスできます。インスタンス・プリンシパル経由での権限のエスカレーションを防ぐために、特定のノード・プールのポッドが機能するために必要な最小限の権限セットを持つように、異なる動的グループを使用してノード・プール間でワークロードを分離する必要があります。

たとえば、次の2つのワークロードがあり、両方に異なるアクセス権が必要であるとします:

• LogArchiver - オブジェクト・ストレージ内のバケットおよびオブジェクトを管理するためのアクセス権が必要です
• HostMonitor - インスタンスを管理するためにコンピュートAPIにアクセスする必要があります

最も簡単な方法は、これらを同じノード・プール内でスケジューリングし、すべての必要なアクセス権を持つインスタンス・プリンシパルを提供することです。ただし、このようにすると、ワークロードの1つが危険にさらされた場合の影響が大きくなります。よりよい方法は、インスタンス・プリンシパルが適用可能なワークロードに必要とする限定されたアクセス権のセットを使用して、個々のノード・プールにワークロードをスケジュールすることです。

インスタンス・メタデータへのコンテナ・アクセスのブロック

アクセスをブロックする優先方法は、デフォルトの「すべてを拒否」ポリシーを持つネットワーク・ポリシー・プラグインを使用することです。その後、ラベル・セレクタを介して、KubernetesのNetworkPolicyリソースを使用してポッドおよびネットワークへのアクセス権を明示的に付与します。ネットワーク・ポリシー・プラグインがインストールされていない場合は、IPTablesルールを使用してホストのすべてのポッドからのアクセスを制限できます。この方法は、ホスト上のポッドのサブセットをブロックする場合には使用しないことをお薦めします。

重要: NetworkPolicysおよび次のIPTableルールは、ポッド・オーバーレイ・ネットワークのコンテナにのみ適用されます。ホスト・ネットワークで実行中のコンテナおよびサービスは、次のいずれのオプションにも影響を受けません:

iptables --insert FORWARD 1 --in-interface veth+ --destination 169.254.0.0/16 --jump DROP

ネットワーク・ポリシー

Kubernetesのネットワーク・ポリシーにより、管理者はポッドのグループがクラスタ内の他のポッドとどのように通信できるかを定義できます。また、ネットワーク・ポリシーを使用すると、ポッドのグループをクラスタ外部のサービス(たとえば、Oracle Cloud Infrastructureサービス)と通信する方法を定義できます。

ネットワーク・ポリシーを使用してアクセスを制限するには、ネットワーク・プラグインをインストールする必要があります。ネットワーク・プラグインは、Kubernetesで定義されているネットワーク・ポリシーを構成して適用します。多くのネットワークプラグインオプションを使用できます。ここに示す手順に従って、クラスタ内にCalicoをインストールして構成します。ネットワーク・ポリシー・プラグインは、ホスト上のアクセスを制限することで機能します。OKEへのCalicoのインストールの詳細は、例: Calicoのインストールおよびネットワーク・ポリシーの設定を参照してください。

ノード・プール・セキュリティ・リスト

ネットワーク管理者は、ノード・プール・サブネット上でセキュリティ・リスト・ルールを定義して、ワーカー・ノードとの間のアクセスを制限できます。セキュリティ・リスト・ルールを定義すると、管理者はクラスタ内のホスト上でオーバーライドできないネットワーク制限を適用できます。

すべてのポッド間通信がワーカー・ノードのVXLANオーバーレイ・ネットワークで実行されるため、セキュリティ・リスト・ルールを使用してポッド間通信を制限することはできません。ただし、セキュリティ・リストを使用して、ワーカー・ノードとの間のアクセスを制限できます。

重要:クラスタが機能できるように、ノード・プール・サブネットにセキュリティ・リスト・ルールの最小セットが存在する必要があります。セキュリティ・リスト・ルールを変更する前のセキュリティ・リスト・ルールの最小セットの詳細は、ネットワーク・リソース構成の例を参照してください。

タグのかわりにイメージ・ダイジェストを使用する

タグを使用してイメージをプルせずに、イメージ・ダイジェストを使用したイメージのプルのみを行うことをお薦めします(イメージ・タグは可変であるため)。イメージ・ダイジェストは、イメージのsha256ダイジェストです。これにより、ダウンロードされたイメージが予想どおりであることをDockerが検証できます。

イメージ・ダイジェストIDの例:

sha256:77af4d6b9913e693e8d0b4b294fa62ade6054e6b2f1ffb617ac955dd63fb0182

次の例に示すように、イメージをプルします:

docker pull acme@sha256:77af4d6b9913e693e8d0b4b294fa62ade6054e6b2f1ffb617ac955dd63fb0182

次のコマンドを使用して、ローカル・イメージのすべてのダイジェストを表示できます:

docker images --digests

リソース使用率の制限

リソース割当て制限は、ネームスペースに付与されるリソースの数または容量を制限します。これは、名前空間が割り当てることのできるCPU、メモリーまたは永続ディスクの量を制限するために最も頻繁に使用されますが、各ネームスペースに存在するポッド、サービスまたはボリュームの数も制御できます。

制限範囲は、メモリーなどの一般的に予約されているリソースについてユーザーが不当に高い値または低い値をリクエストするのを防ぐため、または何も指定しない場合にデフォルトの制限を提供するために、前述のリソースの一部の最大または最小サイズを制限します。

リソースの割当て制限へのアクセスは、KubernetesのRBACポリシーを介して制限できます。これにより、管理者は、クラスタのユーザーが、アクセス権を持たないリソースを使用できないようにすることができます。詳細は、Kubernetesのドキュメントのクラスタでのリソース使用率の制限を参照してください。