EKS 자동 검색은 클러스터의 태그가 구성된 레이블과 일치하는 경우 EKS 클러스터를 자동으로 검색하고 Teleport에 등록할 수 있습니다.

Teleport cluster 자동 발견은 두 가지 구성 요소로 이루어집니다:

1. 새로운 cluster나 이전에 발견된 cluster의 변경 사항을 감시하는 Teleport Discovery Service입니다. 발견된 각 cluster는 Teleport 클러스터에서 kube_cluster 리소스로 동적으로 등록됩니다. 발견하는 cluster에 대한 연결이 필요하지 않습니다.

2. Discovery Service에 의해 등록된 동적 kube_cluster 리소스를 모니터링하는 Teleport Kubernetes Service입니다. 이는 사용자와 cluster 간의 통신을 프록시합니다.

작동 방식

Teleport Discovery Service는 구성된 클라우드 프로바이더(AWS 포함)를 스캔하여 지정된 필터링 레이블과 일치하는 쿠버네티스 클러스터를 찾아, 식별된 새로운 클러스터에 대한 동적 리소스를 Teleport 내에서 생성합니다. Teleport Kubernetes Service는 이 동적 리소스를 모니터링하고 해당 쿠버네티스 클러스터에 요청을 전달합니다. 두 서비스 모두 기능을 수행하기 위해 AWS API에 대한 액세스가 필요합니다.

추가로, Kubernetes Service는 대상 클러스터에 대한 직접 액세스와 요청을 전달하는 데 필요한 권한이 필요합니다.

전제 조건

• 실행 중인 Teleport 클러스터 버전 이상. Teleport를 시작하려면, 가입하기 위해 무료 평가판에 등록하거나 데모 환경 설정하기를 참조하세요.

• tctl 관리 도구와 tsh 클라이언트 도구.

  tctl과 tsh 다운로드에 대한 지침은 설치를 방문하세요.

• IAM 정책을 생성하고 연결할 권한이 있는 AWS 계정.
• Teleport Discovery 및 Kubernetes 서비스를 실행할 호스트.
• 하나 이상의 EKS 클러스터가 실행 중이어야 합니다.

단계 1/3. AWS IAM 자격 증명 설정

Teleport Discovery Service를 실행하는 인스턴스의 ID에 다음 AWS IAM 정책을 생성하고 연결하세요:

{
    "Version": "2012-10-17",
    "Statement": [
        {
            "Sid": "EKSDiscovery",
            "Effect": "Allow",
            "Action": [
              "eks:DescribeCluster",
              "eks:ListClusters"
            ],
            "Resource": "*"
        },
        {
            "Sid": "EKSManageAccess",
            "Effect": "Allow",
            "Action": [
              "eks:AssociateAccessPolicy",
              "eks:CreateAccessEntry",
              "eks:DeleteAccessEntry",
              "eks:DescribeAccessEntry",
              "eks:TagResource",
              "eks:UpdateAccessEntry"
            ],
            "Resource": "*"
        }
    ]
}

ARN 목록을 사용하여 권한의 범위를 특정 지역 또는 EKS 클러스터로 좁힐 수 있습니다. 리소스 ARN은 다음 형식을 가집니다:

arn:{Partition}:eks:{Region}:{Account}:cluster/{ClusterName}

EKSManageAccess 진술의 권한은 선택사항입니다. 이유는 Discovery Service가 발견하는 클러스터에 대한 Teleport Kubernetes Service 접근을 보장할 수 없을 때에도 EKS 클러스터를 검색할 수 있습니다. EKSManageAccess 권한 중 일부를 생략하면 Teleport Kubernetes Service가 각 EKS 클러스터에 접근할 수 있도록 보장하는 것은 귀하의 책임입니다.

단계 2/3. EKS 클러스터 권한 구성

Kubernetes Service가 클러스터를 생성한 것과 다른 IAM 역할을 사용하는 경우, 각 검색된 클러스터의 aws-auth Configmap을 편집하여 Teleport IAM 역할과 Kubernetes RBAC 권한 간의 매핑을 구성해야 합니다.

Kubernetes 클러스터에 요청을 전달하기 위해, Teleport Kubernetes Service는 RBAC 사용자 및 그룹을 Impersonate할 수 있는 클러스터 전체 권한과 SelfSubjectAccessReviews, SelfSubjectRulesReviews를 생성할 수 있는 권한 및 마지막으로 Pods에 대한 읽기 권한이 필요합니다.

Kubernetes 클러스터에 필요한 권한이 있는 RBAC 그룹이 없다면, ClusterRole, ClusterRoleBinding을 생성하고 매핑을 만들려면 Creating RBAC group 가이드를 따르세요. 이미 요구되는 권한을 충족하는 RBAC 그룹이 존재하는 경우, 이를 재사용하고 Teleport Kubernetes Service에서 사용하는 IAM 역할로 매핑할 수 있습니다. 간단함을 위해, Teleport IAM 역할을 system:masters와 같은 내장 Kubernetes RBAC 그룹에 매핑하는 것도 가능합니다. 하지만 프로덕션에서는 권장하지 않습니다.

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: teleport
rules:
- apiGroups:
  - ""
  resources:
  - users
  - groups
  - serviceaccounts
  verbs:
  - impersonate
- apiGroups:
  - ""
  resources:
  - pods
  verbs:
  - get
- apiGroups:
  - "authorization.k8s.io"
  resources:
  - selfsubjectaccessreviews
  - selfsubjectrulesreviews
  verbs:
  - create

kind: ClusterRoleBinding
apiVersion: rbac.authorization.k8s.io/v1
metadata:
  name: teleport
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: teleport
subjects:
- kind: Group
  name: teleport
  apiGroup: rbac.authorization.k8s.io

$ aws eks create-access-entry \
  --cluster-name eks-cluster \
  --region eu-west-1 \
  --principal-arn arn:aws:iam::222222222222:role/teleport-role \
  --kubernetes-groups teleport

{
  ...
}

apiVersion: v1
data:
  mapRoles: |
    - groups:
      - teleport
      rolearn: {teleport_aws_iam_role} # e.g. arn:aws:iam::222222222222:role/teleport-role
      username: teleport

apiVersion: v1
data:
  mapRoles: |
  ...
    - groups:
      - {rbac_group}
      rolearn: {teleport_aws_iam_role} # e.g. arn:aws:iam::222222222222:role/teleport-role
      username: teleport

$ aws eks create-access-entry \
  --cluster-name eks-cluster \
  --region eu-west-1 \
  --principal-arn arn:aws:iam::222222222222:role/teleport-role

{
  ...
}

$ aws eks associate-access-policy \
  --cluster-name eks-cluster \
  --region eu-west-1 \
  --principal-arn arn:aws:iam::222222222222:role/teleport-role
  --policy-arn "arn:aws:eks::aws:cluster-access-policy/AmazonEKSClusterAdminPolicy" \
  --access-scope type=cluster

{
  ...
}

apiVersion: v1
data:
  mapRoles: |
  ...
    - groups:
      - system:masters
      rolearn: {teleport_aws_iam_role} # e.g. arn:aws:iam::222222222222:role/teleport-role
      username: teleport

단계 3/3. Teleport를 구성하여 EKS 클러스터를 검색

조인 토큰 받기

Teleport EKS 자동 검색은 Discovery 및 Kubernetes 서비스가 클러스터에 조인하기 위해 유효한 Teleport 인증 토큰이 필요합니다. 이를 생성하려면 Teleport Auth Service에 대해 다음 명령어를 실행하고 Kubernetes Discovery를 실행할 기계의 /tmp/token에 저장하세요:

tctl tokens add --type=discovery,kube

Teleport Kubernetes 및 Discovery 서비스 구성

EKS 자동 검색을 활성화하려면 discovery_service.aws 섹션에 최소 하나의 항목이 포함되어야 하고, discovery_service.aws.types에 eks가 포함되어야 합니다. 또한, kubernetes_service.resources.tags를 discovery_service.aws.tags에 구성된 동일한 레이블 또는 해당 서브셋으로 설정하여 Kubernetes Service가 Discovery Service에 의해 생성된 동적 리소스를 수신하도록 설정해야 합니다.

version: v3
teleport:
  join_params:
    token_name: "/tmp/token"
    method: token
  proxy_server: teleport.example.com:443
auth_service:
  enabled: off
proxy_service:
  enabled: off
ssh_service:
  enabled: off
discovery_service:
  enabled: "yes"
  discovery_group: "aws-prod"
  aws:
   - types: ["eks"]
     regions: ["*"]
     tags:
       "env": "prod" # EKS 클러스터 태그에 맞췄습니다: tag:env=prod
kubernetes_service:
  enabled: "yes"
  resources:
  - labels:
      "env": "prod" # 이전에 지정된 Kubernetes 클러스터 레이블과 일치합니다.

Kubernetes 및 Discovery 서비스 시작

Kubernetes 및 Discovery 서비스에 AWS에 인증하는 데 사용할 수 있는 자격 증명에 대한 액세스를 부여합니다.

Kubernetes 및 Discovery 서비스를 EC2 인스턴스에서 실행하는 경우 EC2 인스턴스 메타데이터 서비스 방법을 사용할 수 있습니다. 그렇지 않은 경우 환경 변수를 사용해야 합니다:

AWS_ACCESS_KEY_ID=00000000000000000000
AWS_SECRET_ACCESS_KEY=0000000000000000000000000000000000000000
AWS_DEFAULT_REGION=<YOUR_REGION>

호스트가 부팅될 때 Kubernetes 및 Discovery 서비스가 자동으로 시작되도록 시스템 데몬 서비스를 생성하여 구성합니다. 지침은 Kubernetes 및 Discovery 서비스를 설치한 방법에 따라 다릅니다.

sudo systemctl enable teleport
sudo systemctl start teleport

sudo teleport install systemd -o /etc/systemd/system/teleport.service
sudo systemctl enable teleport
sudo systemctl start teleport

Kubernetes 및 Discovery 서비스의 상태는 systemctl status teleport로 확인할 수 있으며, 로그는 journalctl -fu teleport로 볼 수 있습니다.

Kubernetes 및 Discovery 서비스가 시작되면, AWS 섹션에 지정된 태그와 지역과 일치하는 EKS 클러스터가 자동으로 Teleport 클러스터에 추가됩니다.

문제 해결

Discovery Service 문제 해결

먼저, 발견된 Kubernetes cluster가 있는지 확인하세요. 이렇게 하려면 tctl get kube_cluster 명령을 사용하여 예상되는 Kubernetes cluster가 이미 Teleport 클러스터에 등록되었는지 확인할 수 있습니다.

목록에 일부 Kubernetes cluster가 나타나지 않으면, Discovery Service 선택기 레이블이 누락된 Kubernetes cluster 태그와 일치하는지 확인하거나 Discovery Service 로그에서 권한 오류를 확인하세요.

Discovery Service가 올바른 AWS 계정의 자격 증명으로 실행되고 있는지 확인하세요. 다른 AWS 계정에서 리소스를 발견할 수 있지만, 그럴 경우 다른 AWS 계정에서 역할을 맡도록 구성되어야 합니다.

한 개 이상의 Discovery Service가 실행되고 있는지 확인하세요:

tctl inventory status --connected

여러 개의 Discovery Service를 실행하는 경우, 각 서비스가 동일한 클라우드 Kubernetes cluster를 감시하는 경우는 동일한 discovery_group 값으로 구성되어야 하며, 다른 클라우드 Kubernetes cluster를 감시하는 경우는 서로 다른 값으로 구성되어야 합니다. 이것이 올바르게 구성되지 않으면, 일반적인 증상은 kube_cluster 리소스가 Teleport 클러스터의 레지스트리에서 간헐적으로 삭제되는 것입니다.

Kubernetes 서비스 문제 해결

tctl get kube_cluster 명령이 발견된 클러스터를 반환하지만 tctl kube ls 명령에 포함되지 않는 경우, kubernetes_service.resources 섹션이 올바르게 설정되었는지 확인하세요.

kubernetes_service:
  enabled: "yes"
  resources:
  - labels:
      "env": "prod"

섹션이 올바르게 구성되었지만 클러스터가 여전히 나타나지 않거나 인증 오류가 반환되는 경우, 대상 클러스터에서 권한이 올바르게 구성되었는지 또는 Teleport에서 Kubernetes 클러스터를 나열할 수 있는 올바른 권한이 있는지 확인하세요.