Kubernetes and docker

Kubernetes
Indonesia PhilippinesMalaysia ThailandSingapore Vietnam
Роман Кранкус Алексей Борисов

Strictly Confidential
LAZADA Group
■ Крупнейший маркетплейс в ЮВА
■ Работаем в 6 странах
■ Три офиса разработки в разных странах, более
1000 разработчиков
■ Часть холдинга AliBaba Group

Что такое Docker?
Docker - технология запуска и управления приложениями в контейнерах
Основные идеи Docker:
■ Cgroups & namespaces
■ Golang
■ Docker Images
■ Libcontainer (resources, filesystem, ...)

Архитектура Docker
Docker Registry
push, pull, search, ...
Docker
Daemon
Host OS
Hardware
libcontainer
Client
App App
cgroups, namespaces

Что такое Kubernetes?
Kubernetes - платформа для управления кластером приложений,
запущенныхв контейнерах (docker или rkt) на нескольких хостах.
Kubernetes включает в себя:
■ Группировкaконтейнеров
■ Load balancing
■ Auto-healing
■ Scaling
■ Deployment

Kubernetes: основные идеи
Организован по принципу master-slave, рассмотрим основные идеи:
■ Pods: группировкаконтейнеров
■ Labels: группировкаподов
■ Kubelet: агенты
■ Replication Controller: управление репликами
■ Scheduler: планировщик
■ API Server: KubernetesAPI Server

Kubernetes: окружения
▪ Development: окружение разработчика
▪ Showrooms: тестовое окружение
▪ Staging/Live: «боевое» окружение

Окружения для разработки
▪ Изолированные kvm (180 машин)
▪ Полная инсталляция Kubernetes внутри
VM
API Server, Replication
Controller, Scheduler
Kubelet, Kube-Proxy
Nginx

Окружения для тестирования
▪ 3 DC (VN, TH, MSK)
▪ Slaves (150 nodes)
▪ ~ 160 showrooms
API Server, Replication
Controller, Scheduler,
quagga, etcd
Kubelet,
Kube-Proxy
Kubelet,
Kube-Proxy
Kubelet,
Kube-Proxy
Kubelet,
Kube-Proxy
Nginx
▪ API Server Kubernetes
▪ Skydns
▪ Kube-Proxy

DevOps-портал

Staging и Live
▪ Более легкая инсталляция
▪ API Server Kubernetes
▪ Без skydnsи kube-proxy
Nginx
pod
etcd
Confd
pod

Проблемы внедрения
■ Не более 250 контейнеровна ноде
■ Не более 80 подовна ноде
■ Iptables нагружает CPU
■ Kubernetes в случае падения контейнера поднимает новый контейнер
из образа (потеря данных в memcached, elasticseach etc)
■ Задержки в репортах от kubelet к replication-controller
■ Зависание docker
■ Нестабильная работа flanneld

Deployment
Indonesia PhilippinesMalaysia ThailandSingapore Vietnam

Схема деплоймента
1.New code
2.SCM poll
trigger build
3.push
image
4.BAD tool
runs
deployment
5. containers
started

Деплоймент Docker
1. Code pushed to the bitbucket
2. Jenkins build image job
3. Building BAD tool on deploy node
4. Pulling image
5. Running BAD tool with params which starts new containers
6. Health checking
7. Stopping old containers if healthy or rollback

Деплоймент Docker
BAD tool
Pull images
Checking current docker port
Starting new container on next port
Health checking
Rollback
PIU-PIU

Деплоймент Kubernetes
Deployment Rolling updates Canary deployment

Deployments
Описаниеконфигурации приложения.
■ Imagetag
■ Env variables
■ Data volumes
■ Number of replicas
■ Labels

Deployments
Описаниежелаемого состояния
$ kubectl create -f myapp-deployment.yaml
deployment "myapp-deployment"created
$ kubectl get deployments
NAME DESIRED CURRENT UP-TO-DATE AVAILABLE AGE
myapp-deployment 3 3 3 3 35s

Liveness probes
■ HTTP
■ TCP
■ Command
livenessProbe:
httpGet:
path: /health_check
port: 8080
initialDelaySeconds: 15
timeoutSeconds: 1
periodSeconds:15

Readiness probes
■ HTTP
■ TCP
■ Command
readinessProbe:
httpGet:
path: /health_check
port: 8080
initialDelaySeconds: 5
timeoutSeconds: 1
periodSeconds:15

ReadinessLiveness example
■ Readiness probe fails
■ Kubernetesstops routing traffic to the pod
■ Liveness probe fails
■ Kubernetesrestarts the pod
■ Readiness probe succeeds
■ Kubernetesstarts routing traffic to the pod again

Rolling updates
Service
+ +
v1 v1v1 v2
Replication controller
-replicas 3
-selector:
- app: my-app-v1
-version: v1
Replication controller
-replicas 1
-selector:
- app: my-app-v2
-version: v2

Rolling updates
Rollout
$ kubectl rolling-updatemy-app -f app.yaml
Scaling up my-app-v2from 0 to 3, scaling down my-app from 3 to 0
Check status
$ kubectl rollout status deployment/my-app
Waiting for rollout to finish: 2 out of 3 new replicas have been updated...
deployment "myapp-deployment"successfully rolled out
Rollback to previous version
$ kubectl rolling-updatemy-app –rollback

История изменений
$ kubectl rollout history deployment/my-app
deployments "my-app":
REVISION CHANGE-CAUSE
1 kubectl create -f my-app-deployment.yaml--record
2 kubectl set image deployment/my-app app=myapp:1.9
3 kubectl set image deployment/my-app app=myapp:2.0

Rolling updates
История изменений - подробнаяинформация
$ kubectl rollout history deployment/myapp-deployment --revision=2
deployments "myapp-deployment" revision 2
Labels: app=myapp
pod-template-hash=1159050644
Annotations: kubernetes.io/change-cause=kubectl set image deployment/myapp-
deployment myapp=myapp:1.9
Containers:
myapp:
Image: myapp:1.9
Port: 80/TCP

Rolling updates
История изменений - откат на конкретнуюревизию
$ kubectl rollout undodeployment/myapp-deployment--to-revision=2
deployment "myapp-deployment"rolled back
Откат на предыдущуюревизию
$ kubectl rollout undodeployment/maypp-deployment
deployment "myapp-deployment"rolled back

Управление процессом Rolling update
■ maxSurge, maxUnavailable
■ maxSurge - максимальное количество подов поверх ожидаемых.
■ MaxUnavailable - максимальное количество недоступныхподовв
процессе обновления.
strategy:
rollingUpdate:
maxSurge: 10
maxUnavailable: 5
type: RollingUpdate

Управление процессом Rolling update
■ MaxSurge: 2
MaxUnavailable: 1

Канареечный деплой

Плюсы:
■ Деплой без даунтайма.
■ Возможность перенаправлять часть трафика на другую версию приложения.
■ Возможность быстро откатиться на предыдущую версию.
Load balancer
stable
stable
unstable
stable

■ STABLE
■ name: frontend
replicas: 3
...
labels:
app: guestbook
tier: frontend
track: stable
...
image: gb-frontend:v3
■ UNSTABLE
■ name: frontend-unstable
replicas: 1
...
labels:
app: guestbook
tier: frontend
track: unstable
...
image: gb-frontend:v4
Load balancer
stable
stable
stable
unstable

Бонусы
■ Отсутствие даунтайма при деплое
■ Быстрое масштабирование
■ Динамическая конфигурация кластера - легко добавлятьудалять
нодыподы
■ Тонко конфигурируемый деплой
■ Быстрый ролаут и ролбек

Вопросы?

Kubernetes and docker

Recommandé

Recommandé

Contenu connexe

Tendances

Tendances (20)

Similaire à Kubernetes and docker

Similaire à Kubernetes and docker (20)

Dernier

Dernier (9)

Kubernetes and docker