Go в Kubernetes: Управление ресурсами

Особенности архитектуры Go, влияющие на ресурсопотребление в контейнерах

Запуск docker образа в kubernetes
Контейнер в docker запускаю так: docker run --cap-add=SYS_ADMIN -ti -e "container=docker" -v...

Деплой телеграм бота на Google Kubernetes Engine через GitLab CI
Доброго времни суток. Прошу помощи у форумчан тк. сам не могу разобраться. Как задеплоить бота на...

Возможно ли поднять в kubernetes proxy
Задача. Дано: На роутере настроены 10 ip-адресов внешних от провайдера. На сервере vmware поднято...

Nginx + Kubernetes
Добрый день всем! Я решил попробовать использовать Kubernetes. Вот что я сделал на текущий...

Управление памятью

Особенности сборщика мусора Go

• HeapAlloc — память, занятая живыми объектами.
• HeapSys — вся память, запрошенная кучей из ОС.
• Sys — общая память, используемая рантаймом Go.

Влияние лимитов памяти на поведение приложения

1
2
3
4
5

// Пример получения метрик памяти
var m runtime.MemStats
runtime.ReadMemStats(&m)
log.Printf("HeapAlloc: %v MiB, HeapSys: %v MiB, Sys: %v MiB", 
    m.HeapAlloc/1024/1024, m.HeapSys/1024/1024, m.Sys/1024/1024)

Практические примеры настройки limits и requests

1
2
3
4
5
6
7

resources:
  requests:
    memory: "100Mi"
    cpu: "100m"
  limits:
    memory: "200Mi"
    cpu: "250m"

1
2
3
4
5
6
7

resources:
  requests:
    memory: "200Mi"
    cpu: "250m"
  limits:
    memory: "200Mi"
    cpu: "250m"

1
2
3
4
5

env:
name: GOMEMLIMIT
  valueFrom:
    resourceFieldRef:
      resource: limits.memory

1
2
3
4
5

env:
name: GOMAXPROCS
  valueFrom:
    resourceFieldRef:
      resource: limits.cpu

Анализ поведения сборщика мусора при различных значениях GOGC

1
2
3
4
5
6
7
8
9
10

// Установка GOGC программно
import "runtime/debug"
 
func init() {
    // Для приложений с ограниченной памятью
    debug.SetGCPercent(50) 
    
    // Для CPU-bound приложений с достаточным объемом памяти
    // debug.SetGCPercent(200)
}

1
2
3
4
5
6
7

env:
name: GOGC
  value: "off"
name: GOMEMLIMIT
  valueFrom:
    resourceFieldRef:
      resource: limits.memory

Стратегии обработки OOM-ситуаций в контейнеризированных Go-приложениях

1
2
3
4
5
6
7
8

func memoryHealthCheck() bool {
    var m runtime.MemStats
    runtime.ReadMemStats(&m)
    
    // 85% от лимита памяти - критический уровень
    memLimit := parseMemoryLimit()
    return float64(m.Sys) < (0.85 * float64(memLimit))
}

Тестирование приложений под различными лимитами памяти

1
2
3
4
5
6
7
8

import _ "net/http/pprof"
 
func main() {
    go func() {
        http.ListenAndServe(":6060", nil)
    }()
    // Основной код приложения
}

Влияние параметров GOMEMLIMIT и GOMAXPROCS на потребление памяти

1
2
3
4
5

env:
name: GOMEMLIMIT
  valueFrom:
    resourceFieldRef:
      resource: limits.memory

Анализ механизма memory ballast и его применение для стабилизации работы GC

1
2
3
4
5
6
7
8

func main() {
    // Выделяем примерно 100 МБ в качестве балласта
    ballast := make([]byte, 100<<20)
    // Предотвращаем оптимизацию неиспользуемых переменных
    runtime.KeepAlive(ballast)
    
    // Основная логика приложения
}

Управление CPU

Специфика Go-рантайма и планировщика

Правильная настройка лимитов процессора

1
2
3
4
5
6
7
8
9
10

resources:
  limits:
    cpu: "250m"
  requests:
    cpu: "250m"
  env:
  - name: GOMAXPROCS
    valueFrom:
      resourceFieldRef:
        resource: limits.cpu

Влияние throttling на производительность

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18

func benchmarkWithThrottling() {
  start := time.Now()
  // CPU-интенсивная операция
  for i := 0; i < 1000000; i++ {
    _ = sha256.Sum256([]byte("data"))
  }
  fmt.Printf("Без throttling: %v\n", time.Since(start))
 
  // Имитация throttling через искусственные паузы
  start = time.Now()
  for i := 0; i < 1000000; i++ {
    if i%5 == 0 {
      time.Sleep(time.Microsecond) // Имитация прерывания CPU
    }
    _ = sha256.Sum256([]byte("data"))
  }
  fmt.Printf("С throttling: %v\n", time.Since(start))
}

Взаимодействие планировщика Go и Kubernetes

Конфигурация GOMAXPROCS в зависимости от лимитов CPU

1
2
3
4
5

env:
name: GOMAXPROCS
  valueFrom:
    resourceFieldRef:
      resource: limits.cpu

1
2
3
4
5
6

import _ "go.uber.org/automaxprocs"
 
func main() {
  // automaxprocs автоматически настроит GOMAXPROCS
  // остальной код приложения
}

Анализ последствий неправильной настройки CPU requests

Особенности работы горутин при ограниченном доступе к CPU-ресурсам

Влияние QoS-классов Kubernetes на доступность CPU для Go-приложений

Стратегии масштабирования CPU-ресурсов для сервисов на Go

1
2
3
4
5
6
7
8
9
10

apiVersion: autoscaling/v2
kind: HorizontalPodAutoscaler
spec:
  metrics:
  - type: Resource
    resource:
      name: cpu
      target:
        type: Utilization
        averageUtilization: 65

Практические рекомендации

Инструменты мониторинга

1
2
3
4
5
6
7

import "expvar"
 
func init() {
    expvar.Publish("goroutines", expvar.Func(func() interface{} {
        return runtime.NumGoroutine()
    }))
}

1
2
3
4
5
6

import _ "net/http/pprof"
 
func main() {
    go http.ListenAndServe(":6060", nil)
    // Код сервиса
}

1
2
3
4
5
6
7
8

// Счётчик запросов с метками метода и кода ответа
requestsTotal = prometheus.NewCounterVec(
    prometheus.CounterOpts{
        Name: "http_requests_total",
        Help: "Total number of HTTP requests",
    },
    []string{"method", "status"},
)

Оптимальные значения для различных типов нагрузки

Примеры конфигурации в продакшене

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16

resources:
  requests:
    cpu: "1000m"
    memory: "1Gi"
  limits:
    cpu: "1000m"
    memory: "1Gi"
env:
name: GOMAXPROCS
  valueFrom:
    resourceFieldRef:
      resource: limits.cpu
name: GOMEMLIMIT
  value: "950MiB"
name: GOGC
  value: "100"

1
2
3
4
5
6
7
8
9
10
11
12

resources:
  requests:
    cpu: "250m"
    memory: "128Mi"
  limits:
    cpu: "250m"
    memory: "256Mi"
env:
name: GOMAXPROCS
  value: "1"
name: GOMEMLIMIT
  value: "230Mi"

1
2
3
4
5
6
7
8
9
10
11
12

resources:
  requests:
    cpu: "2000m"
    memory: "4Gi"
  limits:
    cpu: "2000m"
    memory: "4Gi"
env:
name: GOMAXPROCS
  value: "2"
name: GOGC
  value: "200"

Настройка профилирования Go-приложений в Kubernetes

1
2
3
4
5
6
7
8

import _ "net/http/pprof"
 
func main() {
  go func() {
    http.ListenAndServe("localhost:6060", nil)
  }()
  // Основная логика
}

1

http.ListenAndServe("0.0.0.0:6060", nil)

1

kubectl port-forward pod/myapp-pod 6060:6060

Балансировка между эффективным использованием ресурсов и надежностью

Автоматизация настройки ресурсов с использованием Vertical Pod Autoscaler

1
2
3
4
5
6
7
8
9
10
11

apiVersion: autoscaling.k8s.io/v1
kind: VerticalPodAutoscaler
metadata:
  name: go-service-vpa
spec:
  targetRef:
    apiVersion: apps/v1
    kind: Deployment
    name: go-service
  updatePolicy:
    updateMode: "Auto"

Стратегии тонкой настройки производительности при ограниченных ресурсах

1
2
3
4
5

var bufferPool = sync.Pool{
  New: func() interface{} {
    return new(bytes.Buffer)
  },
}

Конфигурация ngnix для Kubernetes Deployment
Подскажите, что не так с nginx.conf переданным в ConfigMap для k8s? У меня на порту сервиса сайт не...

Где расположить БД для Kubernetes кластера в облаке
Привет. Нагуглил и разобрал пример, как разместить Spring-овый микросервис в кубернетес-кластере....

Node.js аппа на Kubernetes
Или кто проворачивал такое? Есть какие грабли? Как там с process.env переменными?

Kubernetes не работает localhost
Добрый день! Пытался поставить kubernetes-dashboard на новом кластере. Выполнял все пункты по...

Какими ресурсами (сайтами, книгами) можно пользоваться для изучения Go?
Ресурсы можно и англоязычные, но предпочтительнее рускоязычные

не работает управление питанием процессора
При каждом запуске компа в журнале событий выскакивает такое сообщение. Как устранить эту...

Как осуществляется управление кулером на процессоре
Возможно промахнулся с темой, и место ей на материнских платах. Ну вопрос, собственно в...

Управление питанием процессора
Безопасно и не вредно ли для процессора ставить значения в 70% , а так же менять эти значения в...

Azure, управление аккаунтом
Ребят, подскажите, пожалуйста, есть ли возможность логина ( именно в виде логин:пароль, без...

Управление питанием процессора
Добрый день. Процессор Ryzen 7 2700x. Поставил Ryzen master чтобы температуру глядеть, speccy...

Управление прогой в Docker
Здравствуйте! Пробую разобраться с докером и для примера написал маленькую консольную прогу,...

Управление одним контейнером из другого (запустить команду)
delete...