Слогер Создать блог
Разработка

Мониторинг контейнерных бэкендов на eBPF: трассировка задержек без sidecar-ов

Как с помощью eBPF-программ в ядре Linux получать данные о межсервисных задержках, TCP-ретрансмиссиях и профилях системных вызовов в Kubernetes — без изменения кода и без лишних затрат.

В этой статье мы разберём, как запустить лёгкий eBPF DaemonSet, который собирает информацию о TCP-задержках между сервисами, количестве повторных передач и профилях системных вызовов внутри подов Kubernetes. Никаких изменений в приложениях, никаких Envoy sidecar-ов и никакого взрывного роста бюджета.

Проблема observability с sidecar-ами

Многие команды сразу выбирают Envoy или Istio, не оценив затраты. Sidecar-контейнер сервисной сетки добавляет 50–200 мс холодного старта, ~50 МБ памяти на под и нагрузку на CPU, которая растёт при горизонтальном масштабировании. Для стартапа с 40 микросервисами на среднем Kubernetes-кластере это уже существенная статья расходов.

eBPF полностью меняет подход.

Что такое eBPF и как он работает

eBPF (Extended Berkeley Packet Filter) — это программы, которые выполняются в ядре Linux в изолированной JIT-компилируемой виртуальной машине. Они подключаются к tracepoint, kprobes и uprobes, получая прямой доступ к сетевым событиям, решениям планировщика и системным вызовам — без какой-либо инструментации в пользовательском пространстве.

Для трассировки межсервисных задержек мы подключаемся к функциям ядра tcp_sendmsg и tcp_recvmsg и связываем временные метки через BPF-карты — разделяемые структуры памяти, доступные как из ядра, так и из пользовательского пространства.

Архитектура BPF-карт

BPF-карты типизированы, имеют ограниченный размер и управляются ядром. Для многосервисного Kubernetes-окружения хэш-карта с ключом (pid, container_id) позволяет связать задержку с конкретным подом без пересечения данных.

Тип картыНазначениеСложность поиска
BPF_MAP_TYPE_HASHСвязывание PID и временной меткиO(1) в среднем
BPF_MAP_TYPE_PERF_EVENT_ARRAYПотоковая передача событий в userspaceO(1) на CPU
BPF_MAP_TYPE_RINGBUFЭкспорт трасс с высокой пропускной способностьюLock-free, меньше издержек
BPF_MAP_TYPE_LRU_HASHОтслеживание соединений в масштабеАвтоудаление устаревших записей

Для обнаружения TCP-ретрансмиссий подключаемся к tracepoint tcp_retransmit_skb и агрегируем счётчики по (src_ip, dst_ip, dport) в LRU-хэше. Так мы получаем сигнал на уровне сети без участия приложения.

CO-RE: переносимость между версиями ядра

Исторически главным барьером для внедрения eBPF была фрагментация версий ядра. CO-RE (Compile Once, Run Everywhere) с BTF (BPF Type Format) и libbpf решает эту проблему. eBPF-объектный файл содержит информацию о типах, а загрузчик подменяет смещения полей во время загрузки в соответствии с BTF работающего ядра.

Практический workflow: скомпилировать один раз в CI, упаковать .o файл в образ контейнера и загружать на ядрах от 5.4 до 6.x без перекомпиляции. Это делает eBPF пригодным для гетерогенных облачных сред, где версии ядер различаются между пулами узлов.

Интеграция с Grafana и Tempo

При ограниченном бюджете мы используем следующий пайплайн:

  1. eBPF-демон (Go + библиотека cilium/ebpf) читает события из ring buffer.
  2. OpenTelemetry Collector получает спаны по OTLP, батчирует и сжимает их.
  3. Grafana Tempo сохраняет трейсы в объектном хранилище (S3/GCS) — примерно $0.02/ГБ в месяц против $0.10–$0.30 в управляемых APM.
  4. Grafana отображает карты сервисов на основе данных трейсов — без Jaeger или Zipkin.

По сравнению с полной сеткой Istio этот стек работает как один DaemonSet-под на узел, потребляя ~30 МБ RAM и <0.5% CPU на ядро. Вы получаете 90% ценности observability при ~15% инфраструктурных затрат.

Сравнение подходов к observability

ПодходИзменения кодаПотребление памятиВидимость ядраСложность настройки
Envoy sidecar (Istio)Нет~50 МБ/подТолько L7Высокая
Ручной SDK (OTel)ДаМинимальноТолько приложениеСредняя
eBPF DaemonSetНет~30 МБ/узелL3–L7 + syscallsСредняя
Без инструментацииНетНетНетН/Д

Подводные камни

Ключи BPF-карт. Используйте (netns_ino, pid) как ключ, а не просто PID. В общем ядре Kubernetes PID могут пересекаться между контейнерами. Пространство имён по inode сетевого namespace предотвращает утечку данных между подами.

Маршрутизируйте через OTel Collector. Не отправляйте eBPF-события напрямую в Tempo. Collector даёт батчинг, повторные попытки и возможность сменить бэкенд без изменения BPF-кода.

BTF должен быть включён. Проверьте командой ls /sys/kernel/btf/vmlinux. Если файла нет, CO-RE не сработает.

Начинайте с cilium/ebpf на Go. У этой библиотеки лучшая поддержка CO-RE, активное сопровождение и чистый API для работы с картами и ring buffer.

Заключение

eBPF даёт observability на уровне ядра — TCP-задержки, ретрансмиссии, профили syscall — при доле памяти и CPU, потребляемых сервисной сеткой. Сочетание CO-RE, BPF ring buffer и лёгкого пайплайна OTel → Tempo → Grafana готово к production и работает на стартап-инфраструктуре.

Istio стоит использовать только тогда, когда действительно нужно управление трафиком. Для чистой observability eBPF — лучший выбор по умолчанию.

По материалам: dev. Текст переработан редакцией Слогера.

← На главную

Рекламное место — Конец поста
Реклама · Слогер

Комментарии (0)

Войдите, чтобы комментировать.

Пока нет комментариев. Будьте первым.

Личный опыт

Как довести до конца одно незаконченное дело: метод одной даты

Назвать брошенный проект конкретными словами, поставить реальную дату и договориться с кем-то, кто спросит один раз. Разбор простой механики, которая чаще срабатывает, чем очередной таск-менеджер.

Слогер 19.11.2026 ▲ 0
Карьера

Как автоматизировать отклики на вакансии: разбор автозаполнения заявок на Greenhouse, Lever и Ashby

Расширение для Chrome берёт на себя формы, которые вы заполняете десятый раз подряд, — но работает только на трёх системах найма и требует собственных ответов. Разбираем механику, цену и границы.

Слогер 18.11.2026 ▲ 0
Карьера

Как выбрать между двумя офферами на стажировку: разбор по шагам

Два оффера одновременно — хорошая проблема, которая всё равно выматывает. Вот порядок действий: приоритеты, реальные задачи, деньги после аренды, разговор с бывшим стажёром и честная просьба об отсрочке.

Слогер 18.11.2026 ▲ 0
Fluxs lenta
Реклама · fluxs.ru
Стартапы

Fluxs включён в реестр российского ПО Минцифры России

🇷🇺 **Fluxs официально включён в реестр российского ПО!** Наша платформа для управления бизнесом вошла в Единый реестр российских программ Минцифры России. Это важный этап развития Fluxs и новые возможности для сотрудничества с российскими компаниями, банками и организациями, заинтересованными в импортозамещении.

Слогер 17.11.2026 ▲ 0
Разработка

Как получить от клиента согласование сайта на staging: чек-лист приёмки

Устное «выглядит хорошо» в мессенджере не защищает никого: через месяц не вспомнить, что именно смотрели и на какой версии. Вот как превратить просмотр staging в нормальную запись о приёмке.

Слогер 17.11.2026 ▲ 0
Карьера

WARN Act: как работает закон о сокращениях и что делать, если уведомление не пришло

Федеральный WARN Act обязывает крупных работодателей предупреждать о закрытии предприятия или массовом сокращении за 60 дней. Разбираем пороги, исключения и порядок действий — на примере отрасли вывоза и переработки отходов, где сокращения легко пропустить.

Слогер 17.11.2026 ▲ 0
Fluxs lenta
Реклама · fluxs.ru
Карьера

Как читать WARN-уведомления о сокращениях: разбор календаря увольнений на 2027 год

Пересчёт уведомлений с датами вступления в силу в 2027 году дал 4 950 человек вместо 2 882 — и это всё ещё нижняя граница. Разбираем, откуда берётся разница в 42% и как не обмануться такой статистикой.

Слогер 17.11.2026 ▲ 0
Разработка

Заменит ли ИИ программиста: что показывают исследования и как выбрать между ИИ и разработчиком

Вопрос «зачем платить разработчику, если ИИ пишет код» построен на неверном представлении о работе программиста. Разбираем два исследования, цену такого заблуждения и практический чек-лист.

Слогер 17.11.2026 ▲ 0
Стартапы

Почему сотрудники забывают задачи и как это исправить | FLUXS

📌 **Почему сотрудники забывают поручения, даже когда всё записано?** Задача поставлена. Сотрудник записал. Срок прошёл. Результата нет. Такая ситуация встречается часто, и часто проблема не в дисциплине, а в отсутствии прозрачной системы управления задачами. Кто исполнитель? Какой срок? На каком этапе работа? 🚀 **FLUXS помогает управлять поручениями и выстраивать бизнес-процессы под правила вашей компании.** А встроенный ИИ-ассистент помогает создавать и настраивать процессы выполнения задач. 👉 Попробуйте конструктор бизнес-модели: https://fluxs.ru/konstruktor-biznes-modeli #FLUXS #УправлениеЗадачами #АвтоматизацияБизнеса #БизнесПроцессы

Слогер 16.11.2026 ▲ 1
Fluxs lenta
Реклама · fluxs.ru
Карьера

Как делиться опытом, если вы не эксперт: ловушка «об этом уже написали» и рабочие форматы

Мешает делиться знаниями не их дефицит, а мысль, что они недостаточно весомые. Разбираем, что считать полезным вкладом, как писать конкретно и с чего начать без давления.

Слогер 16.11.2026 ▲ 0