fluentbit — kafka — vector — opensearch

Добавляем асинхронность в поток логов.

00:00 — Введение
07:40 — opensearch
20:02 — kafka
27:28 — kafdrop
29:51 — vector
39:10 — fluentbit
44:15 — преобразования в vector
55:20 — почему логи в json — это круто.

Файлы, используемые в видео: https://github.com/BigKAA/youtube/tree/master/logs/async

Видео:

Пожелания devops-ам

00:00 — Введение
02:03 — Сборка контейнера
05:12 — Сервера не резиновые
09:24 — Логи приложений
14:18 — Безопасность
22:16 — Метрики
23:14 — Общее
30:52 — Пример

Файлы, используемые в видео

Видео:

Rancher 2.6 and kubernetes 1.23

Важно! Rancher конфликтует с ArgoCD. Поэтому выберите что-то одно или не смешивайте приложения, управляемые rancher и argocd.

Важно! Rancher создаёт много служебных namespaces. Если будете сносить rancher эти namespaces придётся удалять вручную.

Важно! Перед установкой rancher установите certmanager и ingress controller.

helm repo add rancher-stable https://releases.rancher.com/server-charts/stable
kubectl create namespace cattle-system

Helm chart версии 2.6.3 не совместим с kubernetes 1.23. По состоянию на Январь 2022. Но это можно обойти 🙂

helm pull rancher-stable/rancher --untar

В появившейся директории с чартом вносим изменения в файл Chart.yaml.

kubeVersion: < 1.24.0-0

Устанавливаем из локального чарта.

helm install rancher ./rancher \
--namespace cattle-system \
--set hostname=rancher.kryukov.local \
--set bootstrapPassword=admin \
--set replicas=1

ИМХО Rancher не торт. Смотрите в сторону ArgoCD.

И снова про сбор логов

На примере установки hazelcast будет показано:

  • Как собирать логи приложения, если у вас нет доступа к локальной файловой системе.
  • Как пользоваться хорошо сделанными helm chart-ами.

Файлы, используемые в видео: https://github.com/BigKAA/youtube/tree/master/hazelcast