Apache Kafka
Также: Kafka, Kafka broker, message broker Kafka, Apache Kafka streaming
Apache Kafka - распределённая платформа потоковых событий, которая принимает, хранит и передаёт сообщения между системами в режиме реального времени. Работает по модели pub/sub: производители пишут события в топики, потребители читают независимо и в своём темпе. Kafka гарантирует сохранность сообщений и легко масштабируется горизонтально - это позволяет строить интеграции между сервисами без ночных ETL-выгрузок и файловых обменов.
Статьи с этим термином · 38
- Автоматизировали 35% Tier-1 инцидентов через AIOps-агент: где прошли границы автономии · 14 июля 2026
- Data lakehouse на отечественном стеке: ClickHouse + MinIO + Iceberg и то, что пришлось допиливать · 9 апреля 2026
- Kafka 4.1 tiered storage: переносим старые топики на MinIO и считаем экономию · 24 февраля 2026
- ClickHouse 26.1: JSON v2 хоронит наши костыли с CodecJSON-колонками · 3 февраля 2026
- Data mesh на отечественном стеке: что закрыли, что не закрыли совсем · 25 ноября 2025
- eBPF-трассировка на Astra Linux: полная картина задержек PostgreSQL и Kafka без единой строчки в коде приложений · 9 октября 2025
- Kafka 4.0 без ZooKeeper: как мы мигрировали продакшн-кластер на KRaft и что пошло не так с мониторингом · 23 сентября 2025
- Apache Kafka 4.0: мигрируем последний кластер клиента с ZooKeeper на KRaft · 10 апреля 2025
- ClickHouse 24.12: тестируем MaterializedMySQL для real-time репликации · 18 декабря 2024
- Отечественные облака по итогам 2024: карта зрелости Yandex Cloud, VK Cloud, Selectel и Сберклауд · 4 декабря 2024
- Kafka 3.8: tiered storage в GA и закрываем последний ZooKeeper-кластер · 11 ноября 2024
- Kafka 3.7: KRaft стал готов к продакшну, ZooKeeper deprecated - мигрируем кластер клиента · 23 апреля 2024
- Kafka ZooKeeper → KRaft в продакшне: как прошла rolling migration без остановки топиков · 29 декабря 2023
- Kafka 3.6 и KRaft: планируем миграцию с ZooKeeper, тестируем rolling migration в staging · 9 ноября 2023
- Ansible Automation Platform 2.3: пробуем Event-Driven Ansible для автоматической реакции на алерты Zabbix · 24 июля 2023
- Apache Kafka 3.4: тестируем tiered storage с S3 и смотрим, что стало с KRaft без ZooKeeper · 25 апреля 2023
- Apache Kafka 3.1 и KRaft: разворачиваем кластер без ZooKeeper в продакшне · 17 мая 2022
- AAP 2.1 и automation mesh: execution nodes без SSH через firewall · 6 мая 2022
- Kubernetes 1.23: HPA v2 в GA и KEDA для event-driven autoscaling · 22 ноября 2021
- MaterializedPostgreSQL в ClickHouse 21.9: аналитическая реплика без ETL · 20 октября 2021
- Kafka 2.6: rolling upgrade с 2.4 и что incremental cooperative rebalancing меняет на практике · 17 августа 2020
- ClickHouse Kafka Engine в продакшне: от событий в топике до аналитики за секунды · 13 ноября 2019
- Kafka → ClickHouse с материализованным представлением: заменили двухчасовую SSIS-джобу на потоковый ETL · 24 июля 2019
- ClickHouse Kafka Engine: события из брокера напрямую в таблицы, ETL на выброс · 27 июня 2019
- Debezium CDC вместо ночного ETL: изменения из PostgreSQL в Kafka за секунды · 10 июня 2019
- KSQL на Kafka: аналитики пишут SQL, Java Streams лежат на полке · 8 мая 2019
- ClickHouse 19.x: заменили ETL-конвейер на Kafka + MaterializedView и забыли про ночные задачи · 25 февраля 2019
- ClickHouse 1.1.54388: Materialized Views вместо ночных ETL-задач на 500M строк событий безопасности · 19 сентября 2018
- Apache Kafka 2.0 в продакшне: Kafka Streams и EOS наконец делают дубли редкостью · 12 сентября 2018
- Kafka Streams как шина событий: уходим от REST-вызовов между микросервисами · 25 мая 2018
- PostgreSQL 10 logical replication как CDC-источник для DWH: избавляемся от ночного ETL-батча · 18 мая 2018
- Kubernetes 1.9: Workloads API в GA - планируем миграцию stateful-сервисов · 23 января 2018
- Apache Spark 2.0 в продакшне: Structured Streaming вместо hourly batch · 14 декабря 2016
- ClickHouse опубликован: разворачиваем на тестовом стенде и проверяем на 500 млн строк · 3 июня 2016
- ETL на Apache Spark: первый продакшн-кластер и Dataset API вместо RDD · 31 мая 2016
- ClickHouse выходит в open-source: Яндекс анонсирует колоночную OLAP-СУБД · 13 мая 2016
- Kafka Streams как альтернатива Spark Streaming: потоковая обработка без отдельного кластера · 4 мая 2016
- Apache Kafka 0.9 как шина событий: пробуем заменить ночной ETL на pub/sub · 18 марта 2016