Apache Kafka

Apache Kafka - распределённый программный брокер сообщений, проект с открытым исходным кодом^[1].

2024: Интеграция в «Гарда Deception 1.10.0»

Разработчики интегрировали «Гарда Deception 1.10.0» с брокером сообщений Apache Kafka. Теперь система обнаруживает подозрительные попытки авторизации в домене и автоматически создает инцидент информационной безопасности с уведомлением ответственных лиц. Обновления помогают повысить оперативность реагирования на угрозы. Об этом разработчик сообщил 26 августа 2024 года. Подробнее здесь.

2020: Доступность Yandex Managed Service for Apache Kafka в Яндекс.Облаке

Платформа Яндекс.Облако открывает доступ к сервису Yandex Managed Service for Apache Kafka, который упрощает для разработчиков и DevOps-инженеров создание и управление приложениями в Яндекс.Облаке, и не требует экспертизы в управлении инфраструктурой Apache Kafka и Apache Zookeeper. Сервис работает в режиме preview, бесплатный доступ предоставляется по запросу. Об этом стало известно 28 июля 2020 года. Подробнее здесь.

2019: Модель развития с привлечением многих заинтересованных сторон

Одной из ключевых потребностей современных ИТ является возможность потоковой передачи данных в реальном времени. Именно для этих целей предназначена платформа Apache Kafka, которая может передавать потоковые данные об истории посещений веб-сайтов, финансовые транзакции и журналы приложений в приложения, разработанные на платформах Apache Spark Streaming, Apache Storm или Apache Samza. Kafka была разработана LinkedIn и в использует модель развития с привлечением многих заинтересованных сторон. По данным ASF, платформа применяется многими крупными компаниями, включая Airbnb, LinkedIn, MailChimp, Netflix, New York Times, Oracle, PayPal, Pinterest, Spotify, Twitter и Uber.

2015: Свойства Apache Kafka

Разработан в рамках Apache Software Foundation. Написан на языке программирования Scala.

Свойства

• изначально проектировался, как распределённая система, которую легко масштабировать,
• поддерживает высокую пропускную способность, как со стороны источников, так и для систем-подписчиков,
• поддерживает объединение подписчиков в группы,
• обеспечивает возможность временного хранения данных для последующей пакетной обработки.

Одна из особенностей - применение техники, сходной с журналами транзакций, используемых в системах управления базами данных.

Вначале продукт разрабатывала компания LinkedIn, исходные коды проекта открыты в начале 2011 года.Облачные сервисы для бизнеса: особенности рынка и крупнейшие поставщики. Обзор TAdviser 7.2 т

Продукт распространяется под лицензией Apache License 2.0.

Примечания