CLOUDERA DataFlow

Cloudera DataFlow (CDF), ранее Hortonworks DataFlow (HDF) - это масштабируемая платформа потоковой аналитики в реальном времени, которая принимает, обрабатывает и анализирует данные для получения ключевой информации и оперативных аналитических данных. DataFlow решает ключевые проблемы, с которыми сталкиваются предприятия при работе с передачей данных:

• Обработка потоковой передачи данных в реальном времени в большом объеме
• Отслеживание происхождения данных, в т.ч. потоковых
• Управление и мониторинг пограничных приложений и потоковых источников

Основные преимущества: Сократите время на интеграцию данных CDF предлагает визуальный пользовательский интерфейс для создания сложных потоков данных для выполнения основных операций ввода, преобразования и обогащения данных из различных потоковых источников. Работающий на Apache NiFi, CDF принимает данные от устройств, корпоративных приложений, партнерских систем и периферийных приложений, генерируя потоковые данные в реальном времени. Управляйте и защищайте ваши данные на всех этапах - от периферии до ядра предприятия CDF обеспечивает сбор большого объема данных от периферийных устройств. Теперь вы можете легко настроить широко распространенные модели внедрений IoT для сбора данных, используя NiFi и Minifi для потоковой передачи данных. Поддерживается тесная интеграция с Apache Ranger. Получайте информацию в реальном времени быстрее, чем когда-либо Используя мощную потоковую платформу Apache Kafka, CDF может обрабатывать несколько миллионов транзакций в секунду, определять ключевые шаблоны, сравнивать их с моделями машинного обучения и предлагать прогнозную аналитику, чтобы помочь бизнес-руководству принимать взвешенные  решения. Соответствие требованиям В эпоху GDPR и других нормативных требований важно отслеживать происхождение данных, даже для потоковой передачи. NiFi в CDF обеспечивает отслеживание происхождения данных без какой-либо дополнительной настройки.