Потоковая обработка больших данных — эталонная архитектура сервиса из компонентов со 100% открытым исходным кодом, готового к развертыванию в облаках, с масштабируемостью и надежностью уровня предприятия (Антон Овчинников, SECR-2016) — различия между версиями
Материал из 0x1.tv
StasFomin (обсуждение | вклад) |
StasFomin (обсуждение | вклад) |
||
* {{ConferencePage|http://2016.secrus.org/program/submitted-presentations/in-stream-processing-blueprint-building-cloud-ready-enterprise-grade-reliable-and-scalable-100-open-source-service}} <!-- <blockquote>[©]</blockquote> --> {{fblink|1809161386003541}} {{vklink|341}} <references/> [[File:{{#setmainimage:Потоковая обработка больших данных — эталонная архитектура сервиса из компонентов со 100% открытым исходным кодом, готов!.jpg}}|center|640px]] <!-- topub --> {{stats|disqus_comments=7|refresh_time=2021-08-25T03:20:0831T17:55:49.109279752078|vimeo_comments=0|vimeo_plays=177|youtube_comments=1|youtube_plays=28149}} [[Категория:SECR-2016]] [[Категория:NOSQL]] [[Категория:BigData]] [[Категория:Распределенные системы]] |
Версия 14:55, 31 августа 2021
- Докладчик
- Антон Овчинников™
«Потоковая Обработка Событий» — это новый подход к построению систем обработки больших данных практически в реальном времени. Потребность в таких системах растет при решении многих задач, например, аналитики потока кликов, проактивном обслуживании оборудования, обнаружении фрода. Степень зрелости проектов с открытым кодом позволяет создать сервис Потоковой Обработки Событий собственными силами. Однако мир открытого кода изобилует конкурирующими проектами разной степени зрелости и с разными перспективами. Поэтому задача выбора действенных и эффективных компонент не так проста. В докладе я покажу эталонную архитектуру сервиса Потоковой Обработки Событий, масштабируемую и надежную, построенную на основе компонент только с открытым кодом.
Что Вы узнаете?
- Концептуальную архитектуру Потоковой Обработки Событий.
- Эталонную архитектуру построенную на Apache Kafka, Spark Streaming, Cassandra и Redis.
- Обзор методов создания конфигурации, обеспечивающие надежность и масштабируемость для каждого элемента архитектуры.
Доклад будет интересен разработчикам, архитекторам и техническим менеджерам, кто уже работает в проектах по обработке больших данных в практически реальном времени, думает об использовании такого подхода или просто интересуется этой темой.
Видео
Посмотрели доклад? Понравился? Напишите комментарий! Не согласны? Тем более напишите.
Презентация
Примечания и ссылки
Plays:2996
Comments:8