Myvideo

Guest

Login

Kafka CDC обработка данных в реальном времени.

Uploaded By: Myvideo
1 view
0
0 votes
0
AboutShareDownloadAdd to

митрий Румянцев, SRE-инженер в отделе «Центр Развития Архитектуры и Эксплуатации», ГК ОТР Доклад о переработке Legacy-приложения на микросервисы с потоковой обработкой данных, а также настройке стриминга данных в систему очередей Kafka. Cодержание: 00:00 Приветствие 01:17 Кратко о проекте о масштабах продукта 01:59 Сервис версии 1.0 02:31 Проблемы версии 1.0 04:21 Цели 06:10 DEBEZIUM 07:28 KAFKA KAFKA-connekt 09:32 Обработка данных: xstream-Fyfkju ckjjd d Pitgresql 10:51 Logminer 12:12 Проблема полей с названием 30 символов 13:12 Ставим триггер на измененения 13:51 Триггеры-Зло 15:23 TOPIC ROUTING 17:03 Работа с CLOB/BYTEA Полями 17:41 Сериализация данных 18:58 Какие объемы срабатывают? 19:50 Многопоточная обработка данных 24:44 Пиковая нагрузка 26:33 Перенос базы Telegram-канал Митап DevOps:

Share with your friends

Link:

Embed:

Video Size:

Custom size:

x
Share this video

Copy Link:

Google Plus

Add to Playlist:

Favorites
My Playlist
Watch Later
Add to
Favorites
My Playlist
Watch Later
Similar VideosComments
Надежная отправка событий в Apache Kafka: от CDC до Transactional Outbox Алексей Кашин, Т-БанкWatch Video
2 weeks ago
00:34:38
Надежная отправка событий в Apache Kafka: от CDC до Transactional Outbox Алексей Кашин, Т-Банк
174 45%
Алексей Кашин Надежно отправляем события в Apache Kafka. От CDC до паттерна Transactional OutboxWatch Video
2 months ago
00:46:46
Алексей Кашин Надежно отправляем события в Apache Kafka. От CDC до паттерна Transactional Outbox
98 12%
CDC в банке: от источника до хранилищаWatch Video
2 months ago
00:37:48
CDC в банке: от источника до хранилища
93 49%
Иван Клименко CDC от источника до хранилища: как в банке Синара построили CDC с применением продуктов ArenadataWatch Video
3 months ago
00:37:53
Иван Клименко CDC от источника до хранилища: как в банке Синара построили CDC с применением продуктов Arenadata
62 10%
05 - Design Scalable News Feed System Similar to Instagram, Facebook Twitter System DesignWatch Video
4 months ago
00:31:10
05 - Design Scalable News Feed System Similar to Instagram, Facebook Twitter System Design
7 41%
Основы near-real-time streaming: Kafka + CDCWatch Video
4 months ago
00:44:56
Основы near-real-time streaming: Kafka + CDC
87 25%
Андрей Серебрянский Грузим в Kafka из базы: с CDC и безWatch Video
1 year ago
00:43:06
Андрей Серебрянский Грузим в Kafka из базы: с CDC и без
1 62%
Денис Шелемех Перевод отчетов международной компании с Oracle на современный Big Data стекWatch Video
1 year ago
00:46:03
Денис Шелемех Перевод отчетов международной компании с Oracle на современный Big Data стек
3 87%
Kafka CDC обработка данных в реальном времени.Watch Video
3 years ago
00:32:59
Kafka CDC обработка данных в реальном времени.
77 64%
Real-Time ETL (ELT) with Kafka connect change data capture from mysql to sql server.Watch Video
4 years ago
00:06:43
Real-Time ETL (ELT) with Kafka connect change data capture from mysql to sql server.
4 40%
Gunnar Morling Change data capture pipelines with Debezium and Kafka StreamsWatch Video
4 years ago
01:10:53
Gunnar Morling Change data capture pipelines with Debezium and Kafka Streams
3.2K 93%
Gunnar Morling - Practical change data streaming use cases with Apache Kafka and DebeziumWatch Video
5 years ago
00:59:40
Gunnar Morling - Practical change data streaming use cases with Apache Kafka and Debezium
7.8K 32%
0 Comments
Guest