Создание таблицы лидеров с помощью Amazon Managed Service для Apache Flink | 1/5
AWS Developers
0:00 / 0:00
Создание таблицы лидеров с помощью Amazon Managed Service для Apache Flink | 1/5
12 348 просмотров · 2 г. назад
AWS Developers
1,71 млн подписчиков
12 348 просмотров · 2 г. назад
Хотите вывести свою аналитику на новый уровень? В этом видео мы углубимся в основы архитектуры потоковой обработки данных и рассмотрим, как использовать Amazon Kinesis Data Streams для приема данных. Мы также рассмотрим игровые таблицы лидеров в качестве примера использования, прежде чем показать вам, как настроить архитектуру и выполнить задание по приему данных в вашей собственной учетной записи AWS.
Обратите внимание, что развертывание инфраструктуры, показанной в этой серии, повлечет за собой расходы в вашей учетной записи AWS, поэтому не забывайте останавливать все ресурсы, такие как управляемые блокноты Flink Studio, когда вы их не используете.
В этой серии Ананд Шах (специалист по анализу данных и потоковой обработке в AWS) поможет вам создать современную архитектуру потоковой обработки данных для игровой таблицы лидеров в реальном времени. Эта архитектура включает в себя прием данных, обогащение данных в реальном времени с помощью захвата изменений данных в базе данных (CDC), обработку данных, а также вычисление, хранение и визуализацию результатов. Вы также изучите передовые методы потоковой аналитики, такие как метод управляющего канала для A/B-тестирования, обновление функций и параметров без простоев, а также способы обработки данных с задержкой. Ананд также расскажет вам о процессе дедупликации данных, а также о том, как хранить исторические данные для воспроизведения по запросу. 🎉
🌟 Начните работу с Amazon Managed Service для Apache Flink: https://aws.amazon.com/managed-servic... уже сегодня, чтобы создавать и запускать полностью управляемые приложения Apache Flink на AWS!
🔗 Репозиторий Github: https://github.com/build-on-aws/real-...
Ресурсы, использованные в этом видео:
🔗 Обзор AWS CDK: https://docs.aws.amazon.com/cdk/v2/gu...
🔗 Использование блокнота Studio с управляемым сервисом для Apache Flink: https://docs.aws.amazon.com/managed-f...
🔗 SQL API Apache Flink: https://nightlies.apache.org/flink/fl...
🔗 Введение в управляемый сервис Amazon для Apache Flink:
https://docs.aws.amazon.com/managed-f...
🔗 Введение в Amazon Kinesis Data Streams:
https://docs.aws.amazon.com/streams/l...
Продолжайте обучение, используя приведенные ниже ссылки!
🔗 Amazon Kinesis Data Streams: https://aws.amazon.com/kinesis/data-s...
🔗 Amazon Managed Flink Studio Notebooks: https://docs.aws.amazon.com/managed-f...
🔗 Современная архитектура потоковой обработки данных на AWS: https://docs.aws.amazon.com/whitepape...
00:00 Введение
00:32 Что вы узнаете?
01:26 Основы потоковой аналитики
02:01 Наиболее распространенные сценарии использования потоковой обработки данных
02:20 Обзор архитектуры потоковой обработки данных
03:09 Сценарий использования игровых таблиц лидеров
03:57 Архитектура потоковой обработки игровых таблиц лидеров
05:09 Прием потоковых данных
05:35 Демонстрация: Репозиторий Github
07:43 Демонстрация: Обзор исходного кода CDK и развертывание
08:18 Демонстрация: Настройка инфраструктуры
10:30 Демонстрация: Настройка ноутбука Amazon Managed Apache Flink Studio
11:40 Демонстрация: Задание 1 - Выбор данных игровых событий
13:11 Заключение
Подписывайтесь на AWS Developers:
👾 Twitch: / aws
🐦 Twitter: / awsdevelopers
💻 LinkedIn: / aws
Подписывайтесь на Anand Шах:
🐦 Твиттер: / anandshah110
💻 LinkedIn: / anandshah110
#DataIngestion, #ApacheFlink, #ManagedServiceForApacheFlink