Перейти к содержимому

Создание таблицы лидеров с помощью Amazon Managed Service для Apache Flink | 1/5

AWS Developers

0:00 / 0:00

Создание таблицы лидеров с помощью Amazon Managed Service для Apache Flink | 1/5

12 348 просмотров · 2 г. назад
AWS Developers
1,71 млн подписчиков
12 348 просмотров · 2 г. назад
Хотите вывести свою аналитику на новый уровень? В этом видео мы углубимся в основы архитектуры потоковой обработки данных и рассмотрим, как использовать Amazon Kinesis Data Streams для приема данных. Мы также рассмотрим игровые таблицы лидеров в качестве примера использования, прежде чем показать вам, как настроить архитектуру и выполнить задание по приему данных в вашей собственной учетной записи AWS. Обратите внимание, что развертывание инфраструктуры, показанной в этой серии, повлечет за собой расходы в вашей учетной записи AWS, поэтому не забывайте останавливать все ресурсы, такие как управляемые блокноты Flink Studio, когда вы их не используете. В этой серии Ананд Шах (специалист по анализу данных и потоковой обработке в AWS) поможет вам создать современную архитектуру потоковой обработки данных для игровой таблицы лидеров в реальном времени. Эта архитектура включает в себя прием данных, обогащение данных в реальном времени с помощью захвата изменений данных в базе данных (CDC), обработку данных, а также вычисление, хранение и визуализацию результатов. Вы также изучите передовые методы потоковой аналитики, такие как метод управляющего канала для A/B-тестирования, обновление функций и параметров без простоев, а также способы обработки данных с задержкой. Ананд также расскажет вам о процессе дедупликации данных, а также о том, как хранить исторические данные для воспроизведения по запросу. 🎉 🌟 Начните работу с Amazon Managed Service для Apache Flink: https://aws.amazon.com/managed-servic... уже сегодня, чтобы создавать и запускать полностью управляемые приложения Apache Flink на AWS! 🔗 Репозиторий Github: https://github.com/build-on-aws/real-... Ресурсы, использованные в этом видео: 🔗 Обзор AWS CDK: https://docs.aws.amazon.com/cdk/v2/gu... 🔗 Использование блокнота Studio с управляемым сервисом для Apache Flink: https://docs.aws.amazon.com/managed-f... 🔗 SQL API Apache Flink: https://nightlies.apache.org/flink/fl... 🔗 Введение в управляемый сервис Amazon для Apache Flink: https://docs.aws.amazon.com/managed-f... 🔗 Введение в Amazon Kinesis Data Streams: https://docs.aws.amazon.com/streams/l... Продолжайте обучение, используя приведенные ниже ссылки! 🔗 Amazon Kinesis Data Streams: https://aws.amazon.com/kinesis/data-s... 🔗 Amazon Managed Flink Studio Notebooks: https://docs.aws.amazon.com/managed-f... 🔗 Современная архитектура потоковой обработки данных на AWS: https://docs.aws.amazon.com/whitepape... 00:00 Введение 00:32 Что вы узнаете? 01:26 Основы потоковой аналитики 02:01 Наиболее распространенные сценарии использования потоковой обработки данных 02:20 Обзор архитектуры потоковой обработки данных 03:09 Сценарий использования игровых таблиц лидеров 03:57 Архитектура потоковой обработки игровых таблиц лидеров 05:09 Прием потоковых данных 05:35 Демонстрация: Репозиторий Github 07:43 Демонстрация: Обзор исходного кода CDK и развертывание 08:18 Демонстрация: Настройка инфраструктуры 10:30 Демонстрация: Настройка ноутбука Amazon Managed Apache Flink Studio 11:40 Демонстрация: Задание 1 - Выбор данных игровых событий 13:11 Заключение Подписывайтесь на AWS Developers: 👾 Twitch:   / aws   🐦 Twitter:   / awsdevelopers   💻 LinkedIn:   / aws   Подписывайтесь на Anand Шах: 🐦 Твиттер:   / anandshah110   💻 LinkedIn:   / anandshah110   #DataIngestion, #ApacheFlink, #ManagedServiceForApacheFlink