SmartData 2020

9-12 декабря 2020 года в онлайне состоится SmartData 2020 — конференция по Data Engineering:

Стриминг

• Flink;
• Spark;
• Kafka.

СУБД и хранилища для больших данных

Использование классических реляционных, колоночных, NoSQL, SMP/MPP хранилищ для построения DWH:

• Hive, Impala, Presto, Vertica, ClickHouse, Cassandra;
• Teradata, Redshift, GreenPlum, Exadata;
• MSSQL, PostgreSQL;
• MongoDB, DynamoDB;
• S3, ADLS, GCS, HDFS.

Архитектура DWH

• Моделирование данных;
• Примеры построения корпоративных хранилищ данных;
• Оперативная аналитика;
• Ad-hoc reporting;
• Hadoop.

Data governance

• Безопасность данных;
• Качество данных;
• Метаданные и управление каталогом;
• Управление основными данными;
• Миграция данных.

Технологии построения ETL

• Spark;
• Hadoop MapReduce;
• Sqoop;
• Анализ производительности и оптимизация.

Оркестрация и MLOps

• Airflow, NiFi, Luigi, Azkaban, Oozie;
• MLflow.

Другое

• Box Cloud solutions;
• Дата инженерия не для дата инженеров;
• CI/CD для пайплайнов данных;
• Тестирование.

Если вы занимаетесь Data Engineering и хотите быть на переднем крае технологий и первым узнать о перспективных направлениях - подписывайтесь на новости конференции, присоединяйтесь!

Трансляция Heisenbug пройдет на собственной онлайн-платформе. Вы сможете переключаться между треками и докладами, перематывать доклады назад, менять скорость воспроизведения и добавлять доклады в избранное.