Когда у инструмента больше 10 000 звёзд на GitHub, доказывать его состоятельность уже не нужно. А вот рассказать об опыте его применения полезно — и сегодня открываем такую запись: youtu.be/fgaBGc3VWWQ

На SmartData было два доклада про Snowplow: один в формате «введения в тему», а этот — уже о конкретном опыте использования в «Детском мире». Напрашивается шутка, что мир-то детский, а вот доклад — нет: youtu.be/539ypLtSIbY

Одни люди при слове «Lineage» вспоминают MMORPG-игру, другие — Android-дистрибутив. А третьи уже посмотрели этот доклад, и им теперь интересннее Data Lineage: youtu.be/2jUefrTZWHk

Этот доклад про предварительную фильтрацию информации получил отличные отзывы. Видимо, на конференции хорошо сработала своя «предварительная фильтрация информации» в виде Программного комитета, отбирающего доклады: youtu.be/qZ8ud40wDPU

Бывает интереснее слушать доклад, когда кроме самого выступления, есть ещё и соответствующий репозиторий в опенсорсе. Сегодня открываем как раз такую запись: youtu.be/OT-Sx-bd-6k

Сталкивались ли вы с болью, когда данных стало так много, что в них уже плохо получается ориентироваться? Сегодня открываем запись доклада о том, что с этим делать: youtu.be/nCt4gYVQdqc

Начинаем постепенно публиковать записи осенней SmartData. И зайдём с козырей: доклада, который на конференции смотрели больше всего: youtu.be/hsCtWz8JDRc

Обсуждения продолжаются — в залах, в дискуссионках, в коридорах… Присоединяйтесь! А передохнуть от профессиональных дискуссий можно на стендах партнеров — там тоже оживленно. Делитесь своими фото и впечатлениями от конференции в комментариях

Офлайн-часть конференции SmartData 2024 началась! Приветствуем всех участников и приглашаем на первые доклады.

Первый день SmartData 2024 подошел к концу. Записи докладов доступны на сайте. Спасибо всем участникам! До встречи на офлайне в Москве уже в ближайшее воскресенье — 8 сентября.

SmartData 2024 стартует 4 сентября онлайн. В этот день часть докладов любой сможет посмотреть бесплатно. Достаточно зарегистрироваться. Подробнее — в нашем посте в Telegram: t.me/smartdata_channel/286

Никита Юрасов и Леонид Кожинов расскажут о библиотеке, которая позволяет интегрировать dbt и Airflow. В докладе — об устройстве библиотеки, ее конкурентах и задачах, которые она поможет решить: jrg.su/tyw2xB

Новая SmartData уже совсем скоро — а мы тем временем опубликовали все записи старой! Раньше открывали их здесь постепенно, а теперь можете увидеть общий плейлист со всеми сразу: jrg.su/7pJCr0

Шри Вишну Чандерраю расскажет про ангиограмму данных — метод, который позволит провести сквозное санитарное тестирование конвейера данных и проверить качество данных. Технологии: GitLab Pipelines, GitHub Actions, Docker, JUnit, pytest и другие: jrg.su/igOkZt

До SmartData 2024 — неделя! Кроме докладов, вас ждут интервью, круглый стол, обсуждение и Lightning Talks. Подробнее: t.me/smartdata_channel/282 Еще будут жаркие дискуссии, нетворкинг, розыгрыши от партнеров и афтерпати с коллегами по цеху.  Купить билеты: jrg.su/zb3IO4

Павел Солодовников расскажет о библиотеке ускорения баз данных C++. В докладе — об истории движка, конкурирующих решениях, интероперабельности с другими системами через Apache Arrow и Substrait и расширяемости библиотеки: jrg.su/NA0lkv

Алсу Нурутдинова и Алина Кочева на примере чат-бота для технической поддержки расскажут о подходе RAG (Retrieval Augmented Generation). С ним языковая модель может давать ответы на основе текстов, которые не были видны при обучении, но есть в базе данных: jrg.su/4ypdmj

Александр Мадумаров расскажет, как разработать инструмент для автоматизации data quality, который можно быстро внедрить в любое хранилище данных: jrg.su/j6gQWH

Александр Казанский, head SRE платформы данных Т-Банка, расскажет про систему хранения данных Ceph: какие у нее ключевые функции и почему ее стоит выбрать для реализации лейка on-prem. Подробности: jrg.su/TGdyBx

Никита Благодарный и Александра Чекмарева из компании «Честный знак» расскажут, как структурировать большой монорепозиторий, в котором хранится разнородный код для Datalake, и построить для него CI/CD-процессы: jrg.su/M6DY2w