Запрос счета
Заполните поля ниже, чтобы получить счет на оплату билетов PyCon Russia от юридического лица
Юр. лицо
ИНН
Количество билетов на конференцию
+
Количество футболок (цена 1500 рублей)
Размер можно указать в анкете после выставления счёта, а саму футболку вы получите на конференции
+
Промокод (если есть)
Отказоустойчивое масштабирование ETL систем
Тезисы
Мы занимаемся разработкой ETL систем. С ростом проекта мы столкнулись с серьезными инфраструктурными проблемами и хотели бы поделиться своим опытом практического внедрения k8s для обеспечения отказоустойчивости и повышения производительности python-пайплайнов на Airflow.

Доклад рассчитан на средний+ уровень — архитектура.
Слушатели узнают текущую ситуацию с python приложениями на Airflow:
  • Как правильно версионировать данные в ETL системах
  • ETL пайплайны на python в условиях нестабильной технической инфраструктуры
  • Адаптивное масштабирование ETL систем под доступные ресурсы
  • Отказоустойчивое использование python streaming приложений
Мы занимаемся разработкой ETL систем. С ростом проекта мы столкнулись с серьезными инфраструктурными проблемами и хотели бы поделиться своим опытом практического внедрения k8s для обеспечения отказоустойчивости и повышения производительности python-пайплайнов на Airflow.

Доклад рассчитан на средний+ уровень — архитектура.
Слушатели узнают текущую ситуацию с python приложениями на Airflow:
  • Как правильно версионировать данные в ETL системах
  • ETL пайплайны на python в условиях нестабильной технической инфраструктуры
  • Адаптивное масштабирование ETL систем под доступные ресурсы
  • Отказоустойчивое использование python streaming приложений
Видеозапись доклада
Появится здесь после конференции
Информация о спикере
Андрей Попов
Техлид, Позитив Технолоджиз
Занимаюсь разработкой с 2003 года. Питон мой родной язык, использую с первых версий. Сейчас руковожу командой опытных программистов.
Андрей Попов
Техлид, Позитив Технолоджиз
Занимаюсь разработкой с 2003 года. Питон мой родной язык, использую с первых версий. Сейчас руковожу командой опытных программистов.
Все доклады секции