Память, данные, python
Тезисы
Доклад-напоминалка про основные проблемы, возникающие при работе с памятью в Python, с уклоном в работу с данными. Обсудим, что делать, когда ваши данные растут, но объём ещё не такой, чтобы убедить Ops в необходимости hadoop-кластера, а в Python уже становится больно. Посмотрим несколько кейсов и попробуем их поотимизировать.

Проверим, можно ли решить проблемы памяти из-за объёмных структур данных в Python за счёт расширения C/Rust языками. Посмотрим, какие изменения приходят с новыми версиями Python касаемо работы с памятью (и приходят ли вообще).
Доклад-напоминалка про основные проблемы, возникающие при работе с памятью в Python, с уклоном в работу с данными. Обсудим, что делать, когда ваши данные растут, но объём ещё не такой, чтобы убедить Ops в необходимости hadoop-кластера, а в Python уже становится больно. Посмотрим несколько кейсов и попробуем их поотимизировать.

Проверим, можно ли решить проблемы памяти из-за объёмных структур данных в Python за счёт расширения C/Rust языками. Посмотрим, какие изменения приходят с новыми версиями Python касаемо работы с памятью (и приходят ли вообще).
Видеозапись доклада
Появится здесь после конференции
Информация о спикере
Юлия Волкова
Data TeamLead, CodeScoring
Ex EPAM, ex GridDynamic, в свободном плавании последние 1,5 года, работаю с разными дата и бэкенд проектами.

Мечусь от Data Engineering стека с Apache Airflow, базами данных и прочим ETL-тулингом до работы с классическими REST-API сервисами и скучными ORM.

В свободное отсутствующее время балуюсь опенсорсом и поддерживаю свои библиотеки https://github.com/xnuinside, участвую в программном комитете PiterPy.
  • Юлия Волкова
    Data TeamLead, CodeScoring
    Ex EPAM, ex GridDynamic, в свободном плавании последние 1,5 года, работаю с разными дата и бэкенд проектами.

    Мечусь от Data Engineering стека с Apache Airflow, базами данных и прочим ETL-тулингом до работы с классическими REST-API сервисами и скучными ORM.

    В свободное отсутствующее время балуюсь опенсорсом и поддерживаю свои библиотеки https://github.com/xnuinside, участвую в программном комитете PiterPy.
Все доклады трека