☑️ Вакансии
Большие данные

Data Engineer (Junior)

Москва задает тренды! Наши возможности позволяют изучать социальную, экологическую и транспортную обстановку города, а также создавать и улучшать городские цифровые сервисы. Вместе с коллегами мы создаём безопасную и комфортную среду для перемещения пассажиров и водителей и каждый день делаем Московский транспорт ещё лучше!

Инновационный центр «Безопасный Транспорт» создан в 2017 году для работы с Big data и является единым оператором интерактивной аналитики (BI) и консолидатором данных всего Транспортного комплекса столицы для работы с цифровым двойником города Москвы. Деятельность И Ц направлена на реализацию и внедрение концепции «Умный город», принципа «Города, управляемого через данные» и создание цифровых аналитических продуктов стратегического значения для города.

Сегодня в Инновационном центре 10+ направлений деятельности и работают более 350 человек — профессионалов с опытом в бизнесе, увлеченных данными и технологиями.
Основные задачи:
  • Поддержка работоспособности и дальнейшее развитие хранилища данных;
  • Разработка и поддержка ETL-процессов для загрузки данных из различных источников (FTP, API, сайты) с использованием Python;
  • Разработка витрин данных с использованием SQL, Python, PySpark;
  • Разработка и поддержка дагов в Airflow;
  • Реализация batch и real-time процессов загрузки данных в различные СУБД: Vertica, PostgreSQL, ClickHouse;
  • Декомпозиция и оценка трудозатрат по своим задачам;
  • Code-review, развитие внутренней культуры разработки (после 6 месяцев работы);
  • Ведение технической документации и базы знаний.
Опыт и навыки, которые мы ожидаем:

  • Законченное высшее образование;
  • Базовое понимание архитектуры распределённых систем и Big Data технологий (Hadoop, Spark — будет преимуществом);
  • Уверенное владение SQL, опыт написания сложных запросов с подзапросами, оконными функциями и регулярными выражениями, навыки оптимизации запросов;
  • Навыки программирования на Python, понимание чужого кода, способность писать читаемый и поддерживаемый код;
  • Понимание принципов работы Git-систем;
  • Понимание принципов работы систем оркестрации (Airflow);
  • Знание основных команд Linux на уровне пользователя;
  • Знание английского языка на уровне чтения технической документации;
  • Готовность разрабатывать и поддерживать в актуальном состоянии техническую документацию;
  • Навык работы с ИИ-агентами (промптинг, рефакторинг кода, выбор и адаптация подходящего решения под стек проекта);
  • Умение эффективно взаимодействовать в команде, делиться знаниями и помогать коллегам;
  • Заинтересованность в личном развитии и развитии города;
  • Релевантный опыт работы от работы 1 года.
Почему тебе понравится работать в ИЦ:
  • Мы, действительно, Инновационные и делаем крутые полезные продукты для города;
  • Наша команда — это лучшие эксперты, талантливые, креативные, яркие личности и просто хорошие люди. Да, все такое пишут, банально, но это факт. По отзывам наших сотрудников — это одно из самых больших преимуществ нашей работы;
  • Развитие. Мы непрерывно учимся новому у внешних и внутренних экспертов, прокачиваемся не только в IT, а и в транспортной и городской тематике. У нас огромное количество проектов, на которых можно быстро профессионально развиваться. Опытные руководители и наставники. Возможность посещения различных курсов и тренингов от корпоративного университета Департамента транспорта;
  • Стабильность. Московский транспорт работает для жителей и гостей города при любых условиях; Уникальное сочетание энергии IT-компании, стабильности и ресурсов ГОСа;
  • График: гибрид 5/2;
  • Локация: офис в центре Москвы, м. Белорусская;
  • Отпуск 42 дня, бесплатный проезд в метро, корпоративные скидки от компаний — партнеров и т. д.
  • Заработная плата обсуждается индивидуально, в зависимости от опыта кандидата.
Контакты:
tg: @mironovayana
почта: mironovayv1@transport.mos.ru