Просмотр новости
Найдите то, что Вас интересует
Спутники
РН
SpaceX
Роскосмос
NASA
СпутникиРНSpaceXРоскосмосNASA#вакансия #middle #удаленка #разработка #dataengineer
Ищем Data Engineer
💼 Обязанности
• Сбор требований от бизнес-заказчиков и анализ источников данных;
• Разработка, реализация и сопровождение интеграционных потоков и витрин данных;
• Разработка решений на стеке Trino, Iceberg, S3, Spark, Apache Airflow, Kafka, Cosmos, Flink;
• Оперативное решение инцидентов и выполнение задач в зоне ответственности;
• Поддержка и актуализация технической документации по платформе больших данных;
• Подготовка отчетности по выполненным задачам.
📋 Требования
• Понимание архитектуры Lakehouse и принципов работы платформ больших данных;
• Понимание отличий Big Data/Lakehouse от классических систем хранения данных;
• Уверенное знание SQL (индексы, функции, оптимизация запросов, профилирование производительности);
• Знание Python и/или Java;
• Опыт работы с реляционными СУБД (Oracle, PostgreSQL, MySQL, MS SQL и др.);
• Уверенное владение Git;
• Опыт работы с DBT, Cosmos, Apache NiFi;
• Опыт разработки на Apache Spark;
• Понимание принципов работы Trino;
• Знание форматов данных Iceberg, Parquet, Avro;
• Опыт работы с S3-совместимыми хранилищами (MinIO или аналогами);
• Опыт работы с системами управления проектами и технической документацией.
💰 Зарплата
от 200 000 ₽
🌟 Условия
Формат: удаленно
Срок проекта: длительно
Стек:
Greenplum • Trino • Apache Airflow • ClickHouse • Python • Spark • SQL (dbt) • S3 • Hadoop
Отклик: https://deffic.ru/vacancies/686-data-engineer