Lead Big Data Engineer

OsviTech

  • Одесса
  • Постоянная работа
  • Полная занятость
  • 15 д. назад
Ми шукаємо Lead Big Data Engineer, який поєднає практичну роботу з даними та технічне лідерство. У цій ролі ви будете відповідати за проєктування, розробку та оптимізацію великих Spark-пайплайнів у Palantir Foundry, забезпечуючи їхню продуктивність, масштабованість і надійність. Окрім цього, ви будете керувати командою інженерів, наставляти колег, впроваджувати кращі практики роботи з великими даними та співпрацювати зі стейкхолдерами для досягнення бізнес-цілей. Досвід із Palantir Foundry стане перевагою, але не є обов'язковим.Основні завдання:Очолювати процеси створення та вдосконалення масштабованих пайплайнів обробки даних на базі Spark (PySpark).Розробляти та підтримувати big data-рішення з використанням Palantir Foundry.Забезпечувати високу продуктивність і ефективність витрат Spark-навантажень.Брати участь у рев'ю коду, обговоренні архітектури та впровадженні інженерних стандартів.Дбати про якість даних, безпеку та відповідність вимогам до управління ними.Керувати командою Big Data Engineers: визначати технічні пріоритети, наставляти та розвивати спеціалістів.Постійно вдосконалювати процеси, інструменти та практики розробки.Налагоджувати співпрацю між командами інженерії, data science та продукту.Вимоги до кандидата:Вища освіта у сфері Computer Science, інженерії чи суміжних напрямках.6+ років досвіду у Big Data Engineering, з яких щонайменше 1-2 роки - у ролі тімліда або техліда.Глибокі знання Apache Spark (PySpark) та досвід роботи з великими обсягами даних.Володіння Python і принципами розподілених обчислень.Навички створення та оптимізації високонавантажених дата-пайплайнів із низькою затримкою.Лідерські якості, вміння комунікувати та працювати зі стейкхолдерами.Бонус: досвід із Palantir Foundry.Бажано: розуміння CI/CD та Infrastructure as Code (Terraform, CloudFormation).Ми пропонуємо:Гнучкий формат роботи: віддалено, з офісу або комбіновано.Конкурентну заробітну плату та привабливий компенсаційний пакет.Індивідуальну траєкторію професійного розвитку.Програми навчання та підтримки: менторство, технічні зустрічі, тренінги.Активні внутрішні ком'юніті та регулярний обмін знаннями.Часткове відшкодування витрат на освіту.Подарунки до визначних дат та корпоративні заходи.Інші бонуси залежно від локації.Якщо ви хочете впливати на ключові рішення, розвивати команду та створювати інноваційні Big Data-рішення - приєднуйтесь до нас!
Надсилайте своє резюме вже сьогодні, і давайте разом будувати майбутнє великих даних.

Rabota