#вакансия
В команду разработки
adata.kz нужны ребята на позицию Data Engineer!
Компания AllData, Алматы.
Требования:
- Опыт работы в качестве Data Engineer 2+ года.
- SQL,ElasticSearch, ArangoDB.
- Python 2+ года опыта.
- Опыт использования одного из инструментов для работы с большими данными: Apache Spark, Apache Kafka, Apache Hadoop (HDFS, HBase, Hive), Apache NiFi, Apache Airflow, Apache Ozzie.
- Опыт разработки как batch,так и streaming ETL процессов в информационных системах.
Обязанности:
- Определение общего вектора развития систем.
- Создание инфраструктуры, необходимой для оптимального извлечения, преобразования и загрузки данных из самых разных источников данных, используя пакетную и потоковую обработку.
- Проектирование базы данных с использованием устройств массовой параллельной обработки: ElasticSearch,ArangoDB, PostgreSQL и т. Д.
- Желание делиться своим опытом.
- Не удаленно
- Вилка 500-700К