Ильинский Олег

Ильинский Олег

Построение хранилища данных на Hadoop. Разработка ETL процессов на Apache Airflow (ETL фреймворк). Обработка данных на Spark, Hive, Map-Reduce, Python, SQL в реляционных БД, на ClickHouse. Разработка внутреннего Rest API на Django для получения метрик. Настройка и оптимизация фреймворка Airflow.

Оптимизация процессов обработки данных на Spark, Hive, MapReduce и д.р.

Oracle Pl/SQL, SQL, Python, Bash, C/C++, IBM DataStage, SAS Data Integration Studio, Informatica, Cloud, Linux, Git SVN, ETL, Spark, Hadoop, Hive PostgreSQL, Django Framework, REST, Jupiter, MapReduce, Celery