Data Engineering Bootcamp Programı
Data Engineering, verinin istenilen yer, zaman, format, doğruluk ve tutarlılıkta hazır edilmesini sağlayan sitemin tasarım, inşa ve idamesini sağlayan bir disiplindir.
Bu veriye işletme çalışanlarının (iç müşteri) ihtiyacı olabileceği gibi, işletme dışı müşterilerin (dış müşteriler) de ihtiyacı olabilir.
Yukarıda belirtilen özellikteki verinin hazırlanmasını sağlayan rol ise data engineer rolüdür. Verinin baş döndürücü artışıyla beraber veriye dayalı yeni ürün geliştirme, ürün ve hizmet farklılaştırması, operasyonel iyileştirme gibi bir çok fırsatlar doğmuş ve veriye dayalı devasa ekonomiler oluşmuştur. Ancak bu fırsatları yakalamak için veriden değer elde etmek zorunludur. İşte bu değerde en büyük emek data engineer’e aittir.
Services Advantages
- Linux Basic, Bash Script (Ön hazırlık)
- Git Basic (Ön hazırlık)
- Crontab (Ön hazırlık)
- Postgresql & SQL Basics (Ön hazırlık)
- Docker & Kubernetes (Ön hazırlık)
- Python Programming (Ön hazırlık)
- Apache Hadoop HDFS, YARN, Hive, Sqoop
- Apache Kafka and Ecosystem
- Apache Spark Dataframe API
- Spark Optimization Techniques
- Lakehouse: Delta Lake
- Apache Spark Streaming
- Spark on Databricks, Hadoop YARN, Kubernetes, and Standalone Cluster
- Introduction to NoSQL and CAP Theorem
- Elastic Stack (Elasticsearch, Logstash, Kibana, Beats)
- Apache Cassandra
- MongoDB
- Apache Airflow
- AWS Core Services
- Data Engineering on AWS