[DataEngineering]DataEngineer가 되기 위한 기술 스택 정리

Data Development

• Crawler
• ETL
• Docker
• k8s
• airflow
  
  

Data Platform

• Data Orchestration
• Data Storage
  • Data Lake
  • Data Warehouse
• Data Catalog
• Data Monitoring
  • Data Validation
  • Data Notification
    
    

Data Governance

---

하둡 스파크 카프카 스칼라…? 알아야할게 산더미군..!!!