Published on

2024 데이터 엔지니어 로드맵

Authors
  • avatar
    Name
    Mason Na
    Twitter

올해 중점적으로 볼 요소들

📌Programming languages


// 업무를 보며 자주 쓸 만한 프로그래밍 언어 공부 : Python, Scala, Java, ETC

📌Databases


// 업무에서 빠질 수 없는 데이터베이스 공부 : SQL or NoSQL - ORACLE, MySQL, PostgreSQL, MongoDB, ETC

📌Data modeling


// 비즈니스 요구에 맞춘 전체적인 데이터베이스 모델링 공부

📌Cloud computing


// 환경 구성과 배포에 필요한 클라우드 컴퓨팅 공부 : AWS, Azure, GCP

📌Big data technologies


// 빅데이터를 다루기 위한 툴 공부 : Apache Spark, Kafka, Beam, Hadoop, ETC

📌Data warehousing


// 분석을 위해 데이터를 담을 곳 공부 : Snowflake, Databricks, BigQuery, Redshift, ETC

📌Data streaming


// 실시간 데이터 처리를 위한 툴 공부 : Apache Kafka, Spark, ETC

📌Data lakes and data meshes


// 데이터 레이크 및 데이터 메시 활용법 공부

📌Orchestraction


// 데이터 파이프라인 작업 및 관리를 위한 툴 공부 : Airflow, Dagster, Mage, ETC

📌Data quality, data observability, and data governance


// 데이터 품질, 데이터 관측가능성, 데이터 거버넌스 공부

📌Data visualization


// 데이터 시각화를 위한 툴 공부 : Tableau, Power BI, Looker, ETC

📌DevOps and data ops


// 데브옵스 툴 공부 : 개발 및 배포

🔰Develop good communication and collaboration skills