데이터 엔지니어

1 개요[ | ]

data engineer
데이터 엔지니어, 데이터 기술자, 빅데이터 엔지니어
  • 데이터 랭글링 전문가
  • 데이터 엔지니어링을 수행하는 사람
  • 지저분한 데이터를 가져와서 실질적인 분석을 위한 인프라를 구축한다.
  • ETL 소프트웨어 등을 실행하고 데이터셋을 통합하며 다년간의 데이터를 보완하고 정리한다.
  • 데이터 수집 환경을 구축하여 데이터를 수집하고, 잘 활용할 수 있게 정제·관리하여 양질의 데이터를 데이터 분석가들에게 제공한다.
  • 데이터 처리 시스템을 설계·구축하고 머신러닝 모델을 생성한다.
  • 데이터 서비스의 전체 스택을 사용하여 데이터 괸리, 모니터링, 보안과 개인 정보 보호 기능을 설계하고 구현한다.

2 업무내용[ | ]

  • 데이터 엔지니어링 및 플로우 자동화
  • 데이터 플로우 모니터링 및 성능 최적화
  • 전사 서비스 및 다양한 이슈에 대한 데이터 추출 및 제공
  • 분석 및 모델링 업무에 사용되는 대용량 데이터를 효율적으로 사용하기 위한 기반 데이터 가공

3 같이 보기[ | ]

4 참고[ | ]

문서 댓글 ({{ doc_comments.length }})
{{ comment.name }} {{ comment.created | snstime }}