[AVP] 모빌리티 서비스 Data Engineer

직무상세

서비스에서 발생하는 다양한 이벤트를 데이터로 표현하는 과정에서 발생하는 문제를 소프트웨어 엔지니어링을 통해 해결합니다.
데이터를 통해 사용자를 이해하는 과정에서 생기는 기술적인 문제를 해결하고 데이터 플랫폼을 통해 데이터 기반의 의사결정을 지원하는 제품 개발 업무를 수행합니다.

• 데이터 플랫폼 구축 및 운영
  　· 고가용성 및 확장에 용이한 데이터 처리 시스템 설계
  　· 다양한 형태의 정형/비정형 데이터를 안정적으로 수집할 수 있는 데이터 레이크하우스 아키텍처 고도화
  　· 데이터 사이언티스트의 모델 개발 생산성 향상을 위한 Feature Store 설계 및 구축
  　· 데이터 기반의 의사결정을 지원하는 데이터 제품 개발 및 지속 개선

• 데이터 파이프라인 구축 및 운영
  　· 실시간 및 배치 데이터 처리를 위한 안정적인 파이프라인 개발
  　· 데이터 정합성 검증 및 장애 대응이 용이한 테스트 가능한 파이프라인 환경 구축
  　· 서비스 요구사항에 따른 신속하고 정확한 데이터 제공 프로세스 최적화

• 데이터 거버넌스 체계 수립
  　· 데이터 표준화 정책 수립 및 데이터 사전 고도화
  　· 데이터 라이프사이클 관리 및 데이터 리니지 시스템 고도화
  　· 데이터 품질 모니터링 지표 설정 및 지속적인 품질 개선 활동 수행

필수요건

· 학사 이상의 학위를 보유하신 분
· 3년 이상의 데이터 엔지니어 경력을 보유하신 분
· 대규모 트래픽 처리를 위한 확장 가능한 데이터 아키텍처 개발/운영 경험이 있거나 그에 준하는 지식을 보유하신 분
· Go, Python, Scala, Kotlin, Java 중 하나 이상의 개발 언어를 능숙하게 사용할 수 있는 능력을 보유하신 분

우대사항

· 컴퓨터 공학 분야에서 학사 이상의 학위를 보유하신 분
· Spark, Big Query, Flink 등 빅데이터 프레임워크 사용 경험을 보유하신 분
· Data Hub, Amundsen, Openmetadata 등 데이터 카탈로그 및 거버넌스 도구 활용 경험을 보유하신 분
· Iceberg, Hudi, Delta Lake 등 Open Table Format 활용 경험을 보유하신 분
· Kubernetes 기반 데이터 플랫폼 구축 및 운영 경험을 보유하신 분
· 경로 탐색, 위치 데이터 분석 등 모빌리티 분야에 대한 지식 및 경험을 보유하신 분