데이터 엔지니어
엔지니어링
채용 중인 포지션으로 돌아가기
데이터 엔지니어
엔지니어링 베트남 (원격/하이브리드) 정규직 / 계약직
포지션 개요
분석 팀과 ML 팀이 의존하는 데이터 인프라를 직접 구축하고 책임집니다. Middle 레벨에서는 기존 웨어하우스 아키텍처 안에서 ETL/ELT 파이프라인을 구축하고 확장합니다. Senior 레벨에서는 웨어하우스의 데이터 모델을 처음부터 설계하고, 데이터 품질과 거버넌스 기준을 정하며, 새벽 2시에 파이프라인이 멈췄을 때 다른 엔지니어가 가장 먼저 찾는 사람이 됩니다.
주요 업무
- Python, Apache Spark, Airflow로 확장 가능한 ETL/ELT 파이프라인 설계 및 구축
- 쿼리 성능과 비용을 기준으로 클라우드 데이터 웨어하우스(Snowflake, BigQuery, Redshift) 관리 및 최적화
- 비즈니스에 새로운 데이터 소스가 추가되어도 유지되는 데이터 모델링(Star/Snowflake 스키마) 구현
- 배치 ETL로 부족한 경우를 위한 레이크하우스 및 스트리밍 파이프라인(Databricks, Delta Lake 또는 Iceberg, Kafka 또는 Flink, 변경 데이터 캡처) 구축
- dbt로 테스트와 버전 관리가 적용된 변환을 구현하고, 데이터를 생산하고 사용하는 팀과 데이터 계약 합의
- 데이터 품질, 무결성, 거버넌스 책임: 이해관계자가 알기 전에 파이프라인 장애를 먼저 포착하며, 신선도, 볼륨, 스키마 점검으로 알림 제공
- AI 활용을 위한 데이터 준비: ML과 LLM에 쓸 수 있도록 정제, 문서화, 접근 제어가 적용된 데이터셋
- 데이터 사이언티스트, 애널리스트와 협업해 ML 모델과 대시보드용 데이터셋을 정제하고 문서화
- (Senior) 웨어하우스 스키마와 파이프라인 아키텍처를 처음부터 끝까지 책임지고 팀의 데이터 품질 기준 수립
자격 요건
- 영어: 유창한 구두 및 서면 커뮤니케이션 능력. 해외 이해관계자가 추측할 필요가 없도록 파이프라인과 데이터 계약 문서화
- 데이터 엔지니어링 경력 Middle 3년 이상, Senior 5년 이상
- Python과 쿼리 최적화를 포함한 고급 SQL에 능숙한 분
- 빅데이터 도구(Spark, Kafka)와 오케스트레이션(Airflow/Prefect) 경험
- 클라우드 데이터 플랫폼(AWS Glue 또는 EMR, Azure Data Factory 또는 Microsoft Fabric, Databricks) 중 하나 이상에 대한 이해
- 애플리케이션 코드뿐 아니라 데이터 파이프라인에도 CI/CD와 테스트 방식을 적용하는 방법에 대한 이해
- AI 보조 엔지니어링을 일상적으로 활용: 파이프라인 코드에 AI 코딩 어시스턴트를 쓰고, AI 기반 이상 탐지로 데이터 품질 문제를 더 빨리 포착
- AI가 생성한 SQL과 파이프라인 코드를 배포 전에 실제 데이터로 테스트하고, 민감한 데이터를 승인되지 않은 AI 도구에 넣지 않음
- AI를 위한 데이터 준비: 임베딩 및 벡터 인덱스 파이프라인, 리니지, PII 마스킹, 검색이 읽을 수 있는 데이터에 대한 접근 제어
- 우대: Google Professional Data Engineer, Azure DP-700, Databricks Data Engineer, SnowPro Core 등 데이터 자격증
- (Senior) 데이터 웨어하우스 또는 파이프라인 아키텍처를 처음부터 설계하고 팀의 거버넌스 기준을 수립한 경험
GTEMAS 소개
GTEMAS는 통합된 에코시스템을 기반으로 하는 글로벌 엔지니어링 파트너입니다. 우수 인재, 지속적인 학습, 엄격한 딜리버리 관리를 하나로 묶어 안정적이고 확장 가능한 세계적 수준의 디지털 제품을 만듭니다.
함께 성과를 만들어 보시겠습니까?
GTEMAS에서 커리어의 다음 단계를 시작하세요. 아래 버튼을 눌러 지원 절차를 시작하실 수 있습니다.
지원 시작하기