[브레이브모바일(숨고)] Data Engineer

[브레이브모바일(숨고)] Data Engineer

[담당 업무]

- 외부 데이터 소스 수집 및 데이터 파이프라인 구축: 외부 데이터 소스(광고 매체 등)로부터 데이터를 안정적으로 수집하기 위해 실시간·배치 데이터 파이프라인을 설계하고 자동화하여 데이터 수집 및 처리 효율을 극대화합니다

- 데이터 설계 및 분석 환경 제공 : 데이터 웨어하우스와 데이터 마트를 구축하여 마케팅, 그로스 등 유관 부서에서 광고 성과를 빠르고 정확하게 분석할 수 있는 환경을 제공합니다

- 유지보수 및 모니터링 : 광고 매체 API 스펙 변경, 인증 방식 변경, 정기 점검 등 외부 요인으로 인한 데이터 수집 이슈를 상시 모니터링하고, 파이프라인 수정 및 운영 대응을 통해 데이터 수집의 연속성을 보장합니다

- 문제 해결 : 광고 매체 API 호출, 인증, 응답 지연·실패 등 실시간 및 배치 데이터 수집 과정에서 발생하는 문제를 신속히 파악하고 해결합니다

- 환경 고도화 : 다양한 기술을 테스트하고 실제 운영 환경에 적합성을 검증하여 최적화된 환경을 구성, 효율성을 향상시킵니다

- 대용량 데이터 처리 : 데이터 처리 시스템을 설계하여 데이터 전송, 저장, 분석 과정의 성능을 최적화합니다

- MLops 관리 : 머신러닝 모델의 배포 및 운영 환경을 관리하여 안정적인 모델 서빙과 운영을 지원합니다

[자격요건]

- 경력 1~3년 또는 이에 준하는 역량을 갖추신 분

- 카카오, 구글 등 광고 매체 API를 활용한 데이터 수집 및 연동 경험이 있는 분

- Python, Shell Script 등 하나 이상의 프로그래밍 언어를 능숙하게 다루시는 분

- 데이터 수집, ETL / ELT 파이프라인 설계, 구축 및 운영에 대한 경험이나 이에 준하는 지식을 보유하신 분

- 데이터베이스에 대한 이해를 바탕으로 분석 목적에 맞게 테이블 설계 및 모델링이 가능하시거나 이에 대한 높은 관심을 보유하신 분

- SQL을 활용해 데이터를 분석하고, 수집된 데이터의 정합성을 검증할 수 있는 분

[우대요건]

- 데이터의 정확성과 품질 향상을 위한 분셕력을 겸비하신 분

- 배치 작업 스케줄링 및 데이터 파이프라인 운영 과정에서 발생하는 이슈를 파악하고 개선해본 경험이 있거나, 이에 대한 이해가 있는 분

- 클라우드 환경(GCP or AWS) 및 컨테이너/클러스터 기술(Kubernetes 등)에 대한 이해 또는 경험이 있는 분

- 새로운 기술이나 도메인 변화에 관심을 토대로 팀 역량 강화에 기여해 본 경험이 있으신 분

- 기본적인 네트워크, 인프라에 대한 이해도가 있으신 분

- 대용량 데이터 또는 실시간 데이터 처리 환경에 대한 이해와 관심을 가지고 계신 분