포지션 상세
DevOps Chapter는 서비스의 안정성과 효율성을 극대화하기 위한 플랫폼 엔지니어링 조직입니다. 단순히 배포 자동화를 넘어 코드로 인프라를 관리하고 운영을 자동화하며, 비용 최적화와 지속적 관찰성을 통해 엔지니어링 생산성을 높이는 것을 목표로 합니다.
DevOps Chapter는 Infra unit과 Data unit으로 구성되어 있습니다. 그 중 Data unit은 서비스 분석에 필요한 플랫폼 구축과 대용량 데이터 파이프라인(배치/실시간)의 설계 및 운영을 담당하며, 나아가 전사적인 데이터 거버넌스와 데이터 민주화를 주도하는 핵심 조직입니다.
Apache Iceberg 기반 Medallion Architecture를 운영하며, 데이터를 분석에 최적화된 구조로 만들어 나갑니다.
1. 파이프라인과 데이터를 모니터링하는 체계를 구축하고, 품질 검증과 장애 대응 프로세스를 정비합니다.
2. 데이터 민주화를 위해 데이터 카탈로그와 Lineage를 구성하고, Self-service 분석 환경을 만들어 갑니다.
3. 이벤트 수집 아키텍처를 개선하고, 분산 처리 환경의 성능과 비용을 지속적으로 최적화합니다.
4. 추천 시스템, AI 모델 서빙을 위한 데이터 파이프라인을 설계하고, LLM 서비스의 데이터 인프라를 함께 고도화합니다.
Airflow, Spark 등을 활용한 데이터 파이프라인 운영 경험이 있으신 분
1. 파이프라인 전 라이프사이클 (설계→개발→모니터링→장애대응) 주도 경험이 있으신 분
2. 쿼리 최적화, 파티셔닝, Backfill 전략 수립 경험이 있으신 분
3. 데이터에 대한 문제점을 스스로 발견하고 방안을 제시하는 주도성이 있으신 분
4. 다양한 직군(분석가, 기획자 등)과 원활하게 소통하며 요구사항을 구체화할 수 있으신 분
DevOps Chapter는 Infra unit과 Data unit으로 구성되어 있습니다. 그 중 Data unit은 서비스 분석에 필요한 플랫폼 구축과 대용량 데이터 파이프라인(배치/실시간)의 설계 및 운영을 담당하며, 나아가 전사적인 데이터 거버넌스와 데이터 민주화를 주도하는 핵심 조직입니다.
주요업무
주문, 결제, 광고, 사용자 로그 등 다양한 데이터를 안정적으로 수집하고 처리하는 배치/실시간 파이프라인을 설계하고 운영합니다.Apache Iceberg 기반 Medallion Architecture를 운영하며, 데이터를 분석에 최적화된 구조로 만들어 나갑니다.
1. 파이프라인과 데이터를 모니터링하는 체계를 구축하고, 품질 검증과 장애 대응 프로세스를 정비합니다.
2. 데이터 민주화를 위해 데이터 카탈로그와 Lineage를 구성하고, Self-service 분석 환경을 만들어 갑니다.
3. 이벤트 수집 아키텍처를 개선하고, 분산 처리 환경의 성능과 비용을 지속적으로 최적화합니다.
4. 추천 시스템, AI 모델 서빙을 위한 데이터 파이프라인을 설계하고, LLM 서비스의 데이터 인프라를 함께 고도화합니다.
자격요건
분산 처리 기반의 빅데이터 기술 활용에 대해 3년 이상의 경험이 있으신 분Airflow, Spark 등을 활용한 데이터 파이프라인 운영 경험이 있으신 분
1. 파이프라인 전 라이프사이클 (설계→개발→모니터링→장애대응) 주도 경험이 있으신 분
2. 쿼리 최적화, 파티셔닝, Backfill 전략 수립 경험이 있으신 분
3. 데이터에 대한 문제점을 스스로 발견하고 방안을 제시하는 주도성이 있으신 분
4. 다양한 직군(분석가, 기획자 등)과 원활하게 소통하며 요구사항을 구체화할 수 있으신 분
