미리비트-빅데이터,서버 백엔드 엔지니어(인메모리 기반)
미리비트-빅데이터,서버 백엔드 엔지니어(인메모리 기반)
1/2
미리비트경기 성남시경력 10년 이상

빅데이터,서버 백엔드 엔지니어(인메모리 기반)

포지션 상세

미리비트는 혁신적인 기술과 창의적인 솔루션을 통해 고객에게 최상의 가치를 제공하는 IT 전문 기업입니다.
1. 고객 중심의 맞춤형 솔루션 제공: 고객의 요구에 맞춘 최적의 솔루션을 제공하여 고객 만족을 최우선으로 합니다.
2. 지속적인 기술 혁신: 최신 기술을 적극적으로 도입하고 연구하여 시장의 변화에 빠르게 대응합니다.
3. 글로벌 네트워크: 다양한 글로벌 파트너와의 협력을 통해 국제적인 경쟁력을 갖추고 있습니다.
이번 채용에서는 하이닉스 K8S 기반 Data Platform DSP 서비스 구축 프로젝트에 참여할 고급 엔지니어를 모집합니다. 이 프로젝트는 K8S 환경에서 DSP 서비스 통합 개발을 목표로 하며, Lakehouse Catalog Backend 기반 통합 서비스 재설계 및 다양한 데이터 관리 기능을 포함합니다. 여러분의 전문성을 발휘하여 당사의 성장과 함께 하시길 바랍니다.

직무 소개 : 하이닉스 반도체 공정 생성 대규모 빅데이터 처리 프로젝트

주요업무

• k8s 인프라 환경에서 분산 인메모리 엔진(flink, spark 등)을 활용한 실시간 데이터 스트리밍 파이프 라인 설계 및 구축
• 오브젝트 스토리지(MinIO)로의 데이터 적재 및 관리,마이그레이션
• 빅데이터 스트리밍 시스템(flink) 또는 마이크로 배치 시스템의 성능 분석, 튜닝 및 성능 테스트
* 그외 신기술 및 운영에 대한 기술 제안
• 서비스 어플리케이션 및 클러스터 트러블 슈팅
• 기술 문서(컨플루언스)

자격요건

• 빅데이터 서비스,플랫폼 구축 개발 경력이 있으신 분
• spark 경험 5년이상과 전체 10년 이상 경력을 보유하신 분
• spark, flink 등 인메모리 엔진을 활용한 대규모 데이터 처리 프로젝트 수행 경험이 있으신 분
• 대용량 분산 클러스터 환경에 대한 이해도와 경험이 있으신 분
• 시스템 성능 튜닝 및 성능 테스트 경험 있으신 분
• scala 또는 java 중급 이상의 실력을 보유하신 분

기술 스택 • 툴

태그

마감일

상시채용

근무지역

경기 성남시 분당구 정자일로 155
본 채용정보는 원티드랩의 동의없이 무단전재, 재배포, 재가공할 수 없으며, 구직활동 이외의 용도로 사용할 수 없습니다.

본 채용 정보는 에서 제공한 자료를 바탕으로 원티드랩에서 표현을 수정하고 이의 배열 및 구성을 편집하여 완성한 원티드랩의 저작자산이자 영업자산입니다. 본 정보 및 데이터베이스의 일부 내지는 전부에 대하여 원티드랩의 동의 없이 무단전재 또는 재배포, 재가공 및 크롤링할 수 없으며, 게재된 채용기업의 정보는 구직자의 구직활동 이외의 용도로 사용될 수 없습니다. 원티드랩은 에서 게재한 자료에 대한 오류나 그 밖에 원티드랩이 가공하지 않은 정보의 내용상 문제에 대하여 어떠한 보장도 하지 않으며, 사용자가 이를 신뢰하여 취한 조치에 대해 책임을 지지 않습니다.
<저작권자 (주)원티드랩. 무단전재-재배포금지>