포지션 상세
=====
글로벌 콘텐츠 플랫폼 기업, SpoonLabs와 함께 하실
Data Engineer를 지금 찾고 있어요
| 오디오(Spoon)와 비디오(Vigloo)를 아우르는 콘텐츠 플랫폼으로의 더 큰 도약을 위해,
스푼라디오에서 스푼랩스로 사명을 변경하였습니다 |
=====
[SpoonLabs Data Tech 팀을 소개합니다]
Data Tech 팀은 이런 일을 해요!
• 스푼과 비글루에서 발생하는 음성, 텍스트, 이미지, 영상 등 모든 데이터를 활용하는 팀입니다.
• 한국, 일본, 대만, 영미국, 아랍권 국가에서 발생하는 전세계 데이터를 활용한 다양한 유형의 규모가 큰 데이터 처리 뿐만 아니라 데이터 기반의 의사 결정 지원을 위한 시각화 서비스 및 ML / AI 를 활용한 추천 시스템 및 서비스 품질을 개선하기 위한 어뷰징 시스템 개발에 이르기까지 데이터가 필요한 다양한 영역에서 활용하고 있습니다.
Data Tech 팀은 이런 문화로 일해요!
• 다양한 아이디어 및 신기술에 대해 적극 공유하고 의견을 나눕니다.
• 이렇게 모인 아이디어를 기반으로 도전적인 자세로서 PoC를 진행합니다.
• 처음 마주한 문제점 혹은 질문이 있다면 언제든 질문하고 빠르게 답변 받을 수 있습니다.
• 설계된 Architecture 혹은 개발된 코드는 팀 리뷰 혹은 온라인 리뷰를 통해 더욱 더 건설적인 피드백을 받을 수 있습니다.
• 여기에 팀의 생산성을 높이기 위한 상용 AI 서비스를 아낌없이 지원합니다.
Data Tech 팀은 이런 기술 스택을 사용해요!
• Hadoop Ecosystem
• Hive
• Spark
• Airflow
• Metabase
• Jupyter
• PostgreSQL / MariaDB
• Grafana / Alert Manager
• Ranger
[AWS]
• GLUE
• EC2
• S3
• EKS
• EMR
• Open Search (Elastic Search)
[Language]
• Python
• Java or Kotlin
• SQL
Data Tech 팀은 문제 해결 중심의 사고방식을 지향합니다. 다만, 개인 보다는 팀으로서 서로가 잘하는 부분을 함께 활용하여 더 큰 시너지를 낼 수 있는 방법을 찾으려고 합니다. 그 해결방법이 굳이 ML이 아니어도 됩니다. 빠른 문제 해결이 가능하다면 ML 을 비롯한 다양한 방법을 함께 찾고, 해결하려고 노력합니다. 또한, 다양한 부서와의 커뮤니케이션을 통해 활용 가능한 신기술 혹은 데이터를 선제적으로 사용해보고 실제 구현된 Demo를 제시합니다.
스푼랩스가 만드는 글로벌 콘텐츠 플랫폼 Spoon & Vigloo!
• 오디오부터 비디오까지, 스푼랩스는 전 세계 사람들의 일상을 재밌는 콘텐츠로 가득 채우고 있습니다.
• 크리에이터의 오디오 라이브 콘텐츠 플랫폼, Spoon - https://www.spooncast.net/kr
• 2분의 몰입을 선사하는 숏폼 드라마 플랫폼, Vigloo - https://www.vigloo.com/ko
• AWS Cloud 기반의 환경에서 Glue EC2 EKS 등을 활용하여 데이터 수집 및 처리 서비스를 운용하고 관리합니다.
• 서비스에서 발생한 Database Log 및 3rd-Party Service에서 수집합니다.
• 수집된 다양한 유형의 데이터(정형 비정형 반정형)를 전처리하여 정형화 및 표준화합니다.
• 정형화된 데이터를 기반으로 SQL Query를 활용하여 타 부서에 데이터를 제공 및 시각화된 대시보드를 제공합니다.
• Hadoop ecosystem 기반의 Open Source 설치 및 운영 경험
• Spark 기반의 ETL 처리 경험
• Airflow 기반의 스케쥴링 및 DAG 구성 경험
• Ansi-SQL 기반의 쿼리 작성 및 고급 함수 사용 경험
• Python Java Kotlin 등 프로그래밍 언어 개발 경험
• 데이터 파이프라인 운영 및 모니터링 등의 경험
글로벌 콘텐츠 플랫폼 기업, SpoonLabs와 함께 하실
Data Engineer를 지금 찾고 있어요
| 오디오(Spoon)와 비디오(Vigloo)를 아우르는 콘텐츠 플랫폼으로의 더 큰 도약을 위해,
스푼라디오에서 스푼랩스로 사명을 변경하였습니다 |
=====
[SpoonLabs Data Tech 팀을 소개합니다]
Data Tech 팀은 이런 일을 해요!
• 스푼과 비글루에서 발생하는 음성, 텍스트, 이미지, 영상 등 모든 데이터를 활용하는 팀입니다.
• 한국, 일본, 대만, 영미국, 아랍권 국가에서 발생하는 전세계 데이터를 활용한 다양한 유형의 규모가 큰 데이터 처리 뿐만 아니라 데이터 기반의 의사 결정 지원을 위한 시각화 서비스 및 ML / AI 를 활용한 추천 시스템 및 서비스 품질을 개선하기 위한 어뷰징 시스템 개발에 이르기까지 데이터가 필요한 다양한 영역에서 활용하고 있습니다.
Data Tech 팀은 이런 문화로 일해요!
• 다양한 아이디어 및 신기술에 대해 적극 공유하고 의견을 나눕니다.
• 이렇게 모인 아이디어를 기반으로 도전적인 자세로서 PoC를 진행합니다.
• 처음 마주한 문제점 혹은 질문이 있다면 언제든 질문하고 빠르게 답변 받을 수 있습니다.
• 설계된 Architecture 혹은 개발된 코드는 팀 리뷰 혹은 온라인 리뷰를 통해 더욱 더 건설적인 피드백을 받을 수 있습니다.
• 여기에 팀의 생산성을 높이기 위한 상용 AI 서비스를 아낌없이 지원합니다.
Data Tech 팀은 이런 기술 스택을 사용해요!
• Hadoop Ecosystem
• Hive
• Spark
• Airflow
• Metabase
• Jupyter
• PostgreSQL / MariaDB
• Grafana / Alert Manager
• Ranger
[AWS]
• GLUE
• EC2
• S3
• EKS
• EMR
• Open Search (Elastic Search)
[Language]
• Python
• Java or Kotlin
• SQL
Data Tech 팀은 문제 해결 중심의 사고방식을 지향합니다. 다만, 개인 보다는 팀으로서 서로가 잘하는 부분을 함께 활용하여 더 큰 시너지를 낼 수 있는 방법을 찾으려고 합니다. 그 해결방법이 굳이 ML이 아니어도 됩니다. 빠른 문제 해결이 가능하다면 ML 을 비롯한 다양한 방법을 함께 찾고, 해결하려고 노력합니다. 또한, 다양한 부서와의 커뮤니케이션을 통해 활용 가능한 신기술 혹은 데이터를 선제적으로 사용해보고 실제 구현된 Demo를 제시합니다.
스푼랩스가 만드는 글로벌 콘텐츠 플랫폼 Spoon & Vigloo!
• 오디오부터 비디오까지, 스푼랩스는 전 세계 사람들의 일상을 재밌는 콘텐츠로 가득 채우고 있습니다.
• 크리에이터의 오디오 라이브 콘텐츠 플랫폼, Spoon - https://www.spooncast.net/kr
• 2분의 몰입을 선사하는 숏폼 드라마 플랫폼, Vigloo - https://www.vigloo.com/ko
주요업무
• Big-data 기반 OpenSource(s)가 설치된 On-Premise Cluster를 관리 및 운용합니다.• AWS Cloud 기반의 환경에서 Glue EC2 EKS 등을 활용하여 데이터 수집 및 처리 서비스를 운용하고 관리합니다.
• 서비스에서 발생한 Database Log 및 3rd-Party Service에서 수집합니다.
• 수집된 다양한 유형의 데이터(정형 비정형 반정형)를 전처리하여 정형화 및 표준화합니다.
• 정형화된 데이터를 기반으로 SQL Query를 활용하여 타 부서에 데이터를 제공 및 시각화된 대시보드를 제공합니다.
자격요건
• 5년 이상 데이터 엔지니어 업무 경력• Hadoop ecosystem 기반의 Open Source 설치 및 운영 경험
• Spark 기반의 ETL 처리 경험
• Airflow 기반의 스케쥴링 및 DAG 구성 경험
• Ansi-SQL 기반의 쿼리 작성 및 고급 함수 사용 경험
• Python Java Kotlin 등 프로그래밍 언어 개발 경험
• 데이터 파이프라인 운영 및 모니터링 등의 경험
