포지션 상세
바이오리서치에이아이는 사람 대신 자연어처리 모델이 제약바이오 관련 텍스트(기사, 논문, 특허 등)를 대신 읽고 처리할 수 있도록 자연어 처리 모델을 개발하고 이를 활용하여 데이터베이스 서비스, 메일링 서비스, 챗봇 서비스, 제약바이오 특화 커뮤니티를 개발중에 있어요.
그 중에서 데이터 엔지니어는 전세계 제약회사, 바이오텍에서 데이터를 수집하고 이를 관리하는 시스템을 구축합니다.
• 매일매일 수집된 데이터를 확인하고 이상이 없는지 확인해요.
• AI 팀과 정확도를 높히기 위한 협업을 진행하고 있어요.
• FastAPI를 이용하여 백엔드 개발, 운영을 해요.
• Airflow를 활용하여 데이터 파이프라인을 개발해요.
• Prometheus를 활용한 모니터링 시스템 혹은 대쉬보드를 개발해요.
• 그 외 논문, 특허 등 다양한 데이터 리소스를 수집할 예정이에요.
• 또한 필요에 따라 다양한 데이터 소싱 작업을 진행할 예정이에요.
• 파이썬으로 웹 스크래핑을 해보신 분이면 좋아요.
• 데이터 엔지니어링 관련 팀 프로젝트를 해보신 분이면 좋아요.
• 다양한 기술을 사용하여 개발을 진행보신 분이면 좋아요.
그 중에서 데이터 엔지니어는 전세계 제약회사, 바이오텍에서 데이터를 수집하고 이를 관리하는 시스템을 구축합니다.
주요업무
• 매일매일 전세계 수많은 회사에서 보도자료를 수집하는 역할을 하고 있어요. 빠른 수집을 위해 병렬처리 프로그래밍을 이용해요.• 매일매일 수집된 데이터를 확인하고 이상이 없는지 확인해요.
• AI 팀과 정확도를 높히기 위한 협업을 진행하고 있어요.
• FastAPI를 이용하여 백엔드 개발, 운영을 해요.
• Airflow를 활용하여 데이터 파이프라인을 개발해요.
• Prometheus를 활용한 모니터링 시스템 혹은 대쉬보드를 개발해요.
• 그 외 논문, 특허 등 다양한 데이터 리소스를 수집할 예정이에요.
• 또한 필요에 따라 다양한 데이터 소싱 작업을 진행할 예정이에요.
자격요건
• 1~3년차 데이터 엔지니어링 경험이나 컴퓨터공학 관련 학사 혹은 그에 준하는 실력이 있으신 분이면 좋아요.• 파이썬으로 웹 스크래핑을 해보신 분이면 좋아요.
• 데이터 엔지니어링 관련 팀 프로젝트를 해보신 분이면 좋아요.
• 다양한 기술을 사용하여 개발을 진행보신 분이면 좋아요.
