소개
ML 데이터 플랫폼 팀은 5명의 엔지니어로 구성되어 당근의 1,900만 MAU 사용자들을 위한 피드 개인화와 광고 추천에 필요한 대용량 데이터를 고성능으로 처리하는 데이터 플랫폼을 구축합니다. 이 팀은 초당 100K 이상의 트래픽을 30ms 이하로 처리하며, 스트림 기반 실시간 데이터 수집과 피쳐 플랫폼 운영을 통해 추천 서비스의 안정성과 확장성을 책임지고 있습니다.
하는 일
- 피쳐 플랫폼의 성능 향상 및 사용성 개선과 안정적 운영
- 실시간 데이터 스트림 수집 및 처리 시스템 개발과 확장
- 스트림 프로세서와 LLM을 활용한 임베딩 벡터 추론 결과 및 프롬프트 결과 데이터 플랫폼 적재 환경 구축
- 대용량 트래픽 처리 및 저장소와 캐시 최적화
- 데이터 품질 모니터링 및 이상 징후 탐지 시스템 개발
지원 자격
- 분산 서비스 환경에서 백엔드 서비스 라이프 사이클 전반에 대한 이해
- 베스트 프랙티스대로 사용 가능한 프로그래밍 언어 하나 이상 보유
- 필요에 따라 새로운 언어 학습에 거부감이 없는 분
우대 자격
- ML 기반 시스템 경험 또는 관심
- 저지연 대규모 트래픽을 처리하는 고가용성 백엔드 서비스 구축 및 운영 경험
사용 기술
- Go, gRPC, Kafka, Redis, AWS DynamoDB