데이터 엔지니어 를 소개해요
당근마켓의 비전은 "당근마켓은 동네 이웃 간의 연결을 도와 따뜻하고 활발한 교류가 있는 지역 사회"를 만드는 것이에요. 이 비전을 이루기 위해 크고 작은 의사결정을 하게 돼요. 이때, 사용자에 대한 정보인 데이터를 기반으로 (Data-informed decision) 의사결정하는 것이 중요해요. 당근마켓은 데이터라는 나침반을 통해 사용자에 대해서 학습할 수 있어요. 당근마켓은 이러한 학습을 통해 더 나은 사용자 경험을 제공할 수 있다고 믿고 있어요.
데이터 엔지니어는 데이터 가치화 팀에서 일해요. 데이터 가치화 팀은 “이웃과 더 가까워지는 따뜻한 동네를 만드는데 필요한 크고 작은 의사결정들을 데이터를 활용해 배우고 이뤄내는 당근마켓을 만드는 것”을 비전으로 삼고 있어요. 데이터 가치화 팀의 고객은 사용자를 위해 크고 작은 의사결정을 하는 분들이에요. 데이터 가치화 팀은 당근마켓의 수많은 데이터를 당근마켓의 구성원들이 의사결정에 활용하게 함으로써 데이터를 가치화하는 일을 해요.
데이터 엔지니어들은 데이터를 가치화하는 과정에서 발생하는 문제들을 소프트웨어 엔지니어링을 통해 해결해요. 빠르게 성장하는 당근마켓에 발맞추어 미래에 병목이 되지 않을 데이터 시스템을 설계하고, 자동화된 테스트와 시스템에 대한 관측성 확보를 통해 데이터의 신뢰성을 지켜내요. 또한 당근마켓의 구성원들이 데이터를 통해 지표를 만들고 실험을 하는 과정에서 생기는 기술적 문제를 해결하고, 지표 플랫폼과 실험 플랫폼을 통해 당근마켓의 데이터 기반 의사결정을 폭발적으로 성장시켜요. 견고한 소프트웨어 엔지니어링을 기반으로 당근마켓에서 고품질의 데이터가 병목 없이 흐르며 가치를 만들어낼 수 있도록 하는 것이 데이터 가치화 팀 엔지니어들의 미션이에요.
이런 일을 해요
- 고성능의 확장 가능한 데이터 처리 시스템(배치/스트리밍)을 설계해요.
- 안정적이고 테스트 가능한 데이터 파이프라인을 설계하고 운영해요.
- 구성원들이 이벤트를 쉽게 추가할 수 있도록 자동화된 이벤트 로깅을 구현하고, 대용량의 이벤트를 유실 없이 안정적으로 수집할 수 있는 로그 시스템을 만들어요.
- 전사 구성원들의 데이터 기반 의사결정을 돕는 지표 플랫폼 및 실험 플랫폼을 개발하고 지속적으로 개선해요.
- 전사 구성원들이 데이터를 신뢰하고 사용할 수 있도록 데이터 시스템의 관측성(Observability)을 지속적으로 확보하고, 자동화된 데이터 품질(Quality) 체크를 통해 문제를 조기에 발견하고 해결해요.
이런 분을 찾고 있어요
- 하나 이상의 프로그래밍 언어에 능숙하신 분 (Python / Java / Scala / Kotlin / Go 등)
- 대규모 트래픽 처리를 위한 확장 가능한 데이터 아키텍처의 구성에 대한 관심이 있으신 분
- AWS, GCP 등 클라우드 환경에서 개발/운영 경험이 있거나 그에 준하는 지식을 갖추신 분
이런 분이라면 더 좋아요!
- Spark, Flink, Beam, BigQuery 등 빅데이터 프레임워크 사용 경험이 있으신 분
- 분산 환경에서 대용량 데이터 처리(배치/스트리밍) 경험이 있으신 분
- Kubernetes 등 컨테이너 오케스트레이션 시스템을 활용한 운영 경험이 있으신 분
- AWS, GCP 등 클라우드 환경에서 IaC를 활용한 데이터 인프라 설계 및 운용 경험이 있으신 분
참고해 주세요
- 정규직 채용의 경우 3개월의 수습기간이 있어요
- 평가 결과에 따라 수습 기간이 연장되거나 채용이 취소될 수 있어요
- 데이터 엔지니어 포지션은 화상/직무 면접에서 라이브 코딩 테스트가 예정되어 있어요
- 이 포지션은 산업기능요원(보충역 편입, 보충역 전직, 현역 전직) 채용이 가능해요