<aside> 📍 데이블 DATA Engineering 팀은 데이블의 데이터를 가치 있게 만드는 플랫폼을 제공함으로써 데이블이 데이터에 기반하여 의사 결정을 할 수 있도록 만드는 팀입니다.
</aside>
데이블의 고객들이 인사이트를 얻을 수 있는 데이터를 제공합니다.
데이블의 AI 시스템에 필요한 데이터 플랫폼을 만듭니다.
모든 데이블러들의 의사결정에 필요한 데이터 분석 도구와 기반 데이터를 서비스합니다.
데이터 엔지니어링링 팀은 데이블의 추천 및 광고 데이터를 처리하는 파이프라인과 플랫폼의 개발을 담당하고 있습니다.
국내외 주요 언론사들에서 만들어지는 대용량의 데이터를 데이블의 모든 곳에서 빠르고 쉽게 사용할 수 있도록 플랫폼을 구축하고 있습니다.
AWS Kinesis, Kafka를 이용하여 수집한 데이터들을 Spark Streaming, Flink, AWS Lambda 등을 이용하여 실시간으로 분석합니다.
수집한 데이터는 주로 Spark, Trino, Hadoop Mapreduce 등의 분산 처리 시스템을 이용하여 다루고 있습니다. 이 데이터들은 데이블의 AI 시스템과 사업적인 의사결정을 위해 사용됩니다.
4명의 데이터 엔지니어들로 이루어진, 빅데이터를 전문적으로 다루는 팀으로 데이블 비즈니스의 중심이 되는 모든 데이터를 만든다는 자부심을 가지고 있습니다.
국내뿐 아니라 해외 유명 언론사들로부터 생성되는 데이터들도 다루기 때문에 다른 스타트업에서 보기 힘든 규모의 본격적인 대용량 데이터 엔지니어링을 경험할 수 있습니다.
다소 왁자지껄하면서도 유쾌하고 자유롭게 논의하는 팀 문화를 지향합니다. 모르는 것을 질문하는데 주저하지 않고 새로운 아이디어가 있으면 빠르게 테스트해보고 적용하고자 합니다. 재미있는 새로운 일들을 벌이는 것을 좋아합니다.
💡데이블과 관련된 모든 분들의 Data Driven Decision을 위해 데이터를 가치 있게 만드는 플랫폼을 만듭니다.