Data Platform DevOps Engineer

데브시스터즈의 게임과 서비스에서 생성되는 다양한 데이터를 수집하는 것부터, 적재, 가공, 활용까지 전 주기에 걸친 데이터 파이프라인의 엔지니어링을 담당합니다. 데브시스터즈 구성원들이 고객에게 최고의 경험을 선사할 수 있도록, 데이터를 효과적으로 활용할 수 있게 다방면으로 돕습니다.

Fun Facts

• 높은 Scalability 를 추구하는 팀입니다.
• 최근 5년간 99.999% 이상의 높은 가용률을 유지하고 있는 Kafka 클러스터 운영을 통해 유지되는 신뢰를 기반으로, 중앙화된 로깅 인프라 서비스를 운영합니다.
• 누구나 필요할 때, 수십 TB의 메모리, 수천 코어의 CPU, 수백 대의 노드가 필요한 대용량 분석 작업도 쉽게 할 수 있는 환경을 제공합니다.
• 여러 서비스들을 아우를 수 있는, 좋은 퀄리티의 데이터를 수집할 수 있는 환경을 운영하고 있습니다.
• 수백 명의, 데브시스터즈 구성원이 매주 우리의 서비스를 사용하고 있습니다.

Data Platform 셀의 주요 기술 스택

• 데이터 수집/처리/분석: Kafka/Kafka Streams, Spark, Databricks, Delta Lake, AWS(S3, Glue, …), Elastic Stack
• 인프라 : AWS, Kubernetes, Terraform, Docker, Istio
• CI/CD: Spinnaker, ArgoCD, Helm, GitHub Actions
• 모니터링: Datadog, Grafana
• 주 언어: Python, Scala, Go, TypeScript

Data Platform DevOps 포지션은 연차에 대한 제한 없이, 데이터 플랫폼에 대한 DevOps 일을 재밌게 해나갈 수 있는 사람을 찾고 있습니다.

기술적 폭을 넓히는 것과 깊이를 더하는 것을 같이 추구하고, 높은 목표치를 위해 끊임없이 노력할 사람들을 구합니다. 함께 하시게 되면 공용 인프라 조직과의 협업은 물론, 데이터 분석가 / 플랫폼 개발자 등 다양한 사람들과 협업하며 데이터가 끊임없이 흐르는 플랫폼을 만들기 위한 다양한 도전을 이어나갈 것입니다.

담당업무

• 다양한 게임/서비스에서 발생하는 수많은 데이터를 잘 수집하고 활용하기 위해 AWS / Kubernetes 와 같은 인프라 지식을 바탕으로 효율적으로 데이터 컴포넌트를 구성합니다.
• 로깅 인프라 (Kafka, Elastic Stack 등)
• 데이터 파이프라인 관련 백엔드 서비스 (수집 서버 등 각종 API 서버, 로그 전처리 시스템 등)
• 데이터를 잘 활용하기 위한 다양한 서비스 (로그 스키마 관리 서비스, A/B 테스팅 실험 플랫폼 등)
• DevOps 엔지니어로서, 데이터 플랫폼에 초점을 맞춘 다양한 기술적 도전을 시도합니다.
• 예) 다른 서비스보다 더 Stateful한 데이터 컴포넌트들을 급증하는 트래픽에 맞춰서 유동적으로 운영하고, 그들의 생명주기에 맞춘 DevOps 사이클을 형성하기 위한 R&D 진행
• 예) 서로 간 네트워크 통신이 아주 빈번한 컴포넌트들의 인프라 이중화
• 예) 서버/시스템의 상태를 넘어서, 데이터의 상태를 한 눈에 인지하고 능동적으로 문제를 파악할 수 있는 시스템 설계 지원자격
• 종류에 상관없이 하나 이상의 프로그래밍 언어를 능숙하게 사용
• 네트워크, 운영체제, 데이터베이스 등 CS 기반 지식
• 개발한 프로젝트를 Docker, Kubernetes 등 컨테이너 기술로 운영해본 경험
• DevOps 엔지니어링에 대한 관심
• 관습화된 상황을 개선하기 위한 분석적 사고 및 문제 탐구 능력
• 엔지니어링을 통해 데브시스터즈의 Data-Driven Culture를 이끌어가고자 하는 의지

우대조건

• DevOps 관련 경험
• 클라우드 서비스(AWS, Azure, GCP 등) 사용 경험
• Kubernetes 클러스터 운영 경험 (Prometheus 등 모니터링, Istio등 service mesh, …)
• Terraform, AWS CloudFormation, AWS CDK 등을 통한 IaC(Infrastructure as Code) 경험
• Ansible, Puppet, Chef 등의 Provisioning 툴 사용 경험
• CI/CD 파이프라인 구축 경험
• Linux 환경에 대한 깊은 이해 또는 트러블슈