Summary
Written in English from the original postingThe role operates large-scale Kafka broker clusters for real-time data pipelines, logs, and service events across two data centers. It includes capacity planning, automated upgrades, Kafka Connect-based data mirroring, failover validation, and monitoring improvements. The position requires deep Kafka, JVM, Linux, and network troubleshooting experience.
Job description
합류하게 될 팀에 대해 알려드려요
- 토스뱅크의 Kafka Engineer는 Data Division 내 Real-Time Data 팀에 속해있어요.
- Real-Time Data 팀은 Kafka, Flink, CDC, Kafka Connect, ClickHouse, OpenTelemetry, Langfuse 등 실시간 Data Platform을 운영하고 있어요.
- 전사 서비스 이벤트와 로그가 지나가는 Kafka를 유실 없이 제공하는 것이 팀의 핵심 미션이에요.
합류하면 함께할 업무예요
- 서버 MSA 이벤트, 데이터 파이프라인, 로그 등 용도별로 분리된 대규모 Kafka Broker Cluster를 두 개의 데이터센터에서 운영해요.
- Broker 증설, partition reassign, rolling upgrade, 용량 계획을 주도하고 Ansible 기반으로 자동화해요.
- Broker와 Client(Spring Boot) 사이에서 발생하는 지연, rebalance, consumer lag 문제의 근본 원인을 JVM, OS, 네트워크 수준까지 추적해 해결해요.
- 데이터센터 이중화(Producer Active-Active, Consumer Active-Standby)를 위한 데이터 미러링과 offset sync 애플리케이션을 Kafka Connect 기반으로 개발하고 운영해요.
- DC 전환 훈련과 failover 시 유실 검증으로 "중복은 허용하되 유실은 없는" Kafka를 만들어요.
- 메트릭과 로그 기반의 모니터링, 알림을 고도화하고 AI를 활용해 장애 분석을 자동화해요.
이런 분과 함께하고 싶어요
- Kafka Broker를 운영 환경에서 직접 운영하며 장애를 해결해 본 경험이 있는 분이 필요해요.
- replication, ISR, controller, consumer group 등 Kafka 내부 동작을 깊이 있게 이해하고 계신 분이 필요해요.
- JVM 기반 언어로 개발할 수 있고, GC와 메모리 문제를 분석할 수 있는 분이 필요해요.
- Linux, 네트워크, 디스크 I/O 등 탄탄한 시스템 지식을 가진 분이 필요해요.
이런 경험이 있다면 더 좋아요
- 베어메탈 환경에서 Ansible 등으로 Kafka 배포와 업그레이드를 자동화해 본 경험
- 멀티 데이터센터 이중화나 미러링(MirrorMaker2 등)을 설계하거나 운영해 본 경험
- Kafka Connect 플러그인 개발 또는 Kafka 오픈소스 코드를 분석하거나 기여한 경험
- Spring Boot 환경에서 Kafka Client를 활용하거나 Client 가이드를 제공해 본 경험
이력서는 이렇게 작성하시는 걸 추천해요
- 운영하신 Kafka의 규모(클러스터 수, Broker 수, 처리량)와 맡으신 역할을 구체적으로 적어주세요.
- 장애나 성능 문제의 원인을 찾아 해결한 과정을 상세하게 적어주세요.
- 결과물 소개보다 그 과정에서 깊이 있게 배운 것을 중심으로 적어주시는 것을 추천해요.
토스뱅크로의 합류 여정
- 서류접수 > 직무 인터뷰 > 문화적합성 인터뷰 > 레퍼런스 체크 > 처우 협의 > 최종 합격 및 입사
꼭 확인해주세요
- 이력서 및 제출 서류에 허위 사실이 발견되거나 근무 이력 중 징계사항이 확인될 경우, 채용이 취소될 수 있어요.
- 토스뱅크 내부규정상 결격사유 해당자 또는 금융기관 인력 채용 상 결격사유 해당자는 채용이 취소될 수 있어요.
- 장애인 및 국가보훈대상자는 지원 시 관련법에 따라 우대하고 있어요.
- 카프카 엔지니어 (Kafka Engineer) 포지션은 전형 과정에서 국문, 영문 명칭을 함께 사용해요.
The weekly Digest
The week's most transparent data engineering jobs in your inbox once a week.
Once a week, a few new jobs that state their salary, location and stack, plus links to the rest. No open tracking; clicks are counted per issue, not per person. Unsubscribe with one click.