ما در حال توسعه یک زیرساخت داده مقیاس‌پذیر هستیم و به دنبال یک مهندس داده حرفه‌ای هستیم که بتواند جریان داده‌های عملیاتی را از پایگاه‌های داده به سیستم‌های پردازش و تحلیل real-time منتقل کند.

شرح نقش:

• طراحی و پیاده‌سازی pipelineهای داده
• پیاده‌سازی CDC از MySQL با Debezium
• مدیریت و بهینه‌سازی Kafka topics و consumer/producer ها
• طراحی ساختار داده برای ClickHouse جهت گزارش‌گیری سریع
• مانیتورینگ و بهبود performance و latency در pipeline
• همکاری با تیم backend و product برای درک نیازهای داده‌ای

مهارت‌های مورد نیاز:

• تسلط کامل به MySQL و ساختارهای دیتابیس رابطه‌ای
• تجربه عملی با Kafka (Producer / Consumer / Stream processing)
• تجربه کار با Debezium یا ابزارهای مشابه CDC
• آشنایی عمیق با ClickHouse یا سایر OLAP database ها
• درک مفاهیم event-driven architecture
• توانایی دیباگ کردن سیستم‌های distributed

مهارت‌های اختیاری:

• تجربه با Kubernetes یا Docker
• آشنایی با Schema Registry
• آشنایی با پایتون و پی اچ پی

ویژگی‌های فردی:

• نگاه سیستم‌محور و علاقه‌مند به معماری داده
• توانایی حل مسئله در شرایط پیچیده
• دقت بالا در کار با داده‌های حساس
• روحیه همکاری تیمی

آنچه کسب خواهید کرد:

• کار روی سیستم‌های داده در مقیاس بالا
• معماری مدرن مبتنی بر event streaming
• فضای توسعه فنی عمیق و چالش‌برانگیز
• امکان رشد در حوزه Data Engineering و Data Platform