ما در شرکت مهیمن به منظور بهره‌برداری از کاربردهای نوین فناوری اطلاعات و ارتباطات، تلاش می‌کنیم تا فرآیندهای مالیاتی کشور را ساده، شفاف و کارآمد کنیم. در این راستا، به دنبال جذب یک همکار جدید در نقش DataOps Engineer هستیم.

وظایف و مسئولیت‌های کلیدی:

• طراحی و نگهداری پایپلاین‌های داده به منظور استخراج، پالایش و بارگذاری اطلاعات (ETL) از انواع منابع داده‌ای مختلف
• اطمینان از کیفیت و تمامیت داده و استفاده از روش‌های هوشمند برای بهینه‌سازی و مقیاس‌پذیر کردن پایپلاین‌های داده و ایجاد ساختارهای حاکمیت داده (Data Governance)
• بهینه‌سازی‌های لازم برای افزایش کارایی پردازش داده، رفع مشکلات داده‌ای و ارائه راهکارهای فنی جهت بهبود عملکرد

شایستگی‌ها و توانمندی‌های مورد نیاز:

• آشنا با معماری مدرن LakeHouse و Table Formatها مثل Iceberg جهت نگهداری تاریخچه داده
• آشنا با Object Storageها مثل Ceph و MinIO
• آشنا با ابزارهای پردازش Big Data مثل Spark و Trino
• دارای تفکر انتقادی و حل مسئله، توجه به جزئیات و مهارت‌های تحلیلی قوی به‌منظور فهم و توضیح رفتار داده
• آشنا با ابزارهای OLAP ترجیحاً StarRocks
• آشنا با ابزارهای ETL مانند Knime و ابزارهای Orchestration مانند Airflow و توانایی طراحی Workflowهای استخراج، تبدیل و بارگذاری داده در محیط‌های گرافیکی و مبتنی بر فرآیندهای خودکار
• تسلط مناسب جهت کار با پایگاه داده‌های رابطه‌ای ترجیحاً Oracle
• آشنا با ابزارهای حاکمیت داده مثل OpenMetaData و DataHub
• آشنایی با مفاهیم و ابزارهای Container Orchestration