مدریک
مدریک

مهندس داده و کلان‌داده (Data Engineer / Big Data Engineer)

تهران، طرشت
تمام وقت
یکشنبه تا پنج‌شنبه 9 صبح الی 6 عصر
-
-

این فرصت شغلی چقدر برای من مناسب است؟

11 تا 50 نفر
فناوری اطلاعات / نرم افزار و سخت افزار
شرکت ایرانی دارای مشتریان داخلی و خارجی
1398
خصوصی
توضیحات بیشتر

شاخص های کلیدی از نظر کارفرما

3 سال سابقه کار در گروه شغلی مشابه
کارشناسی ارشد کامپیوتر / فناوری اطلاعات
Python - متوسط
T-SQL - متوسط
Linux - متوسط
Elasticsearch - مقدماتی
Apache Spark - متوسط
Docker - متوسط
Apache Airflow - مقدماتی

شرح شغل و وظایف

شرح وظایف:
  • طراحی، توسعه و پیاده‌سازی زیرساخت‌های جمع‌آوری، انتقال، پردازش و ذخیره‌سازی داده
  • توسعه و نگهداری پایپ‌لاین‌های پردازش داده و فرآیندهای ETL/ELT
  • طراحی معماری داده برای پروژه‌های نرم‌افزاری، هوش مصنوعی و تحلیل داده
  • یکپارچه‌سازی داده‌ها از منابع و سیستم‌های مختلف
  • طراحی، مدیریت و بهینه‌سازی پایگاه‌های داده
  • توسعه راهکارهای پردازش داده در مقیاس بزرگ و سیستم‌های توزیع‌شده
  • پیاده‌سازی سیستم‌های پردازش بلادرنگ (Real-time) و دسته‌ای (Batch)
  • طراحی و پیاده‌سازی Data Warehouse و Data Lake
  • بهینه‌سازی عملکرد، کیفیت، امنیت و دسترس‌پذیری داده‌ها
  • همکاری با تیم‌های هوش مصنوعی، تحلیل داده و Backend
  • مستندسازی، پایش و رفع مشکلات زیرساخت داده
شرایط همکاری:
  • حداقل 3 سال سابقه کار مرتبط در حوزه Data Engineering یا Big Data
  • تسلط به زبان برنامه‌نویسی Python و SQL
  • تجربه عملی در طراحی و توسعه Data Pipeline و فرآیندهای ETL/ELT
  • تجربه کار با Apache Spark و PySpark
  • آشنایی با Apache Kafka و سیستم‌های پردازش Streaming
  • تجربه کار با Apache Airflow یا ابزارهای Orchestration
  • آشنایی با ابزارهای ذخیره‌سازی توزیع‌شده مانند MinIO و HDFS
  • تجربه کار با ClickHouse، Elasticsearch یا سایر پایگاه‌های داده تحلیلی
  • تسلط به PostgreSQL و آشنایی با پایگاه‌های داده NoSQL
  • آشنایی با مفاهیم Data Modeling، Data Warehouse و Data Lake
  • تجربه کار با Linux و Docker
  • آشنایی با معماری سیستم‌های توزیع‌شده و مقیاس‌پذیر
  • توانایی تحلیل مسائل فنی، حل مسئله و کار تیمی

مزیت محسوب می‌شود:

  • آشنایی با ابزارهای BI و Data Visualization
  • تجربه توسعه زیرساخت داده برای پروژه‌های AI/ML و MLOps
  • آشنایی با Kubernetes و ابزارهای مانیتورینگ

محل کار: برج فناوری شریف

شرایط احراز شغل

جنسیت
تفاوتی ندارد
خدمت سربازی
اتمام خدمت سربازی و یا معافیت از آن الزامی است
تحصیلات
کارشناسی ارشد| کامپیوتر / فناوری اطلاعات
زبان
انگلیسی| بالاتر از متوسط ۷۰٪
نرم افزارها
Python| متوسط T-SQL| متوسط Apache Spark| متوسط Apache Airflow| مقدماتی Linux| متوسط Docker| متوسط Elasticsearch| مقدماتی

ارسال رزومه برای مدریک

گزارش مشکل یا تخلف آگهی