استخدام Senior Data Engineer

شرح موقعیت شغلی

• راه‌اندازی و نگه‌داری پایپلاین‌های داده (Batch و Stream) با دسترس‌پذیری و بهره‌وری بالا
• مانیتور، نگه‌داری و دیباگ کردن سرویس‌های ارائه دهنده دیتا برای تحلیل‌ و استفاده‌های real-time
• بالا بردن Reliability و Availability سرویس‌های موجود دیتا
• بالا بودن توانایی برقراری ارتباط با دیتا ساینتیست‌ها، دیتا آنالیست‌ها، مهندسین نرم‌افزار، تیم دواپس و غیره برای ساختن پلتفرم‌های دیتایی که در راستای دستیابی به اهداف بیزینسی شرکت باشد
• پیشنهاد ساختار‌ها و ابزارهای جدید برای نیازهای رو به رشد داده‌محور سازمان و بهینه‌سازی ابزارهای فعلی

• آشنایی در کدنویسی با Java یا Python (تسلط به هر دو زبان مزیت محسوب می‌شود)
• تسلط در کار با انواع دیتابیس‌های SQL از جمله MySQL
• آشنایی در کار با انواع دیتابیس‌های NoSQL از جمله ElasticSearch،MongoDB و Redis
• توانایی طراحی پایپلاین‌های داده با ساختار ETL
• آشنایی با تکنولوژی‌های انبار داده (Data Warehouse)
• آشنایی در کار با لینوکس، داکر
• تسلط به ابزارهای حوزه مهندسی داده از جمله:
  Apache Kafka
  Kafka Connect
  Debezium
  Apache Airflow
  Apache Presto (Trino)
  Singlestore (MemSQL)

• آشنایی با ابزارهای مانیتورینگ مثل Prometheus و Grafana
• آشنایی با Kubernetes
• آشنایی با ابزارهای بیگ دیتا مثل Hadoop یا S3
• تسلط در کار با ELK Stack
• آشنایی با تکنولوژی‌های Streaming مثل Apache Spark و Apache Flink

مهارت‌های مورد نیاز

• Data engineer
• MySQL
• MongoDB
• Redis

حداقل سابقه کار

• سه تا شش سال

جنسیت

• مهم نیست

وضعیت نظام وظیفه

• مهم‌ نیست

ارسال رزومه