استخدام Senior Data Engineer
{{ tooltipText }}
{{ hoverTitle }}
نشان کردن
حذف نشان
وظایف و مسئولیتهای کلیدی:
آشنایی با طراحی، توسعه و بهینهسازی پایپلاینها و پلتفرمهای داده در مقیاس بالا و تضمین پایداری، مقیاسپذیری و کارایی آنها آشنایی با طراحی و پیادهسازی معماریهای Data Platform ، Data Lake و Data Warehouse متناسب با نیازهای کسبوکار توسعه و بهینهسازی فرآیندهای ETL/ELT و جریانهای پردازش دادههای Batch و Streaming طراحی، پیادهسازی و بهینهسازی راهکارهای پردازش توزیعشده با استفاده از فناوریهایی مانند Apache Spark ، Apache Kafka و سایر ابزارهای اکوسیستم داده تحلیل و رفع مشکلات پیچیده در Performance ، Scalability ، Reliability و Data Quality سامانههای داده طراحی و پیادهسازی راهکارهای مناسب برای High Availability ، Fault Tolerance و Disaster Recovery در سامانههای داده بهینهسازی مصرف منابع، پردازشها و کوئریها و شناسایی Bottleneckهای موجود در زیرساخت و جریانهای داده طراحی و توسعه راهکارهای Data Modeling و ایجاد مدلهای داده مناسب برای سیستمهای تحلیلی و عملیاتی مشارکت در طراحی معماری سیستمهای توزیعشده و تصمیمگیری در خصوص انتخاب فناوریها و ابزارهای مناسب ایجاد و بهبود سازوکارهای Monitoring ، Observability ، Alerting و Troubleshooting برای سرویسها و Data Pipelineها همکاری نزدیک با تیمهای Backend، DevOps، Infrastructure، BI و Business برای طراحی و پیادهسازی راهکارهای دادهای مشارکت در فرآیند Code Review، طراحی فنی، مستندسازی و تعریف استانداردهای توسعه در تیم داده شناسایی فرصتهای بهبود در معماری و فرآیندهای موجود و ارائه راهکارهای فنی برای افزایش بهرهوری و کاهش هزینههای پردازشی و زیرساختی شایستگیها و توانمندیهای مورد نیاز:
مدرک کارشناسی/کارشناسی ارشد در رشتههای مهندسی کامپیوتر، علوم کامپیوتر، برق یا زمینههای مرتبط تجربه حرفهای در طراحی و توسعه Data Pipeline ها و سیستمهای پردازش داده در مقیاس بالا تسلط بر حداقل یکی از زبانهای برنامهنویسی Python یا Java/Scala تسلط بر SQL و توانایی طراحی و بهینهسازی کوئریهای پیچیده و عملیاتهای پردازش داده تسلط مناسب بر مفاهیم Database ، Data Modeling ، Indexing ، Partitioning و Query Optimization تجربه عملی با سیستمعامل Linux و توانایی Troubleshooting در محیطهای Production تجربه کار با سیستمهای Distributed و Clustered و درک عمیق از مفاهیمی مانند Scalability ، Fault Tolerance و Distributed Processing تجربه کار با ابزارهای Version Control و CI/CD مانند Git تجربه کار با ابزارهای Monitoring و Observability مانند Prometheus و Grafana توانایی تحلیل مسائل پیچیده، ریشهیابی مشکلات و ارائه راهکارهای فنی قابل اتکا توانایی طراحی و پیادهسازی راهکارهای مقیاسپذیر و قابل نگهداری توانایی همکاری موثر با تیمهای فنی مختلف و مشارکت در تصمیمگیریهای معماری روحیه یادگیری، تحقیق و ارزیابی فناوریهای جدید و توانایی انتقال دانش به سایر اعضای تیم آشنایی با موارد زیر مزیت محسوب میشود:
تجربه عمیق با Apache Spark ، Apache Kafka ، Apache Flink ، Apache Hadoop یا سایر فناوریهای پردازش توزیعشده تجربه طراحی و پیادهسازی Data Lake، Data Warehouse و Lakehouse Architecture تجربه کار با Delta Lake ، Apache Iceberg یا Apache Hudi تجربه کار با دیتابیسها و سیستمهای تحلیلی مانند ClickHouse، StarRocks، Trino، Presto یا سیستمهای مشابه تجربه کار با دیتابیسهای NoSQL مانند Cassandra ، MongoDB ، Redis و درک نقاط قوت و محدودیتهای آنها آشنایی با Kubernetes، Docker و Containerized Data Platforms تجربه کار با Cloud یا Object Storage و سرویسهایی مانند S3 آشنایی با مفاهیم Data Governance ، Data Quality ، Data Lineage و Metadata Management تجربه طراحی و پیادهسازی سیستمهای Real-Time / Streaming Data Processing آشنایی با مفاهیم Infrastructure as Code و ابزارهایی مانند Terraform یا Ansible تجربه کار با سیستمهای توزیعشده در محیطهای Production و با حجم بالای داده آشنایی با مفاهیم System Design ، Distributed Systems و Performance Engineering
ما در مهیمن از سال ۱۳۸۸ گرد هم جمع شدهایم تا فناوری را توسعه داده و با کمک آن راهکار بسازیم. فناوریهای نوآورانه شرکت مهیمن از دل ایدههای بزرگ دانشجویان و متخصصانی برخاسته که دست در دست هم، رشد کرده و با بهرهگیری از تکنولوژی، رؤیاهایشان را به واقعیت تبدیل کردهاند. بزرگترین دارایی ما در مهیمن، تیمی جوان و سرشار از انرژی است که از هر فرصتی برای رشد و توسعه خود و سازمان استفاده کرده و به دنبال پیشرفت مستمر هستند.
مفتخریم که امروز، محصولات فناورانه مهیمن، در مجموعههای بزرگ کشور به کار گرفته شدهاند تا مسائلی را حل کنند که در گذشته تصور یافتن راهکاری با دانش بومی برای آنها وجود نداشت.
اگر شما نیز به دنبال رشد و یادگیری در محیطی دوستانه، امن و پویا در کنار همکاران جوان و با استعداد هستید، ما در مهمین منتظر شما هستیم تا با هم بیاموزیم، رشد کنیم و اثری ماندگار به جایْ بگذاریم. مهمین میتواند با افتخار نقطه شروع مسیر شکوفایی شما باشد…