As a data engineer you need to design and build systems for collecting, storing, and analyzing data at scale. Here, we are using modern and lesser known tools, software and libraries, so you need to be open to learning and flexible enough to catch up.
Responsibilities:
Designing and building systems for collecting, storing, and analyzing data at scale
Acquire datasets that align with business needs
Collecting data from different data sources, including XML files, JSON files, REST APIs, NBI, etc.
Develop algorithms to transform data into useful, actionable information
Build, test, and maintain database pipeline architectures
Collaborate with management to understand company objectives
Create new data validation methods and data analysis tools
Ensure compliance with data governance and security policies
General Skills:
Debian based Linux distros
Git
Docker
Docker-Compose
Python programming language
Discipled coding practices
Experienced with code reviews and pull request
English language proficient
Special Skills:
Python data analysis libraries (pandas, numpy, etc.)
Python SQLAlchemy
PostgreSQL
Additional Skills:
Clickhouse
Message Brokers (RabbitMQ, Kafka)
معرفی شرکت
مجموعۀ ایرانسل لبز، از سال 1398، با مأموریت انجام فعالیت های تحقیق و توسعه، نوآوری و تجاری سازی در زمینۀ شبکۀ ارتباطات و فناوری اطلاعات و کسب وکارهای پیرامونی با کمک مراکز علمی و پژوهشی داخل و خارج از کشور، اعم از دانشگاه ها، شرکت های دانش بنیان، استارتاپ ها و شرکت های فناور، با هدف تأمین نیازمندی های بازار ICT تأسیس شده است.
چشم انداز این مجموعه، پیشگام بودن در توسعۀ منابع انسانی و زیرساخت های تحقیقاتی اقتصاد دانش بنیان در حوزۀ ارتباطات و فناوری اطلاعات و دستیابی به جایگاه برترین شرکت ملی در زمینۀ خلق محصولات و خدمات این حوزه است و «بخش تحقیق و توسعه»، «مرکز نوآوری ایرانسل» و «آکادمی ایرانسل»، از جمله بخش های اصلی آن هستند.