As part of the development of our Nearshore teams, we are looking for a Java / Scala Data Engineer to join our Data Platform teams and contribute to strategic projects around the processing and enhancement of massive data.
The agenda includes: Data Engineering, real-time streaming, GCP Cloud and pipeline industrialization.
Your responsibilities:
Designing, developing and maintaining large-scale data processing solutions
Participate in the implementation of business projects related to ELT solutions
Developing and optimizing high-performance Big Data processing
Participate in the testing, acceptance and validation phases
Maintain and evolve data assets
Collaborating closely with the development and production teams
Actively contribute to the continuous improvement of the platforms
Technical stack and environment:
Java / Scala
Apache Spark
Apache Kafka
Google Cloud Platform (GCP)
BigQuery / BigTable
SQL avanc
DBT
Pub/Sub
GitLab CI/CD
Docker Compose
Linux / Git
Desired Candidate Profile
Master's degree (Bac+5) in computer science or equivalent
Between 3 and 7 years of experience in Java/Scala Data Engineering
Solid experience in Data and Cloud architectures
Excellent command of BigQuery and processing of large volumes
Knowledge of real-time environments and data streaming
Exp rience des m thodologies Agile / Scrum
The best features:
An appetite for using AI to support development
curiosity, autonomy and a collaborative spirit.
كجزء من تطوير فرقنا في المناطق القريبة (Nearshore)، نحن نبحث عن مهندس بيانات Java / Scala للانضمام إلى فرق منصة البيانات الخاصة بنا والمساهمة في المشاريع الاستراتيجية المتعلقة بمعالجة وتحسين البيانات الضخمة.
يتضمن جدول الأعمال: هندسة البيانات، البث المباشر في الوقت الحقيقي، سحابة GCP وأتمتة مسارات العمل (pipeline industrialization).
مسؤولياتك:
تصميم وتطوير وصيانة حلول معالجة البيانات واسعة النطاق
المشاركة في تنفيذ مشاريع الأعمال المتعلقة بحلول ELT
تطوير وتحسين معالجة البيانات الضخمة (Big Data) عالية الأداء
المشاركة في مراحل الاختبار والقبول والتحقق
الحفاظ على أصول البيانات وتطويرها
التعاون الوثيق مع فرق التطوير والإنتاج
المساهمة بفعالية في التحسين المستمر للمنصات
المكدس التقني والبيئة:
Java / Scala
Apache Spark
Apache Kafka
Google Cloud Platform (GCP)
BigQuery / BigTable
SQL متقدم
DBT
Pub/Sub
GitLab CI/CD
Docker Compose
Linux / Git
ملف المرشح المطلوب
درجة الماجستير (Bac+5) في علوم الكمبيوتر أو ما يعادلها
ما بين 3 إلى 7 سنوات من الخبرة في هندسة بيانات Java/Scala
خبرة قوية في بنى البيانات والسحابة (Data and Cloud architectures)
إتقان ممتاز لـ BigQuery ومعالجة كميات كبيرة من البيانات
معرفة ببيئات الوقت الحقيقي وبث البيانات
خبرة في منهجيات Agile / Scrum
أفضل الميزات:
شغف لاستخدام الذكاء الاصطناعي لدعم التطوير
الفضول، الاستقلالية وروح التعاون.