سيكون المستشار مسؤولاً عن: تطوير وصيانة خطوط تحويل البيانات باستخدام DBT. معالجة ومعالجة كميات كبيرة من البيانات باستخدام BigQuery وSQL المتقدم. إدارة تدفقات البيانات والتكامل مع Pub/Sub. أتمتة سير عمل البيانات باستخدام GitLab CI/CD وDocker Compose. تطوير عمليات دفعة لتحميل وتصدير تدفقات البيانات. نشر واجهات مستخدم عامة من خلال عمليات إدراج SQL. تطوير نصوص Bash في بيئة Linux. استخدام إطار Carrefour الداخلي (Gnpi). التعاون مع فريق Data Flow في بيئة Agile.
ملف المرشح المطلوب
المؤهلات
دبلوم Bac+5 من مدرسة هندسية أو درجة جامعية مكافئة مع تخصص في علوم الحاسوب، أو إظهار خبرة كبيرة معادلة.
الخبرة
+7 في هندسة البيانات.
المهارات المطلوبة
DBT, SQL avanc , BigQuery, GCP, Pub/Sub, GitLab CI/CD, Docker Compose, PostgreSQL, Linux, Shell Bash, Git, Vim, Agile Scrum.
The consultant will be responsible for: Developing and maintaining data transformation pipelines with DBT. Manipulating and processing large volumes of data using BigQuery and advanced SQL. Managing data flows and integration with Pub/Sub. Automating data workflows using GitLab CI/CD and Docker Compose. Developing batch processes for loading and exporting data flows. Deploying generic user interfaces via SQL inserts. Developing Bash shell scripts in a Linux environment. Using the internal Carrefour framework (Gnpi). Collaborating with the Data Flow team in an Agile environment.
Desired Candidate Profile
Qualifications
Diploma of a Bac+5 in engineering school or equivalent university degree with a specialization in computer science, or demonstrating equivalent significant experience.
Experience
+7 in Data Engineering.
Required skills
DBT, SQL avanc , BigQuery, GCP, Pub/Sub, GitLab CI/CD, Docker Compose, PostgreSQL, Linux, Shell Bash, Git, Vim, Agile Scrum.