يقوم مهندسو البيانات بجمع البيانات وتحويلها وتخزينها باستخدام خطوط الأنابيب وأنظمة التخزين. ويتضمن ذلك استخراج البيانات من أنظمة مصادر بيانات مختلفة، وتحويلها إلى منطقة التهيئة، ثم تحميلها في قواعد البيانات أو مستودعات البيانات أو أنظمة بحيرات البيانات. ويضمن مهندس البيانات إمكانية الوصول الكمي والنوعي إلى مصادر البيانات. فهو/هي يضمن توفر البيانات وجودة استخدامها من أجل تسهيل استغلالها من قبل محللي البيانات وعلماء البيانات. وتركز نطاق تدخله/ها على أنظمة التطبيقات المتعلقة بإدارة البيانات ومعالجتها وعلى منصات البيانات الضخمة وإنترنت الأشياء.
الملف الشخصي المرغوب فيه
مهندس / ماجستير في البيانات الضخمة أو ما شابه. يستخدم/تطبيقات وتقنيات وأساليب إحصائية لتنظيم البيانات ودمجها وترجمتها بكفاءة. وينتج دراسات إحصائية، ويقوم بتحليلات على أي نوع من مصادر البيانات المتاحة من أجل إنتاج قيمة. ويدفع التحليل لحل مشكلة و/أو تلبية حاجة تجارية.
Data engineers collect, transform and store data using pipelines and storage systems. This involves extracting data from various data source systems, transforming it into the staging area, and loading it into database, data warehouse or data lake systems. The Data Engineer ensures quantitative and qualitative access to data sources. He/she ensures availability of data and guarantees the quality of its use in-order-to facilitate its exploitation by Data analysts and Data scientists. His/her scope of intervention is focused on application systems around data management and processing and on Big Data, IoT platforms.
Desired Candidate Profile
Engineer / Master Big Data or similar He/she uses analytic applications, techniques, and statistical methods to organize, synthesize and translate data efficiently. He/she produces statistical studies, carries out analyses on any kind of available data sources in order to produce value. Drives analysis to solve a problem and/or satisfy a business need.