مهندسی داده ها یک عنصر مهم در اکوسیستم داده ها است که از متخصصان متنوعی تشکیل شده است که در مدیریت و پردازش داده ها نقش اساسی دارند. در حالی که عنوان شغل ممکن است یکسان باشد ، همانطور که در طول سالها دیده ام ، مهندسان داده ها اغلب در دو آرکیپت متمایز قرار می گیرند: مهندس داده “تجارت” و مهندس داده “تکنیک” همانطور که دوست دارم آنها را صدا کنم. در این پست وبلاگ ، ما این دو باستانی ، ویژگی های آنها و سهم آنها در دنیای مهندسی داده ها را بررسی خواهیم کرد.
مهندس داده های تجاری
این افراد همه چیز در مورد حل مشکلات تجاری است. آنها علاقه مند به ردیابی معیارها ، شاخص های کلیدی عملکرد (KPI) و ساخت داشبوردهای تعاملی هستند. غالباً ، آنها دارای تجربه SQL گسترده ای هستند و مهارت های برنامه نویسی را در زبانهای همه کاره مانند پایتون ، ایده آل برای دستکاری و تجزیه و تحلیل داده ها دارند.
مسئولیت ها: تمرکز اصلی آنها در ترجمه نیازهای تجاری به راه حل های داده. آنها خطوط لوله داده را برای جمع آوری ، تبدیل و بارگیری داده ها می سازند و بینش های معنی دار را برای تصمیم گیرندگان فراهم می کنند. این متخصصان اغلب به عنوان مهندسین اطلاعات تجاری (BI) گفته می شوند.
کارهای روزانه: یک روز معمولی ممکن است شامل جمع آوری الزامات از ذینفعان ، طراحی داشبورد ، اسکریپت در پایتون یا SQL برای استخراج داده ها و …