هي البيانات في الحقيقية مش زي الكورسات!

وعليكم السلام

البيانات في الواقع العملي تختلف كثيرا عما يقدّم في الدورات التعليمية.

ففي الكورسات، تكون البيانات عادة نظيفة، منسقة، ومهيأة مسبقا لأغراض التعلم، حيث تزال القيم المفقودة وترتب الأعمدة وتوضّح المتغيرات بشكل مبسّط لتسهيل الفهم والتركيز على المفهوم المطلوب.

أما في الواقع فإن البيانات تكون غالبا فوضوية وغير مكتملة، وقد تحتوي على قيم مكررة أو متناقضة، مما يتطلب وقتا وجهدا كبيرين في مرحلة التحضير والتنظيف قبل البدء بأي تحليل أو بناء نماذج.

كما أن التعامل مع البيانات الحقيقية يتطلب أدوات متقدمة ودراية بكيفية معالجة المشكلات غير المتوقعة.

ولذلك فإن اكتساب المهارات التقنية يجب أن يرفق دائما بفهم عملي لكيفية التعامل مع تحديات البيانات الواقعية وتحليلها.

وعليكم السلام ورحمة الله وبركاته.

نعم بالفعل البيانات في الحياة الواقعية (Real-world data) مختلفة تماما عن البيانات الموجودة في الدورات والتي يتم توفيرها لك أثناء الدراسة:

فالبيانات الموجودة في الكورسات أو الدراسة تكون :   

• منظمة و نظيفة و مثالية.
• ودائما ما تجد فيها كل الأعمدة المطلوبة.
• وتجدها بدون قيم مفقودة كثيرة أو بدون أى قيم مفقودة.
• وتجدها مفهومة وسهلة ولها تفسير لكل شئ.
• تكون غالبا متوازنة وموزعة توزيع جيد .
• وغالبا تكون جاهزة مباشرة للإستخدام .

أما البيانات الواقعية :

• فتكون غير مرتبة  وفيها أخطاء أو قيم متطرقة وضوضاء.
• من الممكن أن تكون بها قيم مفقدوة  أو بها أسماء أعمدة خاطئة.
• من الممكن أن لا تعرف ما هي أصل البيانات أو معناها وشرحها.
• من الممكن أن تكون غير متوازنة وغالبا بها انحيازات
• تحتاج إلى تنظيف وتحويل وتجهيز كبير قبل أي تحليل لها إو إستخدامها.

ولهذا ينبغي عليك أن تتعلم وتكون لديك خبرة في :

• تنظيف البيانات (Data Cleaning)
• تحليل البيانات الاستكشافي (EDA)
• تحويل البيانات (Data Transformation)
• التعامل مع القيم المفقودة
• استخدام أدوات متقدمة مثل Pandas و SQL و أو حتى Excel في بعض الأحيان للتعامل مع شتى الطرق التي تستخدم في تخزين وحفظ البيانات.

الف شكراا جدا جدا لحضرتكم

جزاكم الله كل خير