هو انا ممكن ان استخدم تقنيه ال Exponentially Weighted Averages لملأ قيمة NULL في البيانات ؟

بشكل عام تكون مفيدة في حال كان هناك ترتيب للبيانات، مثلًا لنفترض أنه لديك بيانات توضح درجات الحرارة من تاريخ محدد لتاريخ محدد.

في حال كان هناك أحد التواريخ فيه خطأ و لم يتم تسجيل درجة الحرارة فيه، يمكنك استعمال هذه التقنية فبشكل عام أنت تريد أن تعطي وزن أكبر للأيام القريبة، فدرجات الحرارة نادرًا ما تتغير بشكل كبير بين يوم و آخر، و لكن بنفس الوقت تريد إبقاء تأثير الأيام البعيدة و لكن بدرجة أخف (لإلغاء تأثير تقلب حدث بشكل استثنائي في درجات الحرارة).

تحياتي.

لا مشكلة، لكن فعاليتها تعتمد آلية التطبيق، أي تُستخدم EWA في السلاسل الزمنية، حيث يتم تعويض القيمة المفقودة حسب متوسط مرجح للقيم السابقة، مع منح وزن أكبر للبيانات الأحدث.

أيضًا حسب نوع البيانات، فالبيانات الرقمية والسلاسل الزمنية EWA فعالة عليها، خاصة لو هناك ارتباط زمني بين القيم (مثل أسعار الأسهم، درجات الحرارة).

لكن غير مناسبة للقيم المفقودة الكثيرة لو نسبة القيم المفقودة عالية (> 20%).

وليست مناسبة لجميع البيانات، مثل البيانات غير زمنية أو فئوية/نصيةأو تحتوي على قيم مفقودة كثيرة أو غير عشوائية (MNAR)، فهنا لديك نماذج الانحدار أو KNN لاستكمال القيم بناءًا على علاقات مع متغيرات أخرى، وخوارزميات متقدمة مثل MICE (Multiple Imputation by Chained Equations) لمعالجة قيم مفقودة معقدة.

بتاريخ 12 دقائق مضت قال Mustafa Suleiman:

فئوية/نصية

طيب الفئوي بس ارقم يعني انا استخدم الLabelEncoder  هتكون مفيد ؟

وا الف شكرااا جدا جدا لحضرتكم

جزاكم الله كل خير

بتاريخ 7 ساعة قال Ali Ahmed55:

طيب الفئوي بس ارقم يعني انا استخدم الLabelEncoder  هتكون مفيد ؟

وا الف شكرااا جدا جدا لحضرتكم

جزاكم الله كل خير

لا مشكلة في استخدامه في حال الفئات مرتبة Ordinal  أو تستخدم خوارزميات غير حساسة للترميز الرقمي كأشجار القرار.

وتجنبه في حال الفئات غير مرتبة Nominal أو تستخدم خوارزميات حساسة للمسافات مثل KNN والانحدار.

بتاريخ 21 ساعة قال Mustafa Suleiman:

لا مشكلة في استخدامه في حال الفئات مرتبة Ordinal  أو تستخدم خوارزميات غير حساسة للترميز الرقمي كأشجار القرار.

وتجنبه في حال الفئات غير مرتبة Nominal أو تستخدم خوارزميات حساسة للمسافات مثل KNN والانحدار.

 

الف شكرااا جدا لحضرتك

جزاك الله كل خير