هل هندسة الميزات "فن" معناها إنها مش بس خطوات ثابتة أو قواعد جامدة، لكنها بتحتاج إبداع وتفكير ؟

وعليكم السلام ورحمة الله وبركاته على. كل عام وأنتم بخير وعيد أضحى مبارك عليك.

نعم صحيح ما تقوله . حيث إن هندسة المميزات هي أقرب إلى الفن وتحتاج إلى تفكير وليس مجرد خطوات.

حيث أولا يجب عليك أن تكون قادر على فهم البيانات بعمق وتستطيع تخمين أو تخيل الميزات اللتي ممكن أت تساعد النموذج في التعلم بشكل أفضل وأيضا في المشاكل المختلفة الحلول لا تكون واضحة ولكن أغلب الأوقات أنت تحاول أت تجرب وتفكر خارج الصندوق.

فيجب أن تكون فاهم بشكل جيد للمجال اللذي تعمل عليه. فمثلا الميزات المفيدة في تحليل النص غير اللتي في الصور أو البيانات المالية أو البيانات الطبية . وممكن ميزة معينة يتم الإعتقاد أنها عشوائية ولكنها تكون مرتبطة بسلوك معين في السياق هذا.

وكل ما تعمل على مشاريع أكثر وتتمرن أكثر ستبدا بشكل تلقائي بالإحساس والشعور بأنواع الميزات اللي من الممكن أن تعمل معك وتكون صحيحة.وأيضا الخبرة تجعلك ترى الأنماط patterns من أول مرة بشكل واضح.

الف شكراا جدا جدا لحضرتك

جزاك الله كل خير

الأمر ليس مجموعة من الخطوات تستطيع نسخها ولصقها، بل عملية استكشافية تتطلب حدس، فضول ومعرفة بالمجال، أي بمعنى أدق الخبرة هي التي تُحدث فارق ملموس في دقة النماذج، تعميمها، قابلية تفسيرها وفي نجاح المشروع من الأساس، وكلما تم الاستثمار في الجانب الإبداعي لهندسة الميزات، زادت احتمالات الوصول إلى حل عملي متفوق بأقل تعقيد ممكن.

بمعنى يتطلب الأمر استكشاف بصري ، وطرح أسئلة ماذا لو؟، وبناء ميزات تلتقط ظواهر غير مُشخصة في البيانات الخام، مثلاً نسبة المشتريات ليلاً ÷ إجمالي المشتريات كمؤشر لاحتيال.

لتنمية ذلك الجانب قم بالتدرب على تنفيذ جلسة عصف ذهني، وأيضًا الاستعانة برأي خبير في البيانات نفسها في حال تتطلب خبرة عملية مثل البيانات الطبية، وغالب الحال ستتمكن من اكتشاف ميزة يصعب استنتاجها من البيانات وحدها.

واستكشاف بصري مكثف EDA عن طريق الرسوم التشتتية، Box-Plots، وخرائط الحرارة تُولد أسئلة وفرضيات، كذلك عوضًا عن هندسة ميزة واحدة كبيرة، جرب توليد مئات الميزات البسيطة، ثم استخدم تقنيات انتقاء أو ترتيب المزايا لتصفية الأفضل.

واعتمد على الـCross-Validation لتدوير الأفكار بسرعة واحتفظ فقط بما ينجح، بجانب قراءة أوراق ومسابقات مماثلة فكثير من الأفكار الإبداعية بإمكانك إعادة تدويرها.

الف شكراا جدا لحضرتك جزاك الله كل خير