هل هناك طريقة أخرى غير الطريقة اليدوية؟ وهل هناك مقياس غير accuracy

لأول مرة أسمع بمصطلح مقياس الصحة ولا اظن أنه موجود أو من الممكن أن هناك مشكل في الترجمة.

من ناحية أخرى حتى تتأكد من قدرة الموديل عليك من الأول أن تقسم dataset على 3 أقسام

• قسم training
• قسم validation
• قسم test

حتى تتأكد من قدرته بشكل كلي أو أن تأتي ب data جديدة إما بالويب سكرابينغ أو أداة أخرى تجمع بها بيانات لم يتدرب عليها الموديل فتفحصه بها، علما أن نتيجة validation كافية في حالتك.

بالنسبة لمقياسات أخرى هناك الكثير منها اتركك مع هذه المقالة لتحصل منها على شرح وافٍ ومتى نستعمل هذا المقياس ومتى نستعمل الأخر.

الحقيقة بعد شكري لك

أن الهدف ليس قياس المودل وإنما تطبيقه على نصوص أخرى وتقديمها للمهتم

لكني أود تصحيحها وأود أيضا حساب نسبة الخطأ

فهل حساب الخطأ يكون بالاكيورسي فقط؟ 

بتاريخ 59 دقائق مضت قال Arabic Language:

الحقيقة بعد شكري لك

أن الهدف ليس قياس المودل وإنما تطبيقه على نصوص أخرى وتقديمها للمهتم

لكني أود تصحيحها وأود أيضا حساب نسبة الخطأ

 

فهل حساب الخطأ يكون بالاكيورسي فقط؟ 

 

ال accuracy كافٍ، يكون هو الأساس. لا نريد تحقيق 100% في تدريب المودل ولكن نريد تحقيقها أثناء تجربته ومحاولة التكرار حتى الوصول إليها وهذا ما يسمى ب avoid overfitting.

طيب أستاذي إذا كانت البياناتضخمة فهل يعقل أن أقوم بمراجعتها يدويا حتى أظهر قيمة الاكيورسي ؟ ألا تستعمل منهجية أخرى هنا؟ عندي آلاف الكلمات لا بد أن أمر عليها

بتاريخ 3 ساعات قال Arabic Language:

طيب أستاذي إذا كانت البياناتضخمة فهل يعقل أن أقوم بمراجعتها يدويا حتى أظهر قيمة الاكيورسي ؟ ألا تستعمل منهجية أخرى هنا؟ عندي آلاف الكلمات لا بد أن أمر عليها

هل يمكنك تزويدنا بتفاصيل أكثر عن المشروع ..

لغة البرمجة و أي تفاصيل مفيدة

بتاريخ 6 ساعات قال Arabic Language:

طيب أستاذي إذا كانت البياناتضخمة فهل يعقل أن أقوم بمراجعتها يدويا حتى أظهر قيمة الاكيورسي ؟ ألا تستعمل منهجية أخرى هنا؟ عندي آلاف الكلمات لا بد أن أمر عليها

لا يوجد شيئ يدوي يا أخي من الممكن أن تحصل على data prediction مهما كانت كبيرة فقط بعد تحميل load للموديل وبعدها إحصل على test predict ثم قارنها مع y_true في confusion matrix.

أخي الكريم المودل قيمته وانتهيت وكان على اللغة العربية خليط فصحى تراث ومعاصرة

الآن أريد أن أجرب هذا المودل على بيانات تراث فقط وليس عندي نسخة test 

لذلك ما زال سؤال هل الأكيورسي والمراجعة اليدوية هي الحل الوحيد؟

المشروع عبارة عن part of speech tagger بالبايثون