يجب أن أعمل في مشروع للذكاء الاصطناعي اسمه "إنشاء نموذج تصنيف النص". من الآن فصاعدا، سأشرح المشروع الذي عليك القيام به.
وتنقسم البيانات إلى قسمين. 1. بيانات التدريب: Train.csv 2. بيانات الاختبار: test.csv يتكون ملف Train.csv من 3 أعمدة من المعرف والنص والتسمية، ويتكون ملف test.csv من عمودين من المعرف والنص. تتكون "التسمية" من إجمالي 8 فئات. "0" هو موضوع العلوم والتكنولوجيا. "1" هو موضوع الرياضة. "2" هو موضوع الأعمال. "3" هو موضوع عالمي. "4" هي السياسة. "5" هو موضوع "ESG" (البيئة والاجتماعية والحوكمة). "6" هو موضوع الصحة. "7" هو موضوع ترفيهي. يتكون عمود "النص" من النص الكامل لمقالة إخبارية وتكون أعمدة "النص" باللغة الإنجليزية.
لذا، في هذا المشروع، يجب علينا القيام بتصنيفات متعددة. والهدف من هذا المشروع هو إنشاء ملف "Submission.csv" من خلال الاطلاع على بيانات القطار أعلاه والتنبؤ ببيانات الاختبار. يتكون ملف "Submission.csv" من أعمدة المعرف والتسمية.
أول شيء عليك القيام به هو المعالجة المسبقة لبيانات القطار. في هذه المرحلة، يرجى المعالجة المسبقة لنص مقالة الأخبار استنادًا إلى الكلمات الرئيسية التي تناسب كل موضوع. وتسهيل تعلم النموذج.
ثانياً: إحضار النموذج الأفضل لهذا المشروع والتعرف على بيانات المقالة الإخبارية وتصنيفها. في هذا الوقت، قم بضبط المعلمات جيدًا حتى لا يحدث فرط التجهيز.
ثالثًا، استخدم النموذج المتعلم للتنبؤ ببيانات الاختبار وإنشاء ملف إرسال. واسمحوا لي أن أتحقق من نتيجة F1 لمعرفة أداء النموذج.
الآن اكتب الكود بناءً على المعلومات التي قدمتها.
{"source": "ewof/sharegpt-instruct-unfiltered-deduped", "kind": "human", "evolved_from": null}