منصة الرسائل والاطاريح: تصمیم نظام متكامل للزحف وتصنیف الشبكة المظلمة

الخلاصة

توفر آلیات إخفاء الھویة القویة والآلیات التي یصعب تتبعھا لشبكة الویب المظلمة المأوى للأنشطة غیر القانونیة. المحتوى غیر القانوني على الویب المظلم متنوع ویتم تحدیثھ بشكل متكرر. یستخدم تصنیف الویب المظلم التقلیدي صفحات ویب واسعة النطاق للتدریب الخاضع للإشراف. ومع ذلك ، أصبحت صعوبة جمع ما یكفي من محتوى الویب المظلم غیر القانوني واستھلاك الوقت في وضع العلامات یدویًا على صفحات الویب من التحدیات التي تواجھ البحث الحالي. یتكون النظام المقترح في ھذا البحث من اربعة مراحل رئیسیة. في المرحلة الأولى ، یتم جمع البیانات. في ھذه الدراسة ، تم تقدیم مجموعة بیانات جدیدة تُعرف باسم "قاعدة بیانات الویب المظلم" للنطاقات النشطة على شبكة الویب المظلمة. تم إنشاؤھا باستخدام نظام قوي لدیھ القدرة على اختراق الشبكة السوداء وجمع البیانات من صفحاتھا ، والاستكشاف والتنقل عبر الارتباطات التشعبیة في وقت واحد. لتحقیق ذلك ، تم أخذ عینات من شبكة )تور( كعناوین اولیة ومن خلال ھذه العنوان یستخرج النظام كل الروابط التشعبیة والسیر علیھا واستخراج بیاناتھا. تتضمن المرحلة الثانیة المعالجة المسبقة للبیانات باستخدام مجموعة متنوعة من تقنیات المعالجة المسبقة. تأتي ھذه المرحلة مباشرة بعد كل عملیة اسخراج بیانات ناجحة ینفذھا نظامنا في الشبكة السوداء، وبعد ذلك ، یتم تخزین النتائج في قاعدة البیانات. تضمنت المرحلة الثالثة تم انشاء خوارزمیة تعرف باسم خوارزمیة وضع العلامات التلقائیة ، والتي تم تطبیقھا على مجموعة البیانات، وتم عنونة كل رابط ویب مظلم حسب المحتوى تلقائیًا الى احدى الفئات الخمس المستخدمة في بحثنا. أظھرت النتائج أن الخوارزمیة حققت معدل دقة بنسبة .٪٨٥في المرحلة الرابعة، وھي المرحلة الأخیرة ، تم استخدام مصنف ناقل الدعم الخطي ) ، (SVMومصنف Random Forest ) ،(RFومصنف ) Naive Bayes (NBلتطبیق طریقة التصنیف. تم تنفیذ ھذه التقنیات لإلقاء الضوء على أكثر الأسالیب المستخدمة دقة ً في تصنیف بیانات الویب المظلم. علاوة على ذلك ، تم تقییم نتائج خوارزمیات التصنیف بناءً على مقیاس الأداء باستخدام قیاسات الدقة و precisionو recallو .F1-scoreأظھرت النتائج أن أعلى دقة تم تحقیقھا من خلال تطبیق .LSVM حیث بلغت الدقة ، ٪٩١و F1-scoreھي .٪٨٨قد یدعم الأداء الجید للمصنف الأدوات المحتملة لمساعدة السلطات في اكتشاف ھذه الأنشطة. علاوة على ذلك ، من المتوقع أن تكون النتائج مھمة لكل من الجوانب العملیة والنظریة وقد تمھد الطریق لمزید من البحث