شريط الأخبار

تطوير نظام Hadoop لتحسين اَلية التخزين لملفات الصور والفيديو

اسم الباحث:م. حسن حسن

اسم المشرف:

أ.د. إبراهيم الشامي-أ.د. عمار زقزوق

العنوان:

تطوير نظام Hadoop لتحسين اَلية التخزين لملفات الصور والفيديو

العنوان باللغة الإنكليزية:

Developing Hadoop System to Improve the Storage Technique for Video and Image Files

العام:2025

القسم:هندسة التحكم الآلي والحواسيب

الملخص:مع تزايد حجم البيانات وتعقيدها، طوّرت تقنيات للتعامل مع البيانات الضخمة، ومن أبرزها نظام Hadoop الذي له أثر أساسي في تحسين عمليات تخزين البيانات الضخمة ومعالجتها. أحد التحديات الرئيسة لهذا النظام يمكن في تكرار الملفات الذي يستهلك موارد إضافية للتخزين والمعالجة، إذ تواجه خوارزميات إزالة التكرار القائمة على الاختزال تحديات في تحقيق توازن بين سرعة التنفيذ والدقة المتمثلة باحتمالية تصادم قيم الاختزال. بالإضافة لذلك، تزيد خاصية النسخ المتماثل (Replication) في Hadoop من متطلبات التخزين. لحل هذه القيود، يدمج نهج ALHAMLI-HSnappy المقترح خوارزمية ALHA لإنتاج قيم اختزال بطول 1024 بت، و MLI-HBase من أجل مطابقة فعالة لقيم الاختزال، و HSnappy لتقليل حجم مساحة التخزين. تشير النتائج إلى أنALHA  أسرع بمرتين إلى ثلاث مرات من خوارزميات الاختزال الأخرى. بالإضافة إلى ذلك، أظهرت ALHA مقاومة أكبر للتصادمات أثناء مرحلة الاختزال. في مرحلة المطابقة، قلّلت MLI-HBase من عدد عمليات المقارنة. وفي مرحلة التخزين، حققت تقنية HSnappy توفيراً أكبر في حجم المساحة التخزينية بنسبة 0.02% مقارنة بالاعتماد على تقنية النسخ المتماثل في عملية تخزين الملفات في Hadoop. وبالتالي، يعالج هذا النهج مشكلات الأداء والتصادم والتخزين، مما يوفر حلاً قابلاً لإدارة البيانات الضخمة في Hadoop.

الكلمات المفتاحية:

Hadoop، إزالة البيانات المكررة، ALHA، MLI-HBase، HSnappy.

تحميل البحث