کار با مشکل فایل های کوچک در فایل توزیع سیستم Hadoop
Publish place: دومین کنفرانس ملی دانش و فناوری علوم مهندسی ایران
Publish Year: 1397
نوع سند: مقاله کنفرانسی
زبان: Persian
View: 553
This Paper With 13 Page And PDF Format Ready To Download
- Certificate
- من نویسنده این مقاله هستم
استخراج به نرم افزارهای پژوهشی:
شناسه ملی سند علمی:
MGCONF02_125
تاریخ نمایه سازی: 11 شهریور 1397
Abstract:
استفاده از Hadoop در سال های اخیر به طور قابل توجهی افزایش یافته است . برخی از کاربران بزرگ قابل توجه مانند یاهو ، فیس بوک ، Netflix و آمازون Hadoop عمدتا برای تجزیه و تحلیل داده های غیر ساختاری به عنوان چارچوب Hadoop بسیار خوب با داده های ساختار یافته و بدون ساختار کار می کند. Hadoop فایل سیستم توزیع شده (HDFS) برای ذخیره فایل های بزرگ است ، اما هنگامی که تعداد زیادی فایل کوچک نیاز به ذخیره دارند، HDFS با مشکلاتی مواجه است ، زیرا تمام فایل ها در HDFS توسط یک سرور مدیریت می شوند. روش های مختلفی پیشنهاد شده است تا مشکل HDFS با مشکلاتی کوچک حل شود . این مقاله تجزیه و تحلیل تطبیقی روش هایی را ارایه می دهد که با مشکلاتی در فایل
Keywords:
Authors
خسرو آب سالان
باشگاه پژوهشگران جوان و نخبگان، واحد شیراز، دانشگاه آزاد اسلامی، شیراز، ایران
نرگس پیروی
عضو هیات علمی دانشگاه آزاد اسلامی، واحد زرقان، ایران