پردازش داده های عظیم با استفاده از الگوی نگاشت کاهش - بر بستر هدوپ

استفاده از بیشتر سیستم های مدیریت پایگاه داده های رابطه ای، آمارهای در دسترس و بسته های تجسم کار را با دادههای بزرگ مشکل می سازند، به جای آن ها ما به نرم افزارهایی که به صورت انبوه و موازی بر روی ده ها، صدها و یاحتی هزاران سرور اجرا می شوند، نیاز داریم. چیزی که از تنوع در داده های بزرگ در نظر ماست به قابلیت و تواناییمجموعه ها در مدیریت مجموعه ها و همچنین توانایی نرم افزارهایی است که به صورت سنتی برای پردازش و تجزیه وتحلیل داده ها در حوزه خودشان مورد استفاده قرار می گیرند بستگی دارد. نگاشت- کاهش یک مدل برنامه نویسی وپیاده سازی مرتبط برای پردازش و تولید مجموعه داده های حجیم است. هدوپ یک پیاده سازی منبع باز نگاشت- -کاهش ، با بهره گیری از مقبولیت گسترده است، و نه تنها برای مشاغل دسته ای بلکه برای مشاغل کوتاه که در آن زمانپاسخ کم بسیار مهم است استفاده می شود.

Keywords:

نگاشت کاهش , هدوپ , پردازش داده