مهدی باباگلی موزیرجی - کارشد ارشد، مهندسی فناوری اطلاعات دانشگاه صنعتی ارومیه
سید سعید نصراله زاده معصومیان - کارشناسی، مهندسی نر افزار دانشگاه علو و فنون مازندران
حسن علیپور - کارشناسی ارشد، مهندسی فناوری اطلاعات دانشگاه صنعتی ارومیه

با پیشرفت تکنولوژی و همچنین گستردگی اینترنت، حجم داده ها به صورت نمایی نمو پیدا کرده است. بهره برداری اطلاعات از داده های بزرگ امروزه دارای اهمیت ویژهای است. این مقاله یک سیستم یکپارچه و موازی برای بدست آوردن میزان هاست اشغالی وب سایت ها معرفی می کند. در این مقاله با استفاده از روش نگاشت کاهش آدرس وب سایت های مشخص شده به سیستم داده می شود و سیستم با استفاده از تکنیک نگاشت میزان حجم هر صفحه را محاسبه می کند و با کلید متناظر آنها را ذخیره مینماید. آنگاه با استفاده از کاهش دهنده، کلیدهای مشابه شناسایی گردیده و مقدار آنها یکپارچه می گردند. همانطور که در نتیجه نشان داده شده است حجم صفحات چند وب سایت داخلی و خارجی به صورت موازی بدست می آید.

وب کاوی، پردازش موازی، نگاشت، کاهش، داده های بزرگ، محاسبه هاست وب سایت ها