کلان داده و تکنولوژی به کار رفته در آن

کلان داده یا طبق مصوبه فرهنگستان ایران مه داده، دارایی های داده ای هستنند که بسیار انبوه، پرشتاب ویا گوناگون که نیاز به روش های پردازشی تازهای دارند تا تصمیم گیری، بینش تازه و بهینگی پردازش پیشرفته را فراهم آورند. کلان داده یا بزرگ داده ها مسیر حرکت کسب و کار و فرایند چرخش کار در سازمان ها را مشخص میکنند. در بزرگداده با داده های متمایزو بزرگ که دائما از لحاظ حجم، نرخ تولید داده و تنوع در حال تغییر هستند سروکار داریم. داده های پرشتاب داده هایی هستند که با شتاب بالایی تولید میشوند. کلان داده از ده ها ترابایت به چندین پتابایت در یک مجموعه ی داده میرسند. نمونه هایی از کلان داده عبارتند از: گزارش های وبی، سامانه های بازشناسی با موج های رادیویی، شبکه های حسگر، شبکه های اجتماعی، متنها و سندهای اینترنتی، نمایه های جستجوهای اینترنتی، اخترشناسی، مدرک های پزشکی، بایگانی عکس، بایگانی ویدئو، پژوهش های زمین شناسی و بازرگانی در اندازه های بزرگ. تحقیقات در زمینه تحلیل داده های بزرگ عمدتا بر روی توسعه تکنیکی یا سیستمی متمرکز بوده است که از این بین تحقیقات در مورد استفاده از تحلیل داده های بزرگ برای درک روابط مشتری، خرده فروشی ها ، عمده فروشی ها و سازمان های بزرگ دولتی و خصوصی بیشتر از سایر موارد انجام شده است. به منظور ارتقای تغییرات در مدل های توسعه کسب و کار، به عنوان یک عمل پیش گامانه برای بانک هایی که در زمینه اقتصاد واقعی خدمت رسانی می کنند، زنجیره های تامین در حال گسترش هستند. همچنین امروزه "یک پارچگی اینترنت" به یک روند اساسی در صنعت تبدیل شده است. اینترنت به شکل موثری جزیره های اطلاعاتی را با هم ترکیب کرده و اطلاعات و یکپارچگی میان صنعت ها به ایجاد یک اکولوژی صنعتی جدید می انجامد. از دیگر موارد اینکه، داده های بزرگ یک چالش در حوزه های مختلف سیستم محاسباتی است. داده های بزرگ در اینترنت اشیاء نیز وجود دارد و با تکثیر دستگاه های متصل، همراه با مقیاس فزاینده سیستم های کامپیوتری با عملکرد بالا رشد میکند و با فعالیت های اینترنتی و شبکه های اجتماعی رو به رشد، همراه است.

Keywords:

کلان داده , مه داده , داده حجیم , Big data , Hadoop , HDFS , map reduce