بهبود روش سیستم پردازش جریان بلادرنگ توزیع شده

در عصر کنونی، داده ها با توجه به توسعه بی سابقه فناوری های دستگاه، گوشی و حسگرهای هوشمند، اینترنت و... بزرگ و بزرگ تر می شوند. برای سرعت بخشیدن به پردازش این داده ها نیاز است از فناوری های نوظهور استفادهشود. سیستم پردازش جریان بلادرنگ توزیع شده ترکیبی از کافکا کت، کافکا و استورم است. کافکا کت داده هارا از منبع داده دریافت و سپس آنرا برای پیش پردازش به خوشه کافکا ارسال می کند و در نهایت داده ها در خوشهاستورم پردازش می شوند. در ابتدا کافکا از سیستم خواندن/نوشتن متوالی بر اساس دیسک بهره می برد که سرعتپائینی در مقایسه با خواندن/نوشتن متوالی روی حافظه دارد. برای رفع این مشکل، حافظه Tmpfs جایگزینسیستم خواندن/ نوشتن متوالی بر اساس دیسک گردید. در این مقاله با توجه به فرار بودن حافظه Tmpfs ،جایگزین شدن حافظه غیر فرار FRAM با این حافظه مطرح گردیده است

Keywords:

داده بزرگ , داده جریانی , سیستم بلادرنگ توزیع شده , حافظه غیر فرار FRAM