مدیریت و پردازش داده بزرگ درون حافظه: یک بررسی

قیمت: 53,000 تومان

دانلود رایگان مقاله

خرید ترجمه مقاله

عنوان فارسی

مدیریت و پردازش داده بزرگ درون حافظه: یک بررسی

عنوان لاتین

In-Memory Big Data Management and Processing: A Survey

رشد ظرفیت حافظه اصلی منجر به تسریع توسعه ی مدیریت و پردازش داده بزرگ درون-حافظه شده است. با حذف گلوگاه ورودی/خروجی دیسک، اکنون امکان پشتیبانی از تجزیه و تحلیل داده تعاملی فراهم شده است. اما سیستم های درون-حافظه به سایر منابع سربار حساس هستند که در سیستم های مبتنی بر دیسک با ورودی/خروجی محدود اهمیتی ندارند. برخی مشکلات نظیر تحمل خرابی و سازگاری نیز برای مدیریت محیط درون-حافظه چالش برانگیز هستند. شاهد انقلابی در طراحی سیستم های پایگاه داده هستیم که از حافظه اصلی به عنوان لایه ذخیره گاه داده بهره برداری می کند. بسیاری از این پژوهش ها بر چندین بُعد تمرکز دارند: حافظه مدرن و استفاده از سلسله مراتب حافظه، بهره وری زمان/فضا، موازات و کنترل همروندی. در این بررسی، هدف ما بررسی بازه گسترده ای از پروتکل های پردازش و مدیریت داده درون-حافظه هستند که شامل سیستم های ذخیره گاه داده و چارچوب کاری پردازش داده هستند. همچنین ارائه ای جامع از فناوری اطلاعات در مدیریت حافظه و برخی فاکتورهای کلیدی خواهیم داشت که باید برای حصول مدیریت و پردازش داده درون-حافظه کارآمد مد نظر قرار گیرند.

Growing main memory capacity has fueled the development of in-memory big data management and processing. By eliminating disk I/O bottleneck, it is now possible to support interactive data analytics. However, in-memory systems are much more sensitive to other sources of overhead that do not matter in traditional I/O-bounded disk-based systems. Some issues such as fault-tolerance and consistency are also more challenging to handle in in-memory environment. We are witnessing a revolution in the design of database systems that exploits main memory as its data storage layer. Many of these researches have focused along several dimensions: modern CPU and memory hierarchy utilization, time/space efficiency, parallelism, and concurrency control. In this survey, we aim to provide a thorough review of a wide range of in-memory data management and processing proposals and systems, including both data storage systems and data processing frameworks. We also give a comprehensive presentation of important technology in memory management, and some key factors that need to be considered in order to achieve efficient in-memory data management and processing.