
آقای امیرسامان معماری پور دانشجوی کارشناسی ارشد جناب آقای دکتر محسن شریفی روز دوشنبه 25/7/91 ساعت 17در اتاق دفاعیه واقع در طبقه سوم دانشکده کامپیوتر از پروژه کارشناسی ارشد خود تحت عنوان طراحی و پیاده سازی یک مکانیزم ذخیره و بازیابی با کارایی بالا برای سهولت اشتراک و مدیریت بالا در محیط های محاسبات خوشه ای دفاع خواهند نمود.
چکیده پایان نامه:
حجم بالای دادهها در محیطهای محاسبات با کارایی بالا، بهبود کارایی راهکارهای موجود ذخیره و بازیابی دادهها را طلب میکند. فاصلهی میان نرخ پردازش دادهها و سرعت عملیاتورودی/خروجی میتواند موجب بروز پدیدهی گلوگاه شده و کاراییمحیطهای محاسبات را به صورت چشمگیری کاهش دهد. تکثیر فایلها و ذخیره و بازیابی تطبیقی آنها از جمله راهکارهایی است که موجب افزایش کارایی عملیاتورودی/خروجی شده و بهرهوری پهنایباند شبکه را افزایش میدهد. علاوه بر این، اتکاپذیری و تحملپذیری خطای خوشهی ذخیرهسازی با تکثیر فایلها بهبود مییابد. مکانیزمپیشنهادی در این پایاننامه، میزبان مناسب به منظور ذخیره و بازیابی و تخمین تعداد رونوشتهای فایلها را با هدف کاهش زمانپاسخ عملیات خواندن و نوشتن و با در نظر گرفتن محبوبیت آنها و وضعیت منابع خوشه انتخاب میکند. همچنین، فضای ذخیرهسازی خوشه نیز در محاسبهی فاکتور تکثیر فایلها موثر بوده و تعداد رونوشتهای هر فایل با وضعیت خوشه تطبیق داده میشود. پیادهسازی این مکانیزم در بستر سیستمفایل هدوپ انجام شده و نتایج ارزیابیها نشان از کارایی آن در کاهش زمانپاسخ عملیات ذخیره و بازیابی به میزان حداقل 5 درصددارد. همچنین، سربار محاسباتی این روش کمتر از 3 درصد است.
واژههای کلیدی:سیستمفایل، ذخیره و بازیابی تطبیقی، تکثیر فایل، محاسبات با کارایی بالا
In recent years, high performance computing applicatons have faced an emerging need to employ new storage and retrieval mechanisms in order to deal with big datasets. Moreover, increasing gap between data processing and I/O operations’ throughput will bound the system performance to storage and retrieval operations and conspicuously reduce the overall performance of high performance computing clusters. Adaptive and dynamic file storage, retrieval and replication arerudimentaryways to improve the performance of I/O operations and increase network utilization by storing multiple copies of files on proper data nodes and access eligible replicas. Furthermore, this will lead to a more reliable and fault-tolerant storage cluster. In order to improve the response time of I/O operations, we have proposed a mechanism that estimates the required number of replicas for each file based on its popularity and selects proper data nodes to host its replicas and serve access requests. Besides that, the remaining space of storage cluster is considered in the evaluation of replication factors and the number of replicas is adapted to the storage and execution state of data nodes. We have implemented and evaluated the proposed mechanism using HDFS and MapReduce framework respectively. Evaluation results show that this mechanism is capable of improving the response time of read operations by atleast 5 percent in presence of long-term jobs and occasional update operations.
Keywords: File Systems, Adaptive Storage and Retrieval, Replication, High Performance Computing
ارائهدهنده:
امیرسامان معماری پور
مهندسی کامپیوتر- نرم افزار
استاد راهنما:
دکتر محسن شریفی
استاد ممتحن داخلی : دکتر عین اله خنجری
استاد ممتحن خارجی :دکتر اسلام ناظمی
زمان : دوشنبه 25مهرماه
ساعت 17
مکان: دانشکده مهندسی کامپیوتر- طبقه سوم- اتاق دفاعیه
از اساتید بزرگوار، دانشجویان گرامی و دیگر متخصصان و علاقه مندان به موضوع دفاعیه دعوت
می شود با حضور خود موجبات غنای علمی و ارتقای کیفی را فراهم سازند.
دانشکده مهندسی کامپیوتر مدیریت تحصیلات تکمیلی