ارایه راهکاری برای انتخاب کیفیت قطعه در جریان سازی ویدیو بر روی شبکه های نظیر به نظیر مبتنی بر یادگیری تقویتی

جریان سازی ویدیو یکی از مهم ترین کاربردهای شبکه های نظیر به نظیر به شمار می آید. علت این امر را می توان در مقیاس پذیری خوب شبکه های نظیر به نظیر دانست. روش های ارسال ویدیو بر روی شبکه پوشان توری به دو دسته مبتنی بر کشیدن و مبتنی بر هل دادن تقسیم بندی شده اند. از آنجا که در جریان سازی ویدیو یکی از اهداف، پخش روان و بدون توقف می باشد، در این پایان نامه به ارایه راهکاری جهت کاهش توقف پخش به کمک انتخاب صحیح سطح کیفیت قطعه (نرخ پخش) ویدیو بر روی پوشان توری مبتنی بر کشیدن می پردازیم. قطعه ویدیو تکه ای 2 تا 4 ثانیه ای از جریان ویدیوی اصلی است که با کیفیت های مختلفی در اختیار نظیر قرار می گیرد که با توجه به تغییرات پهنای باند، بتواند از پخش روان و کیفیت مطلوب برخوردار شود. وجود کیفیت های مختلف از هر قطعه ویدیو، چالشی در انتخاب کیفیت مناسب برای تداوم پخش روان توسط نظیرها در شبکه ای پویا، بوجود می آورد. در این پایان نامه راهکاری ارایه شده تا هر نظیر با استفاده از فرآیند تصمیم گیری مارکف مستقل از مدل (یادگیری تقویتی) به تدریج، با مشاهده مداوم نتایج این فرآیند، انتخاب های بهینه را یاد گرفته و با توجه به اهداف تعیین شده، در تصمیم گیری برای انتخاب کیفیت قطعه ویدیوی دریافتی، رفتاری نزدیک به رفتار بهینه داشته باشد.

Keywords:

جریان سازی ویدیو , جریان سازی بر روی شبکه های نظیر به نظیر , استراتژی انتخاب قطعه , فرآیند تصمیم گیری مارکف , یادگیری تقویتی