بررسی مقابله ای سه ماشین ترجمه انگلیسی به فارسی براساس مدل BLEU(2001)

در سال های اخیر ترجمه خودکار به عنوان یکی از زیرشاخه های علم پردازش زبان طبیعی در کشورمان مورد توجه بسیاری از پژوهشگران قرار گرفته است که از آن جمله می توان به مترجم های خودکار ترگمان، پارس و غیره اشاره نمود. جهت بومی سازی این فناوری نیاز است که این مترجم های خودکار مورد ارزیابی و مطالعه ی دقیق و پویا قرار بگیرند. شرکت های بزرگی همچون گوگل نیز در این زمینه ( زبان فارسی ) فعالیت داشته اند ولی به علت وجود دلایلی چون پیکره های نامناسب، مشکلات رسم الخطی و دیگر مشکلات زبان فارسی در ارائه ی یک ماشین ترجمه خوب و حتی متوسط در زمینه زبان فارسی ناکام مانده اند. هدف از این پژوهش ارزیابی سه ماشین های ترجمه Google Translate، ترگمان و پارس می باشد. بدین منظور پنجاه جمله به زبان انگلیسی در پنج شاخه علمی زبانشناسی پیکره ای، رایانه، روانشناسی، مهندسی ژنتیک و شیمی به صورت اتفاقی و از کتابهای علمی این شاخه ها انتخاب شده است. معیار ارزیابی در این مقاله تست BLEU می باشد که به عنوان یک روش استاندارد توسط شرکت IBM در سال 2001 ارائه شده است. پس از انجام آزمایش BLEU و اعمال Paired T-Test بر روی نمرات کسب شده توسط هر ماشین ترجمه، به ترتیب Google Translate، ترگمان و پارس در رده های اول تا سوم قرار گرفتند. همانطور که نتایج به صورت کاملاً آماری و کلی نشان می دهد نمرات کسب شده توسط این مترجم های ماشینی راضی کننده نمی باشد و توسعه این ماشین های ترجمه تا رسیدن به حد مطلوب نیازمند تلاش پژوهشگران فعال در این زمینه می باشد.