title: The problem of evaluating the quality of machine translation
metadata.name: dc.contributor.advisor
metadata.value: Горбачева Елена Николаевна
metadata.lang: ru_RU
metadata.name: dc.contributor.advisor
metadata.value: Gorbaceva Elena Nikolaevna
metadata.lang: en_GB
metadata.name: dc.contributor.author
metadata.value: Иванова Владислава Олеговна
metadata.lang: ru_RU
metadata.name: dc.contributor.author
metadata.value: Ivanova Vladislava Olegovna
metadata.lang: en_GB
metadata.name: dc.contributor.editor
metadata.value: Рубцова Светлана Юрьевна
metadata.lang: ru_RU
metadata.name: dc.contributor.editor
metadata.value: Rubcova Svetlana Urevna
metadata.lang: en_GB
metadata.name: dc.date.accessioned
metadata.value: 2023-04-06T21:52:14Z
metadata.lang: -
metadata.name: dc.date.available
metadata.value: 2023-04-06T21:52:14Z
metadata.lang: -
metadata.name: dc.date.issued
metadata.value: 2022
metadata.name: dc.identifier.other
metadata.value: 085404
metadata.lang: en_GB
metadata.name: dc.identifier.uri
metadata.value: http://hdl.handle.net/11701/40829
metadata.lang: -
metadata.name: dc.description.abstract
metadata.value: Работа посвящена проблеме оценки машинного перевода. Для проведения исследования в качестве исходных текстов были отобраны 100 текстов экономической, юридической, технической и художественной тематики на английском языке. Для сопоставительного анализа в качестве эталонных текстов были взяты их готовые переводы, выполненные профессиональными переводчиками бюро или переводческих компаний. В качестве метрики оценки выступила метрика автоматической оценки качества перевода BLUE. Для проведения эксперимента были выбраны наиболее популярные онлайн-сервисы, такие как Google Translate, Promt.One, DeepL, Яндекс Переводчик и Context Reverso. Исследования включало в себя обработку текстов на исходном языке в каждой из автоматических систем, сравнение полученных машинных переводов с референтным в метрике автоматической оценки, выделение основной типологии ошибок, допускаемых данными системами для каждой тематики, устранение особо грубых ошибок вручную на этапах предредактирования и постредактирования, повторная обработка подготовленных текстов в системах машинного перевода и сравнение их качества с эталоном. По результатам проведенного эксперимента, наилучшее качество продемонстрировали системы машинного перевода DeepL и Google Translate, а наиболее подходящей тематикой для перевода в этих системах является юридическая благодаря наличию параллельной структуры, клише и нормативной лексики и синтаксиса в исходных текстах. Данные результаты актуально использовать для определения основных проблем функционирования популярных программ машинного перевода и их последующего усовершенствования, а также для выбора наиболее эффективной системы машинного перевода.
metadata.lang: ru_RU
metadata.name: dc.description.abstract
metadata.value: This paper is devoted to the problem of evaluating the quality of machine translation of 100 English texts on economic, legal, technical and art topics. The reference texts for the comparative analysis were provided by professional translators of bureaus or translation companies. The assessment of machine translations have been conducted with the help of BLUE, a metric for automatically evaluating machine-translated text. The experiment was conducted for such online machine translation systems as Google Translate, Promt.One, DeepL, Yandex Translator and Context Reverso. The study included the comparison of machine-translated texts with reference translations in the automatic evaluation metric, identifying the typology of translation errors for each topic, correcting the most serious mistakes manually at the pre-editing and post-editing stages, re-editing the texts prepared by the machine translation systems, and comparing their quality with the reference texts. The results of the study led to the conclusion that the best machine translation systems are DeepL and Google Translate while the best topic to be translated in these systems is a legal one. These results are relevant for determining the main problems in the machine translation programs and their subsequent development, as well as for selecting the most effective machine translation system to match customers’ purposes.
metadata.lang: en_GB
metadata.name: dc.language.iso
metadata.value: ru
metadata.name: dc.subject
metadata.value: машинный перевод
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: оценка качества машинного перевода
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: ошибки перевода
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: предредактирование
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: постредактирование
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: онлайн-перевод.
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: machine translation
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: quality assessment of machine translation
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: translation errors
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: pre-editing
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: post-editing
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: online translation.
metadata.lang: en_GB
metadata.name: dc.title
metadata.value: The problem of evaluating the quality of machine translation
metadata.lang: en_GB
metadata.name: dc.title.alternative
metadata.value: Проблема оценки качества машинного перевода
metadata.lang: ru_RU
resources.filename: Ivanova._Problema_ocenki_kacestva_masinnogo_perevoda.doc
resources.url: https://dspace.spbu.ru/bitstream/11701/40829/2/Ivanova._Problema_ocenki_kacestva_masinnogo_perevoda.doc
resources.format: Microsoft Word
resources.description: Article
resources.size: 1,12 MB
resources.filename: reviewSV_st085404_Ivanova_Vladislava_Olegovna_(supervisor)(Ru).txt
resources.url: https://dspace.spbu.ru/bitstream/11701/40829/3/reviewSV_st085404_Ivanova_Vladislava_Olegovna_%28supervisor%29%28Ru%29.txt
resources.format: Text
resources.description: ReviewSV
resources.size: 5,25 kB