title: Prediction of phrase intonation for text-to-speech synthesis
metadata.name: dc.contributor.advisor
metadata.value: Таланов Андрей Олегович
metadata.lang: ru_RU
metadata.name: dc.contributor.advisor
metadata.value: Talanov Andrej Olegovic
metadata.lang: en_GB
metadata.name: dc.contributor.author
metadata.value: Меньшикова Алла Павловна
metadata.lang: ru_RU
metadata.name: dc.contributor.author
metadata.value: Mensikova Alla Pavlovna
metadata.lang: en_GB
metadata.name: dc.contributor.editor
metadata.value: Кочаров Даниил Александрович
metadata.lang: ru_RU
metadata.name: dc.contributor.editor
metadata.value: Kocarov Daniil Aleksandrovic
metadata.lang: en_GB
metadata.name: dc.date.accessioned
metadata.value: 2021-07-31T18:17:27Z
metadata.lang: -
metadata.name: dc.date.available
metadata.value: 2021-07-31T18:17:27Z
metadata.lang: -
metadata.name: dc.date.issued
metadata.value: 2021
metadata.name: dc.identifier.other
metadata.value: 048932
metadata.lang: en_GB
metadata.name: dc.identifier.uri
metadata.value: http://hdl.handle.net/11701/30108
metadata.lang: -
metadata.name: dc.description.abstract
metadata.value: Благодаря активным исследованиям в области комплексных систем синтеза речи в последнее время, синтезированная речь по своей естественности стала приближаться к человеческой. Однако было неоднократно показано, что использование лингвистических признаков в таких системах способствует дальнейшему улучшению качества синтеза. Интонационная аннотация также может быть применена  для этой цели. По этой причине в данной работе исследуется метод предсказания интонационного оформления высказывания. На материале русского языка была разработана система, предсказывающая расположение интонационных центров и интонационные модели (в терминах системы интонационного описания Н. Б. Вольской). Были обучены дикторозависимые и дикторонезависимые BiLSTM модели, а также было изучено влияние различных признаков на работу системы: синтаксических, пунктуационных, морфологических. фонетических и эмбеддингов BERT. Дикторонезависимая система показала 90% F1-меры при предсказании расположении интонационных центров и 61% точности при предсказании интонационных моделей. Также была исследована эффективность дикторозависимых и меж-жанровых моделей.
metadata.lang: ru_RU
metadata.name: dc.description.abstract
metadata.value: Thanks to recent advances in End-to-End systems for Text-to-Speech synthesis, the level of naturalness of synthesized speech is now close to the human one. However, the use of linguistic features in such systems has been repeatedly demonstrated, as they significantly improve the synthesis of prosody. Among other features, predicted prosodic annotation can be also applied to this end. Thus, in this study, I explore the method of intonation pattern prediction from the text. Using the material of Russian, I attempt to predict the nucleus placement within an intonation phrase and classify it in terms of systems of Russian intonation description. Speaker-dependent and independent BiLSTM models are trained, and the influence of such features as syntactic relations, BERT embeddings, punctuation, POS tags, and phrase break indication is studied. The speaker-independent model shows 90% of F1-measure for nucleus placement and 61% of accuracy for intonation construction prediction. Performance of speaker-dependent and cross-genre models is also estimated.
metadata.lang: en_GB
metadata.name: dc.language.iso
metadata.value: ru
metadata.name: dc.subject
metadata.value: синтез речи
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: машинное обучение
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: интонация
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: обработка естественного языка
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: speech synthesis
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: machine learning
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: prosody
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: natural language processing
metadata.lang: en_GB
metadata.name: dc.title
metadata.value: Prediction of phrase intonation for text-to-speech synthesis
metadata.lang: en_GB
metadata.name: dc.title.alternative
metadata.value: Предсказание интонационного оформления высказывания для синтеза речи по тексту
metadata.lang: ru_RU
resources.filename: VKR_2021__1_.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/30108/1/VKR_2021__1_.pdf
resources.format: Adobe PDF
resources.description: Article
resources.size: 974,56 kB
resources.filename: reviewSV_Otzyv_naucnogo_rukovoditela_2021___MensikovaAP.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/30108/2/reviewSV_Otzyv_naucnogo_rukovoditela_2021___MensikovaAP.pdf
resources.format: Adobe PDF
resources.description: ReviewSV
resources.size: 1,67 MB