title: Research of the problem of audio stream real-time diarization
metadata.name: dc.contributor.advisor
metadata.value: Крижановский Андрей Анатольевич
metadata.lang: ru_RU
metadata.name: dc.contributor.advisor
metadata.value: Krizanovskij Andrej Anatolevic
metadata.lang: en_GB
metadata.name: dc.contributor.author
metadata.value: Попов Никита Алексеевич
metadata.lang: ru_RU
metadata.name: dc.contributor.author
metadata.value: Popov Nikita Alekseevic
metadata.lang: en_GB
metadata.name: dc.contributor.editor
metadata.value: Печников Андрей Анатольевич
metadata.lang: ru_RU
metadata.name: dc.contributor.editor
metadata.value: Pecnikov Andrej Anatolevic
metadata.lang: en_GB
metadata.name: dc.date.accessioned
metadata.value: 2021-03-24T15:24:57Z
metadata.lang: -
metadata.name: dc.date.available
metadata.value: 2021-03-24T15:24:57Z
metadata.lang: -
metadata.name: dc.date.issued
metadata.value: 2020
metadata.name: dc.identifier.other
metadata.value: 040324
metadata.lang: en_GB
metadata.name: dc.identifier.uri
metadata.value: http://hdl.handle.net/11701/26357
metadata.lang: -
metadata.name: dc.description.abstract
metadata.value: В работе описывается исследование задачи диаризации аудиопотока в режиме реального времени. Автором рассмотрены основные подходы к её решению и описаны значимые характеристики и методы, применяемые для этого. Произведён анализ доступных программных решений, описаны их преимущества и недостатки. Основное внимание было уделено возможностям диаризации аудиопотока автономными алгоритмами с возможностью запуска на низкопроизводительных устройствах, например, элементах умного дома. Предложенное решение использует возможности нейронных сетей и алгоритма спектральной кластеризации для выделения речи из аудиопотока и идентификации на нём голосов уникальных дикторов. Также приводится архитектура реализованной программы с описанием используемых библиотек и представлены результаты работы на подготовленном наборе тестовых данных. Результаты проведённых экспериментов были анализированы и критически оценены.
metadata.lang: ru_RU
metadata.name: dc.description.abstract
metadata.value: This paper describes a research of the problem of audio stream speaker diarization in real time. The author considers the main approaches to its solution and describes relevant characteristics and methods used for this purpose. The available software solutions are analyzed, their advantages and disadvantages are described. The main attention was given to the possibilities of audio stream diarization by autonomous algorithms with the ability to run on low-performance devices, such as elements of a smart home. The proposed solution uses the capabilities of neural networks and spectral clustering algorithm to separate speech from the audio stream and identify the voices of unique speakers on it. Architecture of the implemented program with description of used libraries is given and results of work on the prepared set of test data are presented. The results of the conducted experiments have been analyzed and critically evaluated.
metadata.lang: en_GB
metadata.name: dc.language.iso
metadata.value: ru
metadata.name: dc.subject
metadata.value: диаризация аудиопотока
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: распознавание речи
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: идентификация дикторов
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: speaker diarization
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: speech recognition
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: speaker identification
metadata.lang: en_GB
metadata.name: dc.title
metadata.value: Research of the problem of audio stream real-time diarization
metadata.lang: en_GB
metadata.name: dc.title.alternative
metadata.value: Исследование задачи диаризации аудиопотока в режиме реального времени
metadata.lang: ru_RU
resources.filename: diploma.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/26357/1/diploma.pdf
resources.format: Adobe PDF
resources.description: Article
resources.size: 11,62 MB
resources.filename: reviewSV_otzyv_rukovoditelja_angl.docx
resources.url: https://dspace.spbu.ru/bitstream/11701/26357/2/reviewSV_otzyv_rukovoditelja_angl.docx
resources.format: Microsoft Word XML
resources.description: ReviewSV
resources.size: 35,63 kB
resources.filename: reviewSV_otzyv_rukovoditelja.docx
resources.url: https://dspace.spbu.ru/bitstream/11701/26357/3/reviewSV_otzyv_rukovoditelja.docx
resources.format: Microsoft Word XML
resources.description: ReviewSV
resources.size: 33,37 kB