title: Methods for increasing Apache Spark performance on heterogeneous memory systems
metadata.name: dc.contributor.advisor
metadata.value: Стрельцова Оксана Ивановна
metadata.lang: ru_RU
metadata.name: dc.contributor.author
metadata.value: Свешникова Светлана Юрьевна
metadata.lang: ru_RU
metadata.name: dc.contributor.author
metadata.value: Sveshnikova Svetlana
metadata.lang: en_GB
metadata.name: dc.contributor.editor
metadata.value: Ганкевич Иван Геннадьевич
metadata.lang: ru_RU
metadata.name: dc.contributor.editor
metadata.value: I.G.Gankevich
metadata.lang: en_GB
metadata.name: dc.date.accessioned
metadata.value: 2018-07-26T15:17:23Z
metadata.lang: -
metadata.name: dc.date.available
metadata.value: 2018-07-26T15:17:23Z
metadata.lang: -
metadata.name: dc.date.issued
metadata.value: 2018
metadata.name: dc.identifier.other
metadata.value: 012967
metadata.lang: en_GB
metadata.name: dc.identifier.uri
metadata.value: http://hdl.handle.net/11701/12224
metadata.lang: -
metadata.name: dc.description.abstract
metadata.value: Фреймворк Apache Spark и соответствующая ему экосистема становятся все более популярна и не только в больших коммерческих фирмах. Все больший интерес к использованию фреймворка проявляют научные организации. Фреймворк разрабатывался с учетом запросов бизнеса, которому требовалось недорогое, но при этом хорошо масштабируемое решение, использующее недорогие и стандартные компоненты. У научных организаций своя специфика задач, и требования к оборудованию отличаются. Интерес к технологии побуждают использовать фреймворк на нестандартном для него оборудовании. В работе рассматриваются способы повышения производительности Apache Spark на конфигурациях, отличных от общепринятых. Анализируются преимущества и недостатки рассмотренных методов.
metadata.lang: ru_RU
metadata.name: dc.description.abstract
metadata.value: Apache Spark and its ecosystem becomes more and more popular. It is used not only in big companies, but also in research institutions. Initially the framework was developed with business needs in mind. They require easy and large-scale solution that runs on cheap and commodity equipment. Research institutions have their own specific needs and their equipment has different architecture. This motivates to use the framework on uncommon equipment. This work studies methods to increase efficiency of Apache Spark using on uncommon configurations. Advantages and disadvantages of these methods are analysed.
metadata.lang: en_GB
metadata.name: dc.language.iso
metadata.value: ru
metadata.name: dc.subject
metadata.value: большие данные
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: неоднородная память
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: параллельные вычисления
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: распределенные вычисления
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: Apache Spark
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: NUMA
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: big data
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: Xeon Phi
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: parallel computing
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: distributed computing
metadata.lang: en_GB
metadata.name: dc.title
metadata.value: Methods for increasing Apache Spark performance on heterogeneous memory systems
metadata.lang: en_GB
metadata.name: dc.title.alternative
metadata.value: Методы повышения производительности Apache Spark на системах с неоднородной памятью
metadata.lang: ru_RU
resources.filename: numaspark.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/12224/1/numaspark.pdf
resources.format: Adobe PDF
resources.description: Article
resources.size: 461,22 kB
resources.filename: reviewSV_sveshnikova-reference-scanned.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/12224/2/reviewSV_sveshnikova-reference-scanned.pdf
resources.format: Adobe PDF
resources.description: ReviewSV
resources.size: 527,45 kB
resources.filename: reviewSV_Recenziya_Sveshnikova_S_YU.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/12224/3/reviewSV_Recenziya_Sveshnikova_S_YU.pdf
resources.format: Adobe PDF
resources.description: ReviewRev
resources.size: 462,25 kB
resources.filename: reviewSV_stt08291_Strelcova_Oksana_Ivanovna_(reviewer)(Ru).txt
resources.url: https://dspace.spbu.ru/bitstream/11701/12224/4/reviewSV_stt08291_Strelcova_Oksana_Ivanovna_%28reviewer%29%28Ru%29.txt
resources.format: Text
resources.description: ReviewRev
resources.size: 5,08 kB
resources.filename: reviewSV_st018947_Gankevich_Ivan_Gennadevich_(supervisor)(Ru).txt
resources.url: https://dspace.spbu.ru/bitstream/11701/12224/5/reviewSV_st018947_Gankevich_Ivan_Gennadevich_%28supervisor%29%28Ru%29.txt
resources.format: Text
resources.description: ReviewSV
resources.size: 4,11 kB