title: A/B tests in mobile game development
metadata.name: dc.contributor.advisor
metadata.value: Северов Александр Анатольевич
metadata.lang: ru_RU
metadata.name: dc.contributor.advisor
metadata.value: Severov Aleksandr Anatolevic
metadata.lang: en_GB
metadata.name: dc.contributor.author
metadata.value: Марцинковская Наталья Алексеевна
metadata.lang: ru_RU
metadata.name: dc.contributor.author
metadata.value: Marcinkovskaa Natala Alekseevna
metadata.lang: en_GB
metadata.name: dc.contributor.editor
metadata.value: Авдюшенко Александр Юрьевич
metadata.lang: ru_RU
metadata.name: dc.contributor.editor
metadata.value: Avdusenko Aleksandr Urevic
metadata.lang: en_GB
metadata.name: dc.date.accessioned
metadata.value: 2023-07-26T12:03:10Z
metadata.lang: -
metadata.name: dc.date.available
metadata.value: 2023-07-26T12:03:10Z
metadata.lang: -
metadata.name: dc.date.issued
metadata.value: 2023
metadata.name: dc.identifier.other
metadata.value: 077153
metadata.lang: en_GB
metadata.name: dc.identifier.uri
metadata.value: http://hdl.handle.net/11701/42188
metadata.lang: -
metadata.name: dc.description.abstract
metadata.value: Процесс A/B тестирования широко применяем в IT-сфере и дает достаточно достоверные результаты, но есть важные нюансы. Во-первых, проводить A/B тесты - долго и дорого, требуется много ресурсов. Во-вторых, нередко значимая разница между вариантах отсутствует, поэтому необходим большой объем выборки, а данные должны быть качественнее, чего мы не всегда можем добиться. 
  В данной работе изучаются A/B тесты в индустрии разработки мобильных игр, поскольку в ней есть специфические характеристики. В играх часто бывают небольшие эффекты, а также некачественные данные, которые еще и долго и сложно собирать, поэтому возникают вопросы: корректно ли мы используем A/B тесты и можно ли в некоторых случаях обойтись без них.
  В данной работе представлены результаты по следующим задачам:
  1. Проверка применимости статистических тестов.
  2. А/B тест без непосредственного проведения А/B теста.
  3. Влияние распределения улучшения от фичи на A/B тесты.
metadata.lang: ru_RU
metadata.name: dc.description.abstract
metadata.value: The A/B testing process is widely used in the IT industry and provides sufficiently reliable results, however, there are important nuances to consider. Firstly, conducting A/B tests is time-consuming and expensive, requiring significant resources. Secondly, it often happens that there is no significant difference between variants, which necessitates a large sample size and higher quality data, which may not always be achievable.
  In this paper, we study A/B testing in the mobile game development industry due to its specific characteristics. In games, there are often small effects and skewed data, which are difficult and time-consuming to collect, raising questions about the appropriate use of A/B tests in certain conditions, and whether it is possible to do without them in some cases.
  This paper presents results on the following tasks:
  1. Verification of the applicability of statistical tests.
  2. A/B test without directly conducting an A/B test.
  3. The impact of feature improvement distribution on A/B tests.
metadata.lang: en_GB
metadata.name: dc.language.iso
metadata.value: ru
metadata.name: dc.subject
metadata.value: A/B тесты
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: разработка игр
metadata.lang: ru_RU
metadata.name: dc.subject
metadata.value: A/B test
metadata.lang: en_GB
metadata.name: dc.subject
metadata.value: game development
metadata.lang: en_GB
metadata.name: dc.title
metadata.value: A/B tests in mobile game development
metadata.lang: en_GB
metadata.name: dc.title.alternative
metadata.value: Исследование А/В-тестов в разработке мобильных игр
metadata.lang: ru_RU
resources.filename: st077153.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/42188/2/st077153.pdf
resources.format: Adobe PDF
resources.description: Article
resources.size: 1,32 MB
resources.filename: reviewSV_Otzyv_Marcinkovskaa_podpisannyj.pdf
resources.url: https://dspace.spbu.ru/bitstream/11701/42188/3/reviewSV_Otzyv_Marcinkovskaa_podpisannyj.pdf
resources.format: Adobe PDF
resources.description: ReviewSV
resources.size: 71,99 kB
resources.filename: reviewSV_st077153_Marcinkovskaa_Natala_Alekseevna_(supervisor)(Ru).txt
resources.url: https://dspace.spbu.ru/bitstream/11701/42188/4/reviewSV_st077153_Marcinkovskaa_Natala_Alekseevna_%28supervisor%29%28Ru%29.txt
resources.format: Text
resources.description: ReviewSV
resources.size: 3,06 kB