Вебскрейпінг для пошуку договірних спортивних матчів

Abstract

Актуальність даної роботи зумовлена зростанням кількості договірних спортивних матчів та необхідністю розробки ефективних методів їхнього виявлення. Використання технології вебскрейпінгу дозволяє автоматизувати процес збору та аналізу даних про спортивні події, що є важливим для своєчасного виявлення підозрілої активності та запобігання маніпуляціям результатами змагань. Об'єкт роботи – процес скрепінгу договірних спортивних матчів. Предмет роботи – технології розробки вебскрейпінгу договірних спортивних матчів. Метою кваліфікаційної роботи є розробка та вдосконалення автоматизованої системи для пошуку договірних спортивних матчів на основі технології вебскрейпінгу. Одним із завдань було дослідження ефективності різних методів вебскрейпінгу для виявлення підозрілої активності у спортивних матчах. Пояснювальна записка складається зі вступу, чотирьох розділів, висновків та додатків. У першому розділі розглядається аналіз предметної сфери та постановка задачі для вебскрейпінгу договірних спортивних матчів. У другому розділі досліджено методи, технології та інструменти вебскрейпінгу договірних спортивних матчів. У третьому розділі описано створення та налаштування програмного забезпечення для вебскрейпінгу, використовуючи сучасні бібліотеки та технології. Апробація розробленої системи відбувалася на відкритих тестових наборах. Проведена оптимізація алгоритмів для отримання максимальної точності та ефективності системи. У четвертому розділі наведено результати оптимізації системи, інформаційні діаграми, інструкцію користувача та графіки виявлених договірних матчів. У результаті розроблено систему для пошуку договірних спортивних матчів з використанням технології вебскрейпінгу, що демонструє високу ефективність та точність у виявленні підозрілої активності. Кваліфікаційна робота містить 57 сторінок, 12 рисунків, 0 таблиць, 27 джерел та 1 додаток. The relevance of this work is due to the increasing number of fixed sports matches and the need to develop effective methods for detecting them. The use of web scraping technology allows automating the process of collecting and analyzing data on sports events, which is crucial for timely detection of suspicious activities and preventing match-fixing. The object of the work is the process of scraping fixed sports matches. The subject of the work is the technologies for developing web scraping for fixed sports matches. The aim of the qualification work is to develop and improve an automated system for detecting fixed sports matches based on web scraping technology. One of the tasks was to study the effectiveness of various web scraping methods for detecting suspicious activities in sports matches. The explanatory note consists of an introduction, four chapters, conclusions, and appendices. The first chapter considers the analysis of the subject area and the formulation of the task for web scraping of fixed sports matches. The second chapter examines the methods, technologies, and tools of web scraping for fixed sports matches. The third chapter describes the creation and configuration of the software for web scraping, using modern libraries and technologies. The developed system was tested on open test sets. Additionally, algorithm optimization was carried out to achieve maximum accuracy and efficiency. The fourth chapter presents the results of system optimization, information diagrams, user instructions, and charts of detected fixed matches. As a result, a system for detecting fixed sports matches using web scraping technology was developed, demonstrating high efficiency and accuracy in identifying suspicious activities. The qualification work contains 57 pages, 12 pictures, 0 tables, 27 references, and 1 appendice.