Благодарю автора за ответственное отношение к выполнению заказа.
Информация о работе
Подробнее о работе
Веб-скрапинг. курсовая Готовое 2026
- 21 страниц
- 2026 год
- 0 просмотров
- 0 покупок
Гарантия сервиса Автор24
Уникальность не ниже 50%
Фрагменты работ
С каждым годом объём информации в интернете растёт экспоненциально [3, с. 15]. Поисковые системы, такие как Google, Yandex или Bing, предоставляют пользователям доступ к миллиардам документов, однако общий характер выдачи часто не позволяет быстро получить данные, соответствующие узким, заранее заданным параметрам: точной дате, конкретному источнику, формату файла или комбинации ключевых слов с логическими операторами [4, с. 2]. Ручной перебор результатов поиска или просмотр сайтов по одному требуют значительных временных затрат. Особенно остро эта проблема стоит перед исследователями, маркетологами, аналитиками и разработчиками, которым необходимо регулярно собирать структурированные данные из открытых веб-источников [1,с.45]. Автоматизация процесса поиска с учётом пользовательских критериев становится не просто удобством, а необходимостью для эффективной работы с большими массивами данных.
В соответствии с вышеизложенным, цель работы: представить информацию в удобном виде по запросу пользователя.
Для того, чтобы достичь данной цели, необходимо решить следующие задачи:
1. Изучить существующие методы веб-скрапинга, API поисковых систем и алгоритмы фильтрации данных.
2. Классифицировать типы заданных параметров для построения точных поисковых запросов.
3. Создать программный продукт, позволяющий автоматически собирать информацию из интернета и сортировать её по заданным пользователем критериям.
ВВЕДЕНИЕ 4
1. Методы веб-скрапинга, API поисковых систем и алгоритмов фильтрации данных 5
1.1 Понятие веб-скрапинга и его место в автоматизированном поиске 5
1.2 Методы веб-скрапинга: от регулярных выражений до браузерной автоматизации 6
1.3 API поисковых систем как альтернатива скрапингу 7
1.4 Алгоритмы фильтрации и постобработки данных 8
2. Классификация типов заданных параметров для построения точных поисковых запросов 9
2.1 Основные предложения по решению проблемы 9
2.2 Укрупнённая модель информационной системы 10
2.3 Описание элементов системы (M, F, C) 11
2.4 Структура системы 12
2.5 Характеристики системы 12
3. Описание программного продукта 15
3.1 Язык программирования 15
3.2 Описание классов 15
3.3 Описание работы программы 16
3.3.1 Запуск программы 16
3.3.2 Ввод параметров фильтрации 16
3.3.3 Применение фильтров 17
3.3.4 Получение и просмотр результатов 18
3.3.5 Сохранение отчёта 19
Заключение 19
СПИСОК ЛИТЕРАТУРЫ 21
Работа оформлено согласно большинству ГОСТов
По всей работе ссылки или подстрочные или в квадратных скобках (в разных работах по разному)
Оригинальность 75% - не кодировка
Опыт написания студенческих работ более 20 лет, поэтому можете с уверенностью скачать данную работу, вставить титульный лист и сдать преподавателю, получить оценку «5», или «4», но не ниже.
Если возникли проблемы с оригинальностью – не отправляйте на перерасчет – Напишите мне (Алексей К.) и я исправлю, если что то не так
1. Митчелл, Р. Веб-скрапинг для исследований: сбор и анализ данных с использованием Python / Р. Митчелл. — Москва : ДМК Пресс, 2020. — 312 с. — ISBN 978-5-97060-827-3.
2. Коплан, А. Поисковая оптимизация и продвижение сайтов / А. Коплан. — Санкт-Петербург : Питер, 2019. — 416 с. — ISBN 978-5-4461-1207-9.
3. Браунли, Д. Искусственный интеллект в поисковых системах: алгоритмы ранжирования и фильтрации / Д. Браунли. — Москва : Альпина Паблишер, 2021. — 288 с. — ISBN 978-5-9614-3518-8.
4. Google Developers. Custom Search JSON API Documentation [Электронный ресурс]. — URL: https://developers.google.com/custom-search/v1/overview (дата обращения: 10.04.2026).
5. Yandex. Документация XML Search API [Электронный ресурс]. — URL: https://yandex.ru/dev/xml/ (дата обращения: 10.04.2026).
6. Richardson, L. Beautiful Soup Documentation [Электронный ресурс] / L. Richardson. — URL: https://www.crummy.com/software/BeautifulSoup/bs4/doc/ (дата обращения: 10.04.2026).
7. Microsoft. Bing Web Search API Documentation [Электронный ресурс]. — URL: https://learn.microsoft.com/en-us/bing/search-apis/bing-web-search/ (дата обращения: 10.04.2026).
Форма заказа новой работы
Не подошла эта работа?
Закажи новую работу, сделанную по твоим требованиям
