Задание: сделать парсинг сайта (Дистанционная работа)
Задачи:
определение публичных API;
сбор данных с не менее трёх публичных API с написанным кодом вызова не менее двух методов;
сбор данных методом парсинга Web-страниц с не менее двух сетевых ресурсов;
упаковка собранных данных в БД.
Рекомендуемый стек: Python / C#, библиотеки Requests, BS4, MongoDB
Критерии выполненности:
- наличие в репозитории на гитлабе кода в составе: код обращения к публичным API, код вызова парсинга Web-страниц, код инициализации базы данных;
- наличие в репозитории на гитлабе ридми-файла в формате markdown с информацией о исполнителе работы, краткое описание выбранных для выполнения работы API, краткое описание выбранных для парсинга ресурсов, информация о коллекциях БД и краткое описание алгоритма работы написанного кода;
Дополнительно:
- оформление ридми-файла;
- большее относительно требуемого число задействованных API, их методов и web-ресурсов.
