Please use this identifier to cite or link to this item:
https://libeldoc.bsuir.by/handle/123456789/37037
| Title: | Разработка универсального веб-скрапера набазе фреймворка NestJS и браузера Chromium Headless |
| Authors: | Давлатов, Ш. Р. |
| Keywords: | материалы конференций;веб-скрапинг;автоматический парсинг сайтов |
| Issue Date: | 2019 |
| Publisher: | БГУИР |
| Citation: | Давлатов, Ш. Р. Разработка универсального веб-скрапера набазе фреймворка NestJS и браузера Chromium Headless / Давлатов Ш. Р. // Информационные технологии и системы 2019 (ИТС 2019) = Information Teсhnologies and Systems 2019 (ITS 2019) : материалы международной научной конференции, Минск, 30 октября 2019 г. / Белорусский государственный университет информатики и радиоэлектроники; редкол. : Л. Ю. Шилин [и др.]. – Минск, 2019. – С. 98 – 99. |
| Abstract: | В работе рассматриваются наиболее популярные методы и средства веб-скрапинга, которые широко применяются для автоматизации процесса извлечения данных из различных ресурсов сети Интернет. Предлагается новая архитектура универсального веб-скрапера на основе браузера Chromium Headless и фрейм-ворка NestJS. Решается задача автоматического парсинга сайтов из заданного списка доменов для последующих процессов анализа и получения статистики используемых технологий, уязвимостей, географического распределения серверов и многое другое. |
| URI: | https://libeldoc.bsuir.by/handle/123456789/37037 |
| Appears in Collections: | ИТС 2019
|
Items in DSpace are protected by copyright, with all rights reserved, unless otherwise indicated.
