Рекомендации по доработке материала отправлены автору
Evrone
04.05.2023, 15:01

Opensource: Vessel — Ruby фреймворк для краулинга веб-страниц

Vessel — open-source решение для веб-краулинга, разработанное в Evrone.

Мы в Evrone создали на Ruby высокоуровневый фреймворк для сканирования веб-сайтов. С его помощью можно парсить данные с веб-сайтов для последующего анализа, мониторинга или архивирования.

В статье про проект Machinio рассказываем, как автоматически собирать информацию с разных сайтов и систематизировать её на едином маркетплейсе.

На сайте Evrone расширенная статья о фреймворке Vessel.

Vessel — это быстрый высокоуровневый фреймворк с открытым исходным кодом для сканирования и получения данных с веб-страниц, созданный на основе Ferrum — драйвера с минимальным количеством зависимостей, написанного на чистом Ruby, для запуска headless Google Chrome.

Репозиторий проекта на Github.

Вам понравится

Контент&Маркетинг
20.03.2024
IT Test
06.03.2024
МАИД.РФ
28.02.2024
AGM
26.02.2024