Opensource: Vessel — Ruby фреймворк для краулинга веб-страниц
Мы в Evrone создали на Ruby высокоуровневый фреймворк для сканирования веб-сайтов. С его помощью можно парсить данные с веб-сайтов для последующего анализа, мониторинга или архивирования.
В статье про проект Machinio рассказываем, как автоматически собирать информацию с разных сайтов и систематизировать её на едином маркетплейсе.
На сайте Evrone расширенная статья о фреймворке Vessel.
Vessel — это быстрый высокоуровневый фреймворк с открытым исходным кодом для сканирования и получения данных с веб-страниц, созданный на основе Ferrum — драйвера с минимальным количеством зависимостей, написанного на чистом Ruby, для запуска headless Google Chrome.
Репозиторий проекта на Github.
Лучшее в блогах
Вам понравится
Начинать работу на Авито с предложением своих услуг — проще, чем кажется. Даже если вы впервые размещаете объявление, несколько продуманных шагов помогут сделать профиль привлекательным для заказчиков и получить новые заявки. В этом руководстве разберём базовые, но важные правила: как грамотно оформить профиль и объявление, чтобы вызывать доверие, чётко доносить ценность своих услуг и выделяться среди конкурентов. Следуя этим рекомендациям, вы уже на старте сможете получать первые заказы и выстраивать долгосрочные отношения с клиентами.
Неделя рекламы
Энциклопедия обмана