DataMining - скрейпинг, парсинг сайтов

  • Подписчики: 131 подписчиков
  • ID: 44444264
Блокировка:
Нет ограничений
Верификация:
Сообщество не верифицировано администрацией ВКонтакте
Видимость
открытое
Популярность:
У сообщества нет огня Прометея
Домен:
dataminingio

Описание

Создаем маркетплейс-платформу, которая объединяет разработчиков парсеров, краулеров, скраперов и клиентов, заинтересованных в сборе общедоступных данных, например: выдача google, товары amazon или автоматизации действий на сайтах. Как это работает? Разработчик пишет парсер на любом языке программирования загружает в docker контейнер, указывает какие данные необходимы для запуска и каким будет результат работы. Клиент находит в маркетплейсе необходимый парсер, вводит данные для работы, запускает, парсер собирает и сохраняет данные, клиент получает данные в удобном формате. Клиент платит за время выполнения парсера на ВМ платформы, разработчик получает процент от запуска. Более подробное описание проекта здесь - https://clck.ru/Lk9Ko Аналогичные сервисы и конкуренты: - apify.com - rapidapi.com - scrapinghub.com - scrapingbee.com В команду нужны: - SEO специалист - продвижение на рынок США и на остальной англоговорящий мир - Контент-менеджер - написание статей по ТЗ SEO специалиста - Разработчик платформы - ориентировочный стек Laravel, Postgresql - Разработчики парсеров - любые языки, знание Docker - Дизайнер - лендинг, UI На сегодняшний день проанализирован рынок, конкуренты, делаем ТЗ и лендинг для проекта.