Парсинг сайтов
Ручной обход сайтов и выписывание цен, товаров или контактов — это можно собирать автоматически в таблицу, по расписанию. Надёжный сбор данных — частая опора продуктов, которые мы строим.
Примеры задач
Список сайтов или страниц и какие поля нужны
Инструмент собирает данные по расписанию и складывает в таблицу
Готовая таблица с данными и подсветкой изменений
Проекты
Похожие задачи, которые мы решали инженерно.
Задача «парсинг сайтов» знакома не только вам. Если вы глубоко знаете эту тему — из неё может вырасти продукт для целого рынка.
Цимерманс — венчур-студия. Вы приносите экспертизу, мы вкладываем разработку и опыт запусков. Строим продукт вместе как со-основатели и делим долю — это не заказная разработка.
Подход
Как должна выглядеть таблица: колонки и как часто обновлять данные.
Одна задача — один тип источника с устойчивой структурой.
Сложнее с защитой от парсинга, капчами, авторизацией и очень большими объёмами.
Это инженерия для продукта
Такие задачи мы решаем не на заказ, а как часть продукта, который строим со-основателем.
Есть идея или ниша, где это нужно? Расскажите — обсудим, как построить из неё продукт вместе.
Рассказать об идееПолезное
Кейс: недельный отчёт собирали из выгрузок разных систем вручную полдня. Сделали инструмент, который сводит данные и формирует отчёт по кнопке.
Читать2 минКейс: заявки и клиенты жили в переписках и таблицах. Собрали простой кабинет, где видно все заявки и их статусы. Свой софт вместо чужой подписки.
Читать2 минКейс: пакет документов к каждой закупке заполняли руками, заявки сверяли глазами. Автоматизировали заполнение и анализ. Под ключ и с поддержкой.
ЧитатьFAQ
Мы собираем открытые данные и помогаем делать это аккуратно — с разумной нагрузкой и в рамках правил сайтов. Спорные случаи обсуждаем заранее.
Как нужно вам — по расписанию: раз в день, неделю или по запросу. Настраиваем под задачу.
Зависит от защиты. Пришлите ссылки — посмотрим и честно скажем, что реально, а что нет.