ПарсерПарсер или граббер — это программа, задача которой — анализировать и обрабатывать код, собранный с веб-страницы. Он распознает нужные данные в полученном коде, обрабатывает их по определенным параметрам
Разработка ботовРазработка ботов для тг. Как обычные парсеры так и сложные интернет-магазины или админ панели.
Парсинг цен, предложений с Яндекс Маркетатовара, бренд, артикул, цену, характеристики, количество отзывов на Маркете и на Яндекс. Товарах. Парсер работает со страницами выдачи по категориям, по поисковым запросам и с прямыми карточками. Настройка
Парсинг сайтовСоздаю парсеры сайтов, пишу на python, если необходимо могу написать на C#. Динамические сайты, переходы по вложенным ссылкам, парсер картинок и так далее, это все можно реализовать. Результаты оформляю
Парсинг товаров Ozonхарактеристики, цену. Сбор данных возможен по категориям, поисковым запросам или прямым ссылкам. Парсер обходит динамическую подгрузку блоков «С этим товаром покупают» и «Похожие товары». Поддерживается
Маркетплейс по игровой тематикетоваров. Был реализован как бекенд, так и фронтенд сайта. Бекенд подключён к базе данных. Используются парсеры для получения данных. Производилась настройка сайта на собственном сервере. Применяемые технологии:
Сбор организаций, контактов и рейтингов с картсайт, часы работы, рейтинг, количество отзывов и координаты (широту/долготу для нанесения на карту). Парсер обходит пагинацию на карте (бесконечный скролл + подгрузку кластеров). Система автоматически переключает
Сбор запчастей и остатков: EMEXпоставки, количество на складах разных городов, производитель, номер детали, страна происхождения и вес. Парсер работает с фильтрами по брендам, ценовым диапазонам и типу запчасти (двигатель, ходовая, электрика)
Парсинг отзывов, рейтингов и контента с Tripadvisorкатегориям (чистота, расположение, сервис), текст отзыва, дату, автора и количество оценок «полезно». Парсер обходит динамическую подгрузку страниц, пагинацию с бесконечным скроллом и блокировки по IP. Вы получаете
Автоматизированный парсинг отелей и цен: Booking.comизменениях (Telegram, email). Сбор и анализ отзывов клиентов для улучшения качества обслуживания. Парсер обходит капчу и блокировки с помощью ротации прокси и эмуляции браузера. Обновление данных — по расписанию
Многостраничный сайт. Недвижимостькомплексный подход к управлению недвижимостью, обмен недвижимости, мультиязычность на 5 языков, удобный парсер объектов с xml фида, удобное редактирование и управление объектами через админку. Сайт был реализован
Парсингпрограммирования приложений (API), предоставляемые сайтами.
Как работает
Отправка HTTP-запроса. Парсер отправляет запрос к веб-странице и получает HTML-код.
Анализ HTML-кода. Полученный код анализируется