A-Parser - продвинутый парсер ПС, PR, WS, более 35 парсеров!

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Google Indexing API
Парсер для добавления или удаления страниц сайта в Google через Indexing API

• Исправлена ошибка "Cannot init Parser: Error: EISDIR: illegal operation on a directory, read at Object.readSync"
  
• Изменения в логике обработки запросов
  

JS::MailValidator
Проверка существования e-mail адресов

• Исправлена проверка Icloud
  

Парсинг istio.com
Анализ текстов на сервисе istio.com (тошнота, водность, словари, тематика, статистика...)

• Исправлено получение информации
  
• Добавлена возможность выбора способа получения текста со страниц: HTML::TextExtractor или HTML::ArticleExtractor
  
• Небольшая оптимизация кода
  

Парсер отзывов Wildberries Reviews
Сбор отзывов по товарам с wildberries.ru в csv таблицу

• Обновление в связи с изменениями на ресурсе
  

Проверка категории сайтов через сервис cyren.com
Проверка категории сайтов через сервис https://www.cyren.com/

• Адаптация к изменениям на источнике
  
• Вместо Util::ReCaptcha2 теперь Util::ReCaptcha3
  

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

Сборник рецептов #64: скачивание видео из Instagram, проверка e-mail и переводчик Libre Translate

64-й сборник рецептов, в котором представлены парсер для скачивания видео из Instagram, пресет для проверки e-mail в сервисе EmailRep и парсер переводчика Libre Translate.

Instagram Reels Downloader
Парсер для скачивания видео из Instagram. Работает на основе встроенного парсера Social::Instagram::Post и в качестве запросов принимает ссылку на пост типа Video/Reel.


Проверка e-mail адресов в сервисе EmailRep
EmailRep - это система парсеров, сканеров и дополнительных сервисов, которая собирает данные об адресах электронной почты, доменах и интернет-персонах. Сервис использует сотни точек данных из профилей социальных сетей, профессиональных сетевых сайтов, утечек учетных данных в Darknet, утечек данных, наборов для фишинга, фишинговых писем, списков спама, открытых почтовых ретрансляторов, спам-ловушек, возраста и репутации домена, доставляемости и многого другого для оценки адреса электронной почты.


Парсер переводчика Libre Translate
Бесплатный API машинного перевода с открытым исходным кодом. В отличие от других API, он не полагается на проприетарных поставщиков, таких как Google или Azure. Вместо этого его механизм перевода основан на библиотеке Argos Translate с открытым исходным кодом.



Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

1.2.2347 - 2 новых парсера WordCraft и Instagram Search, поддержка puzzle каптчи в Яндексе



Улучшения

• Добавлены новые парсеры:
  • SE::Yandex::WordCraft - это часть сервиса Яндекс Вебмастер, с помощью которого вы можете подобрать целевые запросы для продвижения и рекламы, учитывая популярность и конкурентную среду
    
  • Social::Instagram::Search - поиск профилей, тегов, локаций по ключевым словам в Instagram
    
• Изменения в SE::Yandex:
  • добавлена поддержка новой puzzle каптчи, подробнее здесь и здесь
    
  • реализована возможность парсить через браузер, подробнее здесь
    
• В Social::Instagram::Post добавлен сбор ссылок на видео
  
• В Maps::Yandex добавлен вывод статуса закрытия организации
  
• В Check::RosKomNadzor добавлена поддержка реестра nap.rkn.gov.ru
  

Исправления в связи с изменениями в выдаче

• Исправлено получение картинки каптчи в Check::RosKomNadzor, а также в целом исправлена его работа
  
• Исправлена ошибка SC parameter was found в SE::Startpage
  
• Исправлена работа SE::Yandex::Video
  
• Исправлена ошибка определения регистрации доменов .au в Net::Whois
  
• Shop::Yandex::Market, SE::Google::Images, SEDuckDuckGo
  

Исправления

• Исправлено авторазгадывание в Util::Turnstile
  

Сборник статей #19: проверка наличия контента на странице и уведомления в Telegram

Представляем 19-й сборник статей, в котором содержатся две статьи от нашего пользователя @Reset: определение наличия контента на странице с выводом в таблицу и уведомление о выполненном задании в Telegram.

Как определить наличие контента в теле страницы и вывести в таблицу
В качестве примера рассмотрено определение наличия некоторых модулей на сайтах Wordpress и его легко можно адаптировать под аналогичные задачи.


Уведомление об выполненном задании в Telegram
Ранее мы уже публиковали способ получения уведомлений о завершении работы задания через Цепочку заданий. А в этой статье показано как это можно сделать через PHP скрипт.


Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники статей

Дайджест новостей A-Parser + акция на Premium прокси

Парсим базу для XRumer: медленно, но верно
Новая статья от нашего пользователя @Reset о сборе базы форумов для Хрумер.


Парсер всех видео с Youtube канала
Новый парсер в Каталоге, позволяющий собирать списки видео (с их характеристиками) из Youtube каналов.


Анализ скорости загрузки и юзабилити сайтов
Обновление парсера для измерения скорости загрузки страниц с помощью сервиса PageSpeed Insights.


Акция на Premium прокси
Только до конца июля 20% скидка на все пакеты премиум прокси от 20 до 500 гигабайт

• Proxies Premium 20 Gb / 1 week - $34 $27.20
  
• Proxies Premium 50 Gb / 1 week - $75 $60
  
• Proxies Premium 100 Gb / 1 week - $140 $112
  
• Proxies Premium 200 Gb / 1 week - $260 $208
  
• Proxies Premium 500 Gb / 1 week - $600 $480
  
• Proxies Premium 50 Gb / 1 month - $95 $76
  
• Proxies Premium 100 Gb / 1 month - $170 $136
  
• Proxies Premium 300 Gb / 1 month - $450 $360
  
• Proxies Premium 500 Gb / 1 month - $650 $520
  

Premium прокси - это возможность быстрого парсинга без бана IP и каптч, с возможностью выбора гео из любой точки мира!

Для оплаты используйте промокод PREMIUM-PROXY-JULY-20%-OFF в Личном кабинете на a-parser.com


Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Дайджест новостей A-Parser

Парсинг блока Интересно узнать из поисковой выдачи Яндекс
Новый пресет для получения данных из блока Интересно узнать поисковой выдачи Яндекса.


Парсер новостей с newsapi.org
Новый парсер в Каталоге для парсинга новостей с newsapi.org по ключевым словам через официальное API.


Подсказки amazon.com
Обновление парсера подсказок торговой площадки amazon.com.

• Обновлен url запроса
  
• Обновлена обработка результата
  

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Видео урок: парсер новостей с newsapi.org

Новое видео по работе с A-Parser от DIM STUDIO в котором показан обзор парсера новостей с newsapi.org.



Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO!

Дайджест новостей A-Parser

Парсер t-online
Парсер для сбора результатов выдачи и связанных ключевых слов из поисковой системы t-online.


Проверка категории сайтов через сервис cyren.com
Обновление парсера для проверки категории сайтов через сервис cyren.com

• Адаптация к изменениям на источнике
  

Парсер copart.com
Обновление парсера аукциона автомобилей copart.com

• Добавлена возможность парсить изображения
  

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

1.2.2396 - новый парсер Util::SMS, улучшения во встроенных парсерах + акция на Premium прокси



Улучшения

• Добавлен новый парсер Util::SMS - парсер для получения кодов из смс
  
• В Util::AntiGate добавлена возможность остановки всего задания при получении сообщения о низком балансе на сервисе разгадывания каптч
  
• В HTML::EmailExtractor добавлен параметр Search URL encoded e-mails
  
• В парсерах OpenAI::* добавлена опция API domain, которая позволяет задать свой домен для API запросов
  
• В Shop::Amazon добавлен сбор количества продаж
  
• В Maps::Google добавлен сбор booking link (данные о сервисе записи)
  
• В HTML::ArticleExtractor теперь доступно больше переменных, они полностью наследуются из Net::HTTP
  
• Обновлен список яыков в DeepL::Translator
  
• Обновлен список моделей в OpenAI::ChatGPT
  
• Добавлен инструмент tools.task.stop(), который позволяет останавливать выполнение задания в любой момент
  
• CapSolver для каптч Turnstile теперь не требует передачи прокси<
  
• Добавлена поддержка сервиса botlab.me в Util::AntiGate
  

Исправления в связи с изменениями в выдаче

• Изменения в SE::Yandex::Register, подробнее тут
  
• В парсерах SE::Google::KeywordPlanner::* исправлена авторизация по логин-паролю
  
• Исправлена работа Rank::MOZ
  
• Исправлена работа Util::Turnstile в режиме Auto
  
• В Shop::Wildberries::ProductInfo исправлена работа с некоторыми видами запросов
  
• Исправлен парсинг People also ask и Related keywords в SE::Google
  
• Частично исправлено получение количества товаров в Shop::Wildberries::ProductsList
  

Исправления

• Исправлен обход защиты Cloudflare
  
• Исправлено произвольное зависание в Maps::Yandex
  
• В Shop::Wildberries::ProductInfo переменная $data теперь корректно заполняется
  
• В SE::Yandex::WordCraft переименован результат $query в массивах $uqa и $uqg
  
• Исправлен баг из-за которого в Общем формате результатов не происходил сброс результатов при нажатии кнопки сброса
  
• Исправлена работа с прокси в связке Util::SMS + SE::Yandex::Register
  

Акция на Premium прокси
20% скидка на все пакеты премиум прокси от 20 до 500 гигабайт

• Proxies Premium 20 Gb / 1 week -$34 $27.20
  
• Proxies Premium 50 Gb / 1 week - $75 $60
  
• Proxies Premium 100 Gb / 1 week - $140 $112
  
• Proxies Premium 200 Gb / 1 week - $260 $208
  
• Proxies Premium 500 Gb / 1 week - $600 $480
  
• Proxies Premium 50 Gb / 1 month - $95 $76
  
• Proxies Premium 100 Gb / 1 month - $170 $136
  
• Proxies Premium 300 Gb / 1 month -$450 $360
  
• Proxies Premium 500 Gb / 1 month - $650 $520
  
  

Premium прокси - это возможность быстрого парсинга без бана IP и каптч, с возможностью выбора гео из любой точки мира!

Для оплаты используйте промокод PREMIUM-PROXY-20%-OFF в Личном кабинете на a-parser.com