С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 28/08/23 в 13:16 |
Сборник рецептов #58: обработка текстов с помощью ИИ, цены на крипту, поиск сообщений в ТГ-каналах
58-й сборник рецептов, в котором собраны: парсер для сервиса по обработке текстов с помощью ИИ (перефразирование, резюмирование...), парсер для проверки цен на криптовалюты с возможностью выбора из 5 бирж, а также парсер для поиска сообщений по ключевым словам в Telegram каналах.
NeuralWriter - перефразирование, генератор промптов, резюмирование
Парсер сервиса neuralwriter.com. С его помощью можно перефразировать текст (включая перевод на нужный язык), сформировать краткое резюме для большого текста, а также генерировать промпты для моделей ChatGPT и GPT. Парсер имеет возможность читать тексты из файлов.
CryptoExchanges - одновременная проверка цены на криптовалюту на нескольких биржах
Парсер, позволяющий одновременно проверить цену на нескольких крипто биржах по тикеру. Поддерживается 5 бирж.
Парсер поиска Телеграм постов по ключевым словам с tgdev.io/tme
Возможность парсить сообщения из Telegram каналов по ключевым словам. Собираются дата поста, ссылка на пост и его текст.
Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
Все сборники рецептов
10% скидка на покупки с оплатой USDT TRC20
Скидка 10% на покупки с оплатой USDT TRC20
При оплате A-Parser и других продуктов или услуг у нас, вы получаете возможность приобрести их со скидкой 10% – оплачивая через USDT TRC20!
1. Переходите на сайт A-Parser
2. Выбирайте подходящий продукт или услугу
3. Оплачивайте через USDT TRC20 и получите 10% скидку
Предложение действует ограниченное время!
Если у вас возникли вопросы или вам нужна дополнительная информация, наша команда поддержки всегда готова помочь. Свяжитесь с нами для получения консультации.
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 08/09/23 в 09:14 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 18/09/23 в 16:40 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 28/09/23 в 17:30 |
1.2.2062 - парсер профилей Tiktok, поддержка click каптч Яндекса, улучшения и исправления
Улучшения
- Добавлен парсер Social::TikTok::Profile
- SE::Yandex - добавлен парсинг быстрых ответов
- Добавлена поддержка новых каптч Яндекса (click captcha) в парсерах SE::Yandex::ByImage, SE::Yandex::Images, SE::Yandex::SQI, Shop::Yandex::Market
- В Util::AntiGate изменился набор доступных опций, подробнее здесь
- В SE::Yandex добавлена опция AntiGate preset for old captcha. С ее помощью можно выбрать пресет антигейта для обычных (старых, в виде одной картинки) каптч. Рекомендации по парсингу Яндекса описаны тут.
- В SE::Yandex::Translate добавлена возможность подключать разгадывание каптч
- В SE::Bing улучшена скорость, уменьшено количество ошибок Short output, добавлены сессии
- В SE::YouTube добавлена опция Advanced filters (param sp=), с помощью которой можно указать сложные комбинации фильтров
- Rank::KeysSo - добавлена возможность парсить с авторизацией, актуализированы собираемые данные
- В парсерах OpenAI добавлена возможность указывать несколько API ключей
- Парсеры WordStat: адаптация к изменениям в авторизации, максимальное кол-во страниц увеличено до 50
- JS парсеры: добавлена опция skipProxySettingsInheritance для parser.request()
Исправления в связи с изменениями в выдаче
Исправления
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 09/10/23 в 13:55 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 19/10/23 в 13:00 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 30/10/23 в 13:07 |
Обновленные пресеты в каталоге A-Parser
Обновление пресетов в Каталоге примеров A-Parser
Валидатор емайлов
Проверка существования e-mail адресов
- Добавлена поддержка protonmail (proton.me, protonmail.com)
- Добавлена поддержка tutanota (tutanota.com, tutanota.de, tutamail.com, tuta.io, keemail.me)
- Парсер переписан на JS API v2
JS::Yandex::LangDetect
Определение языка страницы через Яндекс Переводчик
- Парсер переписан на JS API v2 (TypeScript)
- Добавлена поддержка каптч (наследуется от SE::Yandex)
- Добавлен выбор пресета настроек HTML::TextExtractor
- Адаптация к изменениям на источнике
JS::Yandex::LangDetect::Key
Определение языка ключевого слова через Яндекс Переводчик
Core Web Vitals
Отчет о скорости сайта
- Обновление в связи с изменениями в выдаче
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 09/11/23 в 14:19 |
1.2.2106 - обновленный SE::Rambler, лимит при парсинге в глубину в LinkExtractor и другие улучшения
Улучшения
- В HTML::LinkExtractor добавлена возможность указания лимита количества ссылок при парсинге в глубину
- В Util::AntiGate добавлена поддержка Capsola, capmonster.cloud
- В Util::Turnstile добавлена поддержка captcha.guru
- В Rank::MajesticSEO добавлена возможность указывать собственные юзер-агенты для повышения успешности парсинга
- В парсерах Rank::Ahrefs::* добавлена экспериментальная опция Do not search for sitekey, которая отключает поиск sitekey, что в свою очередь ускоряет запуск задания
- SE::Rambler полностью переписан:
- обновлен список языков
- добавлена возможность указывать регион
- добавлен выбор десктопной или мобильной выдачи
- обновлена работа с каптчами
- JS парсеры: добавлена поддержка тегов для сессий
Исправления в связи с изменениями в выдаче
Исправления
- Исправлены ошибка в Rank::CMS, из-за которой в некоторых случаях он не работал
- Исправлена ошибка использования SE::Yahoo через Redis API
- Исправлена работа SE::YouTube при запросах из JS парсеров
- Исправлена работа Net::Whois с доменами .se
- Исправлено ошибочное определение запроса неудачным в Shop::eBay
- Исправлено заполнение результатов в Rank::KeysSo
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 20/11/23 в 17:41 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 30/11/23 в 15:42 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 11/12/23 в 13:10 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 21/12/23 в 14:41 |
1.2.2148 - бесплатное решение Яндекс каптчи, 3 новых парсера, поддержка нового WordStat
Улучшения
- Открыто бесплатное тестирование решения Яндекс каптчи!
В Util::AntiGate добавлен провайдер A-Parser.Captchas, его можно использовать без указания ключа доступа.
- Добавлено 3 новых парсера:
- В SE::Yandex::WordStat добавлена поддержка нового WordStat
- В SE::Yandex::SQI добавлен сбор рейтинга магазина в поиске по товарам и рейтинга магазина на Яндекс Маркете
- В Social::Instagram::Profile добавлен сбор ссылок, которые были прикреплены в профиле и сбор телефонов из bio
- В Maps::Yandex добавлен сбор времени работы организации
- Util::AntiGate адаптирован к изменениям в API 2captcha/rucaptcha. А также оптимизирована работа с click каптчей и добавлена опция Log captcha images, позволяющая отключать вывод картинок каптч в лог
Исправления в связи с изменениями в выдаче
- Адаптация к изменениям в верстке поисковой выдачи Google и Яндекс
- В Shop::Yandex::Market исправлена работа со всеми видами запросов
- SE::YouTube, GooglePlay::Apps, Shop::Wildberries::ProductInfo, Shop::Wildberries::ProductsList, SE::DuckDuckGo, Reddit::Posts, Reddit::Comments, SE::Google::ByImage, SE::Ask, Shop::Amazon, Social::TikTok::Profile
Исправления
Команда A-Parser поздравляет всех с наступающими новогодними праздниками!
График работы поддержки на праздники
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 08/01/24 в 14:09 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 18/01/24 в 13:23 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 30/01/24 в 15:09 |
Обновленные пресеты в каталоге A-Parser
Обновление пресетов в Каталоге примеров A-Parser
Скриншоты выдачи поисковой системы
Демонстрация возможности делать скриншоты страниц, получаемых другими парсерами
- Добавлена возможность выбирать из нескольких поисковиков (Google/Яндекс/Bing, по аналогии можно добавить остальные)
- Все результаты, получаемые от парсера поисковика, теперь перемещены в объект $p1.results (для примера реализован вывод $serp)
- Небольшие изменения логики работы
Парсер изображений с Flickr
Парсинг картинок из Flickr по ключевому слову
- Пресет переделан в JS парсер на TypeScript
- Добавлен выбор параметров поиска: Sort, License, Color, Style
- Добавлен параметр выбора количества страниц
- Для каждой картинки реализована возможность парсить ссылку, заголовок, описание, владельца, количество добавлений в избранное и количество комментариев
Анализ скорости загрузки и юзабилити сайтов
Измерение скорости загрузки страниц, их юзабилити, получение скриншотов сайтов
- Парсер переписан на JS API v2 (TypeScript)
- Добавлена возможность указывать ключ API
- Адаптация к изменениям на источнике
NeuralWriter - перефразирование, генератор промптов, резюмирование
Парсер сервиса neuralwriter.com
- Добавлена поддержка разгадывания каптчи Cloudflare Turnstile - опция Util::Turnstile preset. Разгадывание капчи теперь обязательно, если тип запроса не Prompt Generator
Google Indexing API
Добавление или удаление страниц сайта в Google Indexing API
- Парсер переписан на TypeScript (JavaScript API v2)
- Добавлена возможность использовать несколько ключей
Генерация картинок ruDALL-E
Напишите текстовый запрос — получите сгенерированную ИИ картинку в rudalle.ru
- Исправлена генерация с помощью старой модели (ruDALL-E Malevich)
- Для генерации картинки старой моделью теперь не требуется подключение Util::AntiGate
- Добавлен выбор модели, которая будет генерировать изображения, добавлена новая модель Kandinsky 3.0 (new)
- В моделе Kandinsky 3.0 есть возможность выбрать стиль генерации изображения, доступны все стили
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 08/02/24 в 16:48 |
Premium прокси от A-Parser
Мы рады представить вам новые Premium прокси-серверы, которые значительно улучшат вашу работу. Ключевые преимущества Premium прокси:
- База более 10 миллионов резидентных (домашних) IP адресов: Обеспечьте себе разнообразие и стабильность соединения с нашей обширной базой IP адресов.
- Быстрое время отклика: Мы гарантируем высокую скорость и оптимальное время отклика, обеспечивая эффективную работу ваших парсеров.
- Гибкая фильтрация по странам и городам: Настройте прокси под свои потребности с помощью гибкой фильтрации, чтобы получать доступ к ресурсам из конкретных стран и городов.
- Настройки ротации: Используйте различные режимы ротации, включая случайный IP на каждый запрос, ротацию от 1 до 60 минут и режим Sticky, который сохраняет IP на максимально возможное время.
- Подходит для браузинга и парсинга: Наши прокси идеально подходят как для браузинга, так и для парсинга, с минимальным риском CAPTCHA и банов.
- Доступ к прокси осуществляется по логину/паролю и протоколу SOCKS5, а также может быть организован сразу с нескольких компьютеров и серверов.
Лучшие цены на рынке: Premium прокси от $1 за гигабайт трафика.
Для всех пользователей A-Parser доступен бесплатный триал в Личном кабинете на 1 Гб.
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 19/02/24 в 16:45 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 29/02/24 в 13:06 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 11/03/24 в 12:55 |
Сборник рецептов #62: проверка текстов, Markdown разметка, простой файловый сервер на базе A-Parser
62-й сборник рецептов, в котором содержатся: парсер сервиса zerogpt для проверки текстов, пример использования Markdown разметки для генерации HTML страниц и альтернативный метод получения файлов результатов работы А-Парсера.
ZeroGPT - проверка грамматики и орфографии, детектор искусственного интеллекта
Парсер сервиса zerogpt.com. Поддерживается выбор режима работы с текстом: проверка грамматики и орфографии или детект искусственного интеллекта, т.е. был ли проверяемый текст сгенерирован с помощью ИИ.
Парсер перевода Markdown разметки в HTML
Парсер собирает выдачу Google встроенным парсером. Далее, используя заготовленный Markdown шаблон template.md, который можно легко редактировать по своему усмотрению, переводит Markdown разметку в HTML с учетом собранных результатов.
Альтернативный метод получения файлов результатов
Реализация простого файлового сервера на базе A-Parser. Суть примера заключается в том, чтобы по запросу на заранее известный url получить любой файл из папки results.
В качестве кейсов применения можно рассматривать любые задачи, в которых требуется получать прямой доступ к файлам результатов и при этом имена файлов заранее известны. Например: с помощью Планировщика периодически запускаются несколько заданий, которые пишут результаты в файлы со статическими именами. И с помощью данного пресета можно легко и в любое время получить эти файлы.
Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
Все сборники рецептов
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 01/04/24 в 17:46 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 11/04/24 в 16:16 |
Сборник рецептов #63: конвертация Youtube видео в статьи, парсер Шедеврум, парсер Pinterest Trends
63-й сборник рецептов, в котором содержатся: парсер для конвертации Youtube видео в полноценные HTML страницы с картинкой и текстовым описанием содержимого видео, парсер картинок из shedevrum.ai и парсер Pinterest Trends.
Конвертация Youtube видео в HTML страницы
Пример парсера, который, используя сервисы ИИ, создает полноценные HTML страницы, содержащие тематическую картинку и текст с разметкой, который дублирует содержание видео. На иллюстрации для примера показана статья, сгенерированная по нашему недавнему видео о Premium прокси.
Парсер картинок с Шедеврум с дополнительными данными
Парсер картинок с дополнительными данными по ключевым словам из сервиса shedevrum.ai. Можно парсить ссылки на картинки, promptы по которым генерировались эти картинки, описание и т.д.
Парсер Pinterest Trends
Сбор данных о трендах в Pinterest по ключевым словам с возможностью выбора региона и даты. Собираются данные о популярности и демографии ключевого слова, а также связанные ключевые слова и популярные пины.
Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
Все сборники рецептов
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 22/04/24 в 15:13 |
Обновленные пресеты в каталоге A-Parser
Обновление пресетов в Каталоге примеров A-Parser
Генерация картинок ruDALL-E
Генерация картинок по текстовым запросам через нейросеть ruDALL-E. Присутствует возможность выбирать модель и стиль генерации.
- Добавлена опция Save image, позволяет отключить сохранение изображения в файл, по-умолчанию включена
- Изображение теперь доступно в переменной $data
Парсинг отзывов Google Play Market
Данный парсер собирает комментарии (ссылка на аватар, рейтинг и имя юзера, а также текст отзыва) к приложению в Google Play Market.
- Исправлен парсинг
- Парсер переписан на TS (API v2)
- Добавлена возможность указания количества страниц парсинга
Naver Ads
Парсер рекламных объявлений из Naver по ключевым словам с возможностью указать количество страниц парсинга.
- Исправлен сбор всех результатов
- Адаптация к изменениям на источнике
JS::TextFromSE
Объединение парсера поисковой выдачи и парсера текста в одном JS парсере на примере решения задачи по парсингу текстов.
- Парсер переписан на TypeScript API v2
Парсер Aliexpress товаров
Парсер, позволяющий получить информацию о товаре на Aliexpress, подавая на запрос ссылку на товар.
- Адаптация к изменениям на источнике
- $delivery теперь массив
- $formattedQuery был удален
- Вместо $html исходный код страницы сохраняется в $data
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 02/05/24 в 16:52 |
Сборник статей #18: вывод в CSV, парсинг номеров телефонов, обзор Collect full region в Maps::Google
Представляем 18-й сборник статей, в который вошли статья о выводе результатов в CSV таблицы, статья об универсальном парсинге номеров телефонов и статья с обзором функции Collect full region парсера Google Maps.
Всё о выводе результатов в CSV (табличное представление результатов)
Табличное представление результатов - это очень популярный вид форматирования данных, собираемых А-Парсером. И чаще всего для этого используется именно формат CSV. В этой статье описаны все варианты и нюансы работы с CSV в контексте A-Parser. А также рассказано чем и как правильно обрабатывать CSV файлы.
Универсальный парсер телефонов
Как известно, номера телефонов проблематично парсить из-за отсутствия единого формата их записи. В этой статье мы поделимся одним из методов универсального парсинга номеров телефонов, а также заодно покажем как можно использовать npm модули без написания JS парсеров.
Детальный обзор Collect full region в Maps::Google
Детальное описание функции Collect full region в парсере Google Карт, варианты ее настройки, рекомендации для наибольшей производительности и сравнение скорости работы парсера на разных прокси.
Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки ) - отписывайтесь здесь.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
Все сборники статей
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 13/05/24 в 16:54 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|
С нами с 03.06.13
Сообщения: 297
Рейтинг: 37
|
Добавлено: 23/05/24 в 14:45 |
|
|
A-Parser - парсер для профессионалов SEO
SpySerp.com - бесплатный сервис отслеживания позиций
|
0
|
|
|