|
На страницу Пред. 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11 ... , 13, 14, 15, 16, 17, 18, 19, 20, 21, 22 След. |
|
|
|
|
|
Обновленные пресеты в каталоге A-Parser
Обновление пресетов в Каталоге примеров A-Parser
Валидатор емайлов
Проверка существования e-mail адресов
- Добавлена поддержка protonmail (proton.me, protonmail.com)
- Добавлена поддержка tutanota (tutanota.com, tutanota.de, tutamail.com, tuta.io, keemail.me)
- Парсер переписан на JS API v2
JS::Yandex::LangDetect
Определение языка страницы через Яндекс Переводчик
- Парсер переписан на JS API v2 (TypeScript)
- Добавлена поддержка каптч (наследуется от
SE::Yandex)
- Добавлен выбор пресета настроек
HTML::TextExtractor
- Адаптация к изменениям на источнике
JS::Yandex::LangDetect::Key
Определение языка ключевого слова через Яндекс Переводчик
Core Web Vitals
Отчет о скорости сайта
- Обновление в связи с изменениями в выдаче
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!
|
|
|
|
|
|
1.2.2106 - обновленный SE::Rambler, лимит при парсинге в глубину в LinkExtractor и другие улучшения
Улучшения
- В
HTML::LinkExtractor добавлена возможность указания лимита количества ссылок при парсинге в глубину
- В
Util::AntiGate добавлена поддержка Capsola, capmonster.cloud
- В
Util::Turnstile добавлена поддержка captcha.guru
- В
Rank::MajesticSEO добавлена возможность указывать собственные юзер-агенты для повышения успешности парсинга
- В парсерах Rank::Ahrefs::* добавлена экспериментальная опция Do not search for sitekey, которая отключает поиск sitekey, что в свою очередь ускоряет запуск задания
-
SE::Rambler полностью переписан:- обновлен список языков
- добавлена возможность указывать регион
- добавлен выбор десктопной или мобильной выдачи
- обновлена работа с каптчами
- JS парсеры: добавлена поддержка тегов для сессий
Исправления в связи с изменениями в выдаче
Исправления
- Исправлены ошибка в
Rank::CMS, из-за которой в некоторых случаях он не работал
- Исправлена ошибка использования
SE::Yahoo через Redis API
- Исправлена работа
SE::YouTube при запросах из JS парсеров
- Исправлена работа
Net::Whois с доменами .se
- Исправлено ошибочное определение запроса неудачным в
Shop::eBay
- Исправлено заполнение результатов в
Rank::KeysSo
|
|
|
|
|
|
|
|
|
|
|
|
1.2.2148 - бесплатное решение Яндекс каптчи, 3 новых парсера, поддержка нового WordStat
Улучшения
- Открыто бесплатное тестирование решения Яндекс каптчи!
В
Util::AntiGate добавлен провайдер A-Parser.Captchas, его можно использовать без указания ключа доступа.
- Добавлено 3 новых парсера:
- В
SE::Yandex::WordStat добавлена поддержка нового WordStat
- В
SE::Yandex::SQI добавлен сбор рейтинга магазина в поиске по товарам и рейтинга магазина на Яндекс Маркете
- В
Social::Instagram::Profile добавлен сбор ссылок, которые были прикреплены в профиле и сбор телефонов из bio
- В
Maps::Yandex добавлен сбор времени работы организации
-
Util::AntiGate адаптирован к изменениям в API 2captcha/rucaptcha. А также оптимизирована работа с click каптчей и добавлена опция Log captcha images, позволяющая отключать вывод картинок каптч в лог
Исправления в связи с изменениями в выдаче
- Адаптация к изменениям в верстке поисковой выдачи Google и Яндекс
- В
Shop::Yandex::Market исправлена работа со всеми видами запросов
-
SE::YouTube,
GooglePlay::Apps,
Shop::Wildberries::ProductInfo,
Shop::Wildberries::ProductsList,
SE::DuckDuckGo,
Reddit::Posts,
Reddit::Comments,
SE::Google::ByImage,
SE::Ask,
Shop::Amazon,
Social::TikTok::Profile
Исправления
Команда A-Parser поздравляет всех с наступающими новогодними праздниками!
График работы поддержки на праздники
|
|
|
|
|
|
|
|
|
|
Обновленные пресеты в каталоге A-Parser
Обновление пресетов в Каталоге примеров A-Parser
Скриншоты выдачи поисковой системы
Демонстрация возможности делать скриншоты страниц, получаемых другими парсерами
- Добавлена возможность выбирать из нескольких поисковиков (Google/Яндекс/Bing, по аналогии можно добавить остальные)
- Все результаты, получаемые от парсера поисковика, теперь перемещены в объект $p1.results (для примера реализован вывод $serp)
- Небольшие изменения логики работы
Парсер изображений с Flickr
Парсинг картинок из Flickr по ключевому слову
- Пресет переделан в JS парсер на TypeScript
- Добавлен выбор параметров поиска: Sort, License, Color, Style
- Добавлен параметр выбора количества страниц
- Для каждой картинки реализована возможность парсить ссылку, заголовок, описание, владельца, количество добавлений в избранное и количество комментариев
Анализ скорости загрузки и юзабилити сайтов
Измерение скорости загрузки страниц, их юзабилити, получение скриншотов сайтов
- Парсер переписан на JS API v2 (TypeScript)
- Добавлена возможность указывать ключ API
- Адаптация к изменениям на источнике
NeuralWriter - перефразирование, генератор промптов, резюмирование
Парсер сервиса neuralwriter.com
- Добавлена поддержка разгадывания каптчи Cloudflare Turnstile - опция Util::Turnstile preset. Разгадывание капчи теперь обязательно, если тип запроса не Prompt Generator
Google Indexing API
Добавление или удаление страниц сайта в Google Indexing API
- Парсер переписан на TypeScript (JavaScript API v2)
- Добавлена возможность использовать несколько ключей
Генерация картинок ruDALL-E
Напишите текстовый запрос — получите сгенерированную ИИ картинку в rudalle.ru
- Исправлена генерация с помощью старой модели (ruDALL-E Malevich)
- Для генерации картинки старой моделью теперь не требуется подключение Util::AntiGate
- Добавлен выбор модели, которая будет генерировать изображения, добавлена новая модель Kandinsky 3.0 (new)
- В моделе Kandinsky 3.0 есть возможность выбрать стиль генерации изображения, доступны все стили
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!
|
|
|
|
|
|
Premium прокси от A-Parser
Мы рады представить вам новые Premium прокси-серверы, которые значительно улучшат вашу работу. Ключевые преимущества Premium прокси:
- База более 10 миллионов резидентных (домашних) IP адресов: Обеспечьте себе разнообразие и стабильность соединения с нашей обширной базой IP адресов.
- Быстрое время отклика: Мы гарантируем высокую скорость и оптимальное время отклика, обеспечивая эффективную работу ваших парсеров.
- Гибкая фильтрация по странам и городам: Настройте прокси под свои потребности с помощью гибкой фильтрации, чтобы получать доступ к ресурсам из конкретных стран и городов.
- Настройки ротации: Используйте различные режимы ротации, включая случайный IP на каждый запрос, ротацию от 1 до 60 минут и режим Sticky, который сохраняет IP на максимально возможное время.
- Подходит для браузинга и парсинга: Наши прокси идеально подходят как для браузинга, так и для парсинга, с минимальным риском CAPTCHA и банов.
- Доступ к прокси осуществляется по логину/паролю и протоколу SOCKS5, а также может быть организован сразу с нескольких компьютеров и серверов.
Лучшие цены на рынке: Premium прокси от $1 за гигабайт трафика.
Для всех пользователей A-Parser доступен бесплатный триал в Личном кабинете на 1 Гб.
|
|
|
|
|
|
|
|
|
|
Сборник рецептов #62: проверка текстов, Markdown разметка, простой файловый сервер на базе A-Parser
62-й сборник рецептов, в котором содержатся: парсер сервиса zerogpt для проверки текстов, пример использования Markdown разметки для генерации HTML страниц и альтернативный метод получения файлов результатов работы А-Парсера.
ZeroGPT - проверка грамматики и орфографии, детектор искусственного интеллекта
Парсер сервиса zerogpt.com. Поддерживается выбор режима работы с текстом: проверка грамматики и орфографии или детект искусственного интеллекта, т.е. был ли проверяемый текст сгенерирован с помощью ИИ.
Парсер перевода Markdown разметки в HTML
Парсер собирает выдачу Google встроенным парсером. Далее, используя заготовленный Markdown шаблон template.md, который можно легко редактировать по своему усмотрению, переводит Markdown разметку в HTML с учетом собранных результатов.
Альтернативный метод получения файлов результатов
Реализация простого файлового сервера на базе A-Parser. Суть примера заключается в том, чтобы по запросу на заранее известный url получить любой файл из папки results.
В качестве кейсов применения можно рассматривать любые задачи, в которых требуется получать прямой доступ к файлам результатов и при этом имена файлов заранее известны. Например: с помощью Планировщика периодически запускаются несколько заданий, которые пишут результаты в файлы со статическими именами. И с помощью данного пресета можно легко и в любое время получить эти файлы.
Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.
Все сборники рецептов
|
|
|
|
|
|
Обновленные пресеты в каталоге A-Parser
Обновление пресетов в Каталоге примеров A-Parser
Парсер корейского поисковика Daum.net
Парсер собирает данные (ссылки, анкоры, сниппеты и связанные ключевые слова) из поисковой выдачи корейской поисковой системы daum.net.
- Парсер переписан на TypeScript (JS APIv2)
- Обновлены регулярные выражения, исправлена работа в целом
- Убран totalcount, т.е. его больше нету в выдаче
Парсер BuiltWith.com. История IP-адресов и взаимосвязи
Сбор истории IP-адресов по домену и других веб-сайтов, которые имеют общие IP-адреса с искомым доменом.
- Убрана опция разгадывания капчи, т.к. теперь данные видны после авторизации и капчи там не видно
- Добавлена авторизация по логину и паролю
Анализ ключевых слов на seranking.com
Парсер для анализа ключевых слов с помощью сервиса seranking.com. Собираемые данные: частотность, стоимость клика, конкуренция, сложность, списки похожих ключевых слов, связанных ключевых слов, вопросов и ссылок органического трафика. В настройках доступен выбор источника (страна и поисковая система).
- Исправлена работа с каптчей
- Добавлена проверка выбора пресета Util::ReCaptcha2
- Небольшая оптимизация кода
Оценка страниц с использованием Lighthouse
Оценка производительности, доступности и оптимизации веб-страниц с использованием Lighthouse. В качестве источника используется сайт web.dev.
- Адаптация к изменениям на источнике
Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!
|
|
|
|
|
| Новая тема |
Написать ответ |
ГЛАВНАЯ
~ РЕКЛАМА И ОБЪЯВЛЕНИЯ
| |
| На страницу Пред. 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11 ... , 13, 14, 15, 16, 17, 18, 19, 20, 21, 22 След. |
|
|
|
