SEO форум

Здесь вы можете найти информацию и помощь по оптимизации сайта, раскрутке, созданию контента и дизайна.
Текущее время: 20 июл 2019, 16:25

     

Часовой пояс: UTC + 2 часа




Начать новую тему Ответить на тему  [ Сообщений: 64 ]  На страницу Пред.  1 ... 3, 4, 5, 6, 7  След.
Автор Сообщение
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 19 мар 2019, 14:06 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Сборник статей #7: сохранение в xlsx, работа с API и обзор методов автоматизации
7-й сборник статей. В нем мы научимся сохранять результаты в виде Excel файлов, продолжим изучение работы через API, а также ознакомимся с 5-ю способами автоматизации последовательного выполнения нескольких заданий. Поехали!

Сохранение результатов в формате Excel (.xlsx)
Вывод результатов в виде xlsx файлов (стандартный формат Excel) - это очень популярный вопрос среди пользователей A-Parser. Ранее такой возможности не было, но с добавлением поддержки Node.js модулей это стало возможным. Поэтому мы публикуем статью, в которой показан реальный пример парсинга с сохранением в Excel. Ознакомиться со всеми подробностями можно по ссылке выше.
Изображение

Работаем с API, часть 2
Это вторая часть из цикла статей по работе с A-Parser через API. В ней на примере парсинга e-mail будет рассмотрен метод addTask. Все детали - по ссылке выше.
Изображение

Обзор вариантов последовательного выполнения нескольких заданий
Очень часто возникают задачи, решение которых требует использования возможностей сразу нескольких разных парсеров и при этом результаты работы одного нужно передавать в следующий. А-Парсер - это очень гибкий инструмент, поэтому существует сразу несколько способов, как автоматизировать последовательное выполнение нескольких заданий, при этом максимально автоматизируя работу и повышая производительность. Описание всех возможных методов читайте в обзоре по ссылке выше.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 19 мар 2019, 14:34 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Сборник статей #7: сохранение в xlsx, работа с API и обзор методов автоматизации
7-й сборник статей. В нем мы научимся сохранять результаты в виде Excel файлов, продолжим изучение работы через API, а также ознакомимся с 5-ю способами автоматизации последовательного выполнения нескольких заданий. Поехали!

Сохранение результатов в формате Excel (.xlsx)
Вывод результатов в виде xlsx файлов (стандартный формат Excel) - это очень популярный вопрос среди пользователей A-Parser. Ранее такой возможности не было, но с добавлением поддержки Node.js модулей это стало возможным. Поэтому мы публикуем статью, в которой показан реальный пример парсинга с сохранением в Excel. Ознакомиться со всеми подробностями можно по ссылке выше.
Изображение

Работаем с API, часть 2
Это вторая часть из цикла статей по работе с A-Parser через API. В ней на примере парсинга e-mail будет рассмотрен метод addTask. Все детали - по ссылке выше.
Изображение

Обзор вариантов последовательного выполнения нескольких заданий
Очень часто возникают задачи, решение которых требует использования возможностей сразу нескольких разных парсеров и при этом результаты работы одного нужно передавать в следующий. А-Парсер - это очень гибкий инструмент, поэтому существует сразу несколько способов, как автоматизировать последовательное выполнение нескольких заданий, при этом максимально автоматизируя работу и повышая производительность. Описание всех возможных методов читайте в обзоре по ссылке выше.

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки :) ) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 29 мар 2019, 11:21 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Видео урок: Работа с API, часть 2
Вторая часть из цикла уроков о работе с API A-Parser. В видео на реальных примерах показана работа с методами addTask, getTaskState, getTaskConf и getTaskResultsFile.
Изображение
В этом уроке рассмотрены:
  • методы API для постановки длительных задач, а также для просмотра информации о задании
  • составление JSON для используемых API запросов
  • функция Получить API запрос
  • демонстрация работы с API, используя Postman
Документация по API: https://a-parser.com/wiki/user-api/

Также рекомендуем статью с несколькими интересными кейсами использования A-Parser от руководителя оптимизаторов в «Ашманов и партнёры» Никиты Тарасова: https://vc.ru/seo/61162-pravilno-sobrat ... niya-sayta

Оставляйте комментарии и подписывайтесь на наш канал на YouTube!


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 09 апр 2019, 14:59 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
1.2.455 - поддержка puppeteer, все методы в Net::HTTP, обновление Bypass Cloudflare
Изображение
Начиная с версии 1.2.455 мы начинаем официальную поддержку Node.JS модуля puppeteer - средства автоматизации работы с браузером Chrome(Chromium), благодаря чему возможен полноценный рендеринг DOM с поддержкой JS. В качестве примера мы выкладываем парсер, который делает скриншоты сайтов в формате PNG, доступен выбор размера скриншота. Chromium может быть запущен как на Windows, так и на Linux серверах без GUI.
Улучшения
  • Изображение SE::Bing::Images полностью переписан, добавлен сбор дополнительных данных, а также в настройках добавлен выбор региона и языка интерфейса
  • В ИзображениеNet::HTTP добавлены все методы в настройки, а также реализована возможность переопределения через заголовок Method
  • Добавлена возможность форматирования всех цифр в интерфейсе
  • JS парсеры: в this.parser.request для override добавлена опция needData, которая определяет передавать или нет в ответе data/pages[], может использоваться для оптимизации
  • JS парсеры: добавлена поддержка модулей url и ws

Исправления в связи с изменениями в выдаче

Исправления
  • Исправлена работа функции Bypass Cloudflare в ИзображениеNet::HTTP
  • Исправлена ошибка, из-за которой при определенных настройках не писался Начальный текст
  • Исправлена работа некоторых socks4 прокси
  • Исправлена ошибка в $tools.base64.encode() при работе с кириллическими символами
  • В ИзображениеShop::Amazon исправлена ошибка, при которой игнорировался домен
  • JS парсеры: исправлена редкая ошибка в работе сокетов в Node.js


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 19 апр 2019, 12:15 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Сборник рецептов #31: скидка -50% на XEvil, скриншоты страниц, подсказки Я.Маркета и правописание
31-й сборник рецептов. В нем будет показан способ создания скриншотов веб-страниц, парсинг подсказок Яндекс Маркета, а также проверка правописания в Google. Кроме этого, только до конца апреля доступна возможность купить XEvil со скидкой. Далее обо всем по порядку.

Скидка -50% на покупку XEvil для существующих и новых пользователей A-Parser
Для всех существующих и новых пользователей A-Parser действует скидка на покупку XEvil -50%!
XEvil - это простая, быстрая и удобная программа для полностью автоматического распознавания и обхода подавляющего числа капч и рекапч, без необходимости подключения каких-либо сторонних сервисов. Использование XEvil в связке с A-Parser позволяет значительно удешевить парсинг ресурсов, где необходимо разгадывать капчи/рекапчи, при этом практически не теряя в скорости.
Акция действует до конца апреля. Количество промокодов ограничено, поэтому не упустите возможность воспользоваться скидкой!
Для получения промокода на покупку XEvil пишите в тикеты.
Изображение

JS::Chrome::ScreenshotsMaker
Возможность загружать страницы с полной обработкой всех скриптов, аналогично браузеру - это один из самых популярных фичреквестов для A-Parser. Поэтому буквально недавно была добавлена поддержка Node.js модуля puppeteer, с помощью которого теперь можно получать полностью отрендеренные страницы. И мы публикуем первый пример по работе с ним - парсер для создания скриншотов веб-страниц. Больше информации, пример работы и готовый парсер - все это доступно по ссылке выше.
Изображение

Парсер подсказок Яндекс.Маркет
Еще один парсер подсказок, на этот раз из Яндекс Маркета. Собираются подсказки, их популярность (частота), тип, а также, опционально, категория (включая полный путь родительских категорий). Готовый парсер, как обычно, доступен в нашем Каталоге по ссылке выше.
Изображение

Проверка правописания в Google
Данный парсер позволяет проверить ключевые слова через поиск Google на предмет опечаток и получить исправленные варианты. Готовый пресет доступен по ссылке выше.
Изображение

Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 30 апр 2019, 14:34 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Видео урок: Работа с MySQL
Видеоурок по работе с MySQL в A-Parser. В нем на реальном примере показано как работать с базами данных MySQL, используя Node.js модуль mysql2.

Изображение

В этом уроке рассмотрены:
  • Установка и подключение модулей
  • Некоторые основы языка запросов SQL
  • Создание базы данных MySQL
  • Получение и запись данных в БД, используя JS-парсеры

Полезные ссылки:

Оставляйте комментарии и подписывайтесь на наш канал на YouTube!


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 10 май 2019, 13:53 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Сборник рецептов #32: Yahoo Answers, контакты фрилансеров и оценка ключевых слов

32-й сборник рецептов, в котором подобраны 3 JS парсера для парсинга Yahoo Answers, оценки ключевых слов и сбора контактных данных фрилансеров.

Парсер Yahoo Answers
Полноценный парсер сервиса Yahoo Answers, который по ключевым словам позволяет собирать непосредственно вопросы, ответы, а также их категории, дату создания и ссылки на страницы обсуждений.
Изображение

Парсинг контактов фрилансеров
Парсер, который ищет по ключевым словам фрилансеров и собирает их контакты. Данные собираются с сервиса fl.ru.
Изображение

Анализ ключевых слов
Парсер для сервиса seranking.com. Кейворды оцениваются по 4-м показателям: частотность, стоимость клика (CPC), стоимость трафика и KEI. Также есть возможность собирать похожие, релевантные и подсказки к начальному запросу вместе с их показателями.
Изображение

Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 21 май 2019, 13:08 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
1.2.484 - 4 новых парсера, улучшение работы и исправление существующих
Изображение
Улучшения
  • Новые парсеры:
    • ИзображениеMaps::Google - по ключевым словам собирает различные данные об организациях в заданных координатах
    • ИзображениеMaps::Yandex - по ключевым словам собирает различные данные об организациях в заданных координатах
    • ИзображениеRank::Bukvarix:: Domain - сбор ключевых слов по домену
    • ИзображениеRank::Bukvarix::Keyword - сбор ключевых слов по домену
  • Удалены 4 неактуальных парсера: Rank::SEMrush::Keyword, SE::QIP, SE::QIP::Position, Rank::MegaIndex
  • Улучшена работа ИзображениеSE::AOL
  • JS парсеры: для this.request добавлена опция data_as_buffer, которая определяет возвращать data как строку(String) или объект Buffer

Исправления в связи с изменениями в выдаче
  • В ИзображениеSE::Google::Modern исправлена работа с рекаптчами, исправлен парсинг сниппетов, а также исправлен парсинг мобильной выдачи
  • ИзображениеRank::SEMrush полностью переписан, также полностью изменился список собираемых данных, парсер возвращает только те данные, которые доступны без авторизации
  • Полностью переписан ИзображениеRank::Alexa
  • Исправлена работа ИзображениеRank::MajesticSEO, теперь обязательно требуется установка Node.js и модуля brotli
  • В ИзображениеRank::Social::Signal удалена переменная $facebook_share в связи с прекращением поддержки со стороны FB
  • ИзображениеSE::IxQuick, ИзображениеShop::AliExpress, ИзображениеSE:: DuckDuckGo::Images , ИзображениеShop::Amazon, ИзображениеCheck::RosKomNadzor

Исправления
  • Исправлена работа с запросами, содержащими пробел в ИзображениеSE:: DuckDuckGo
  • Исправлена проблема с декомпресией данных на некоторых сайтах
  • JS парсеры: исправлена работа setImmediate


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 31 май 2019, 16:17 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
Видео урок: Получение уведомлений в Telegram об окончании срока регистрации доменов
В этом видеоуроке будет показано, как настроить периодическую проверку окончания срока регистрации доменов, и получать уведомления в телеграм, если он меньше заданного количества дней.
Изображение
В уроке рассмотрено:
  • использование tools.js для написания собственных функций
  • работа с шаблонизатором Template Toolkit
  • проверка доменов через WHOIS
  • цепочки заданий
  • отправка сообщений в Telegram с помощью бота
Полезные ссылки:
Оставляйте комментарии и подписывайтесь на наш канал на YouTube!

Изображение


Вернуться к началу
 Профиль  
 
 Заголовок сообщения: Re: A-Parser 1.1 - Продвинутый Парсер Пс, Кейвордов, Контента, П
СообщениеДобавлено: 11 июн 2019, 12:47 
Не в сети

Зарегистрирован: 26 июн 2017, 09:42
Сообщений: 64
Очков репутации: 0

Добавить очки репутацииУменьшить очки репутации
1.2.503 - обновление JavaScript движка и множество улучшений
Изображение
Улучшения
  • Движок v8 обновлен до версии 7.5, помимо увеличения скорости есть множество улучшений в поддержке новых возможностей языка JavaScript
  • В ИзображениеSE::Yandex в массив $ads добавлена переменная $visiblelink, в которой содержится видимая ссылка
  • В ИзображениеRank::Bukvarix:: Domain добавлена переменная $totalcount которая содержит количество результатов
  • В ИзображениеSE::Yahoo добавлена опция Not found is error, указывающая, считать ли отсутствие результатов ошибкой

Исправления в связи с изменениями в выдаче
Исправления
  • Исправлена редкая проблема с ошибками в JS парсерах на Windows
  • В ИзображениеSE::Baiduисправлена работа функции Get full links для результатов без ссылок
  • Исправлена проблема с Decode JSON error в парсерах WordStat
  • Исправлен баг с перезагрузкой кода JS парсера при редактировании в сторонних приложениях, проблема возникла в одной из предыдущих версий
Изображение


Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 64 ]  На страницу Пред.  1 ... 3, 4, 5, 6, 7  След.

Часовой пояс: UTC + 2 часа



Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
cron

Все права защищены ©.

Использование материалов данного сайта разрешено

только с активной ссылкой на http://writetranslate.ukrbb.net/!

SEO форум: раскрутка, оптимизация и продвижение сайтов Код нашего баннера
Powered by phpBB © 2000, 2002, 2005, 2007 phpBB Group
Вы можете создать форум бесплатно PHPBB3 на Getbb.Ru, Также возможно сделать готовый форум PHPBB2 на Mybb2.ru
Русская поддержка phpBB