Проверка возраста сайта

Наряду с PR, возраст сайта является еще одним важным параметром, который нужно знать сеошнику для принятия правильного решения при выборе площадок для размещения ссылок. Как и в случае с PR, существует много сервисов, с помощью которых можно проверять данный параметр. Но их подавляющее большинство позволяет проверять только один сайт за раз. Сейчас с помощью Datacol мы автоматизируем работу с одним из таких сервисов.

Задача »

Сделать приложение для массовой проверки возраста сайтов (по домену) через сервис http://www.seologs.com/dns/domain-check.html.

Массовая проверка возраста сайта

При проверке параметр домен передается в виде POST данных. При этом сервис возвращает интересующие нас данные: возраст сайта и дату регистрации.

Проверка возраста сайта: работа сервиса

Datacol должен будет собирать эти параметры и сохранять в CSV файл следующего вида:

Массовая проверка возраста сайта: CSV файл

Демонстрация »

Работу данного профиля настроек вы можете потестировать сразу после установки Datacol. Демонстрационный профиль настроек называется DomainAgeMassChecker.

Проверка возраста сайта: демонстрация

Поскольку демо версия Datacol не умеет сохранять результаты в файл, для просмотра результатов после запуска парсера необходимо перейти на вкладку Результаты.

Проверка возраста сайта: полученные результаты

Реализация »

Реализация чекера возраста сайтов с помощью Datacol аналогична реализации PR чекера.

В общих настройках укажем достаточное количество потоков для того, чтобы проверка происходила быстро, но при этом не сильно нагружала ресурсы сервиса источника.

Массовая проверка возраста сайта: Общие настройки

В настройках начальных URL с использованием блока добавления переменных можно быстро сгенерировать POST запросы к сервису для всех интересующих нас доменов.

Массовая проверка возраста сайта: Начальные URL

На вкладке Сбор данных настраиваем 3 поля: для сохранения домена, который мы проверяем, для сохранения даты регистрации домена и для сохранения его возраста. Подробно ознакомиться с настройками для каждого поля можно зайдя в настройки парсера (для этого нужно дважды кликнуть на нем в главном окне программы).

Массовая проверка возраста сайта: Сбор данных

На вкладке Навигация настраиваем один профиль для сбора данных (ведь нам нет смысла собирать ссылки и двигаться вглубь сайта после получения результатов проверки для домена).

Массовая проверка возраста сайта: Навигация

В настройках экспорта реализуем описанный в поставленной задаче формат.

Массовая проверка возраста сайта: Экспорт данных

Файл профиля настроек для парсера контента по ключевикам можно просмотреть здесь. Его также можно сохранить себе на компьютер и скопировать в папку с профилями настроек Datacol (ее можно открыть нажав Ctrl+E в главном окне программы). Это на случай, если вы удалили демонстрационный профиль, который создается при установке программы.