Проверка возраста сайта
Наряду с PR, возраст сайта является еще одним важным параметром, который нужно знать сеошнику для принятия правильного решения при выборе площадок для размещения ссылок. Как и в случае с PR, существует много сервисов, с помощью которых можно проверять данный параметр. Но их подавляющее большинство позволяет проверять только один сайт за раз. Сейчас с помощью Datacol мы автоматизируем работу с одним из таких сервисов.
Сделать приложение для массовой проверки возраста сайтов (по домену) через сервис http://www.seologs.com/dns/domain-check.html.
При проверке параметр домен передается в виде POST данных. При этом сервис возвращает интересующие нас данные: возраст сайта и дату регистрации.
Datacol должен будет собирать эти параметры и сохранять в CSV файл следующего вида:
Работу данного профиля настроек вы можете потестировать сразу после установки Datacol. Демонстрационный профиль настроек называется DomainAgeMassChecker.
Поскольку демо версия Datacol не умеет сохранять результаты в файл, для просмотра результатов после запуска парсера необходимо перейти на вкладку Результаты.
Реализация чекера возраста сайтов с помощью Datacol аналогична реализации PR чекера.
В общих настройках укажем достаточное количество потоков для того, чтобы проверка происходила быстро, но при этом не сильно нагружала ресурсы сервиса источника.
В настройках начальных URL с использованием блока добавления переменных можно быстро сгенерировать POST запросы к сервису для всех интересующих нас доменов.
На вкладке Сбор данных настраиваем 3 поля: для сохранения домена, который мы проверяем, для сохранения даты регистрации домена и для сохранения его возраста. Подробно ознакомиться с настройками для каждого поля можно зайдя в настройки парсера (для этого нужно дважды кликнуть на нем в главном окне программы).
На вкладке Навигация настраиваем один профиль для сбора данных (ведь нам нет смысла собирать ссылки и двигаться вглубь сайта после получения результатов проверки для домена).
В настройках экспорта реализуем описанный в поставленной задаче формат.
Файл профиля настроек для парсера контента по ключевикам можно просмотреть здесь. Его также можно сохранить себе на компьютер и скопировать в папку с профилями настроек Datacol (ее можно открыть нажав Ctrl+E в главном окне программы). Это на случай, если вы удалили демонстрационный профиль, который создается при установке программы.