Мы решили дополнить свою коллекцию парсеров выдачи поисковых машин ещё одним и представляем вашему вниманию парсер Рамблера.
Это скрипт, работает аналогично двух предыдущим парсерам:Яндекса и Гугл.
Скрипт берёт ключи из файла с поисковыми фразами и вводим их в поле поиска на сайте rambler.ru. Затем разбирает поисковую выдачу Rambler на ссылки. Эти ссылки выводит в окно отладки для наглядности работы скрипта.
Как и предыдущие скрипты этот скрипт является заготовкой под любой ваш скрипт, который будет работать с выдачей Rambler.
На входе скрипт принимает файл с поисковыми фразами в формате:
human emulator
парсер human emulator
парсер рамблер xhe
xhe парсер
rambler parser
Настройки скрипта:
// файл с данными для скрипта
$keys = file("data/keys.txt");
// глубина прохода в поисковые результаты
// со скольких страниц собирать товары прежде чем перейти к следующему
// если нужно собирать все товары надо просто задать этот параметр = -1
$cnt_pages = 10;
Сам скрипт выглядит следующим образом:
navigate("rambler.ru");
// задаём слово в поиск
$input->set_value_by_name("query",$key);
$input->click_by_name("query");
// нажмём пробел для отключения всплывшей подсказки
$keyboard->send_key(32,true);
// нажать enter
$keyboard->send_key(13,true);
// ждём
sleep(1);
// обнулим перед следующим проходом
$crnt_page=1;
while(true)
{
// получим все ссылки на сайты заключённые в тэгах
$sites=$webpage->get_body_inter_prefix_all("b-serp__list_item_title","");
// получим массив ссылок из строки
$sites=explode("
",$sites);
// пройдёмся по всем полученным ссылкам
for($i=0;$iquit();
?>
Скрипт написан 4.10.2012 в Human Emulator 4.4.19 Advanced.
На момент публикации статьи 5.10.2012 скрипт был рабочий.