Парсер Yandex блогов

Если вы хотите собрать базу яндекс блогов ( yandex blog base), то предлагаю вам программку для сбора URL блогов.

<?php

error_reporting(E_ALL);

$page=1;

while(true)
{
$content = file_get_contents(”http://blogs.yandex.ru/top/?page=$page”);

preg_match_all(’/<a href=\”(.*)\” class=\”container\”/’, $content, $piece);

//print_r($piece[1]);

$fl = fopen(”links.txt”, “a+”);
foreach($piece[1] as $v)
{
fputs($fl, $v.”\n”);
}
fclose($fl);

echo(”Complite page = “.$page.”, links = “.count($piece[1]).”\n”);
$page++;
}

?>

Программу можно запускать там, где есть php в режиме cgi. Примерно так:

php-cgi yandex_blogs.php

База блогов Яндекса ( не полная) здесь.

Популярность: 61%

Обсуждение

Ваш отзыв

Имя *

E-mail *

Сайт

Сообщение

Подтверждаю, что я не спам-бот