Форум сетевых администраторов Страницы (2): [1] 2 »
Показаны 22 сообщений на этой странице

Форум сетевых администраторов (http://netadmin.ws/forum/index.php)
- Поиск и обмен (http://netadmin.ws/forum/forumdisplay.php?forumid=27)
-- ПОдскажите хорошую грабилку (http://netadmin.ws/forum/showthread.php?threadid=4226)


Помещено Sergey_pol 05-02-2003 в 07:22:

ПОдскажите хорошую грабилку

ПОдскажите, пожалуйста, хорошую грабилку, которая бы могла грабить страничку чужую от заданного тега до тега, perl или php


Помещено Ilia 05-02-2003 в 16:34:

<?
$GrabURL = "http://site/page.html";
$GrabStart = "С кокого слова грабить";
$GrabEnd = "По кокое слово грабить";

$file = fopen("$GrabURL", "r");
$rf = fread($file, 20000);
$grab = eregi("$GrabStart(.*)$GrabEnd", $rf, $printing);

fclose($file);
echo $printing[1];
?>

Всё это сварачиваешь в file.php и всё

__________________
www.tmncity.ru - Тюменский информационно-развлекательный портал.
www.h5.ru - хостинг


Помещено Sergey_pol 06-02-2003 в 00:14:

он ТЕГИ поддерживает или только слова??? насколько я понимаю не поддерживает, да? Если поддерживает то как быть с кавычками? допустим надо грабить с конструкции:
<img src="/public/banners/gim.jpg" width="153" height="54" border="0">.
А у тебя уже есть ковычки в $GrabStart = "С кокого слова грабить" в этом и весь глюк ;-(((
У меня очень похожий скрипт был, но в связи с вышеизложенным он не подошел или я просто не понял как исправить глюк этот...
У кого нить еще есть предложения???


Помещено Sergey_pol 11-02-2003 в 02:46:

ТАК ЧТО - НИКТО НЕ ПОДСКАЖЕТ ???????


Помещено Nevermind 11-02-2003 в 06:26:

Sergey_pol,
Ты вообще представляешь, что у тебя получится в переменной $file из приведенного выше кода? Ð_то я к вопросу о "поддержке" тэгов...

А кавычки можно элементарно экранировать - <img src=\"bla-bla\">


Помещено Sergey_pol 11-02-2003 в 07:06:

как их можно экранировать, когда САЙТ ЧУЖОЙ. а потом я прекрасно себе представляю, там будет кусок htmlя - то что мне и надо...


Помещено Tagore 11-02-2003 в 18:13:

Ilia
Ð_то ты сам придумал? Типа шутка, да??
Всем стало смешно, онако.

__________________
Международное брачное агенство в Сибири.


Помещено Sergey_pol 12-02-2003 в 00:28:

не понял тебя? что не так?


Помещено Sergey_pol 12-02-2003 в 06:58:

Nevermind кстати с экранированием вроде все работает, сначала просто не понял, спасибо...


Помещено Ilia 13-02-2003 в 17:27:

Tagore , что тебе смешным показалось ?

__________________
www.tmncity.ru - Тюменский информационно-развлекательный портал.
www.h5.ru - хостинг


Помещено Tagore 13-02-2003 в 18:09:

Ilia
а поробуй достать содержание этого файла ...

<?
$GrabURL = "http://205.242.21.21/webedit/config.php";
$GrabStart = "<?";
$GrabEnd = "?>";

$file = fopen("$GrabURL", "r");
$rf = fread($file, 20000);
$grab = eregi("$GrabStart(.*)$GrabEnd", $rf, $printing);

fclose($file);
echo $printing[1];
?>

__________________
Международное брачное агенство в Сибири.


Помещено [PsyHoZ] 13-02-2003 в 18:31:

Tagore
ты сам знаеш что ты хочеш сказать?

__________________
Любовь как костер - не кинешь палку - потухнет
---------------------------------------------------
Ð_ротические и порно рассказы - Ero-Lib.Net
Израильский портал на русском языке - IsraWeb.Net


Помещено Sergey_pol 14-02-2003 в 00:17:

Tagore
Типа подловил чтоли ;-) зачем ограничиваться"<" или ">"
пиши <BODY> и </BODY> тогда все нормально будет. Здесь же нет ограничений на длину текста с которого начинаешь захват. пиши что то уникальное, что далее не повторяется, иначе скрипт грабит с первого и заканчивает последним тегом. как правило кусок который надо стянуть всегда чем-то да обозначен, но конечно бывают и исключения.


Помещено Tagore 14-02-2003 в 13:59:

Sergey_pol
То, что между <BODY> и </BODY> - это и так можно взять, а то что в пхп коде, этому не быть. Значит скрипт не имеет место быть.

__________________
Международное брачное агенство в Сибири.


Помещено Kanarsky 14-02-2003 в 22:09:

www.arvidbux.nl - возьмите там нормальный граббер...

Kanarsky добавил 14-02-2003 в 22:22:04:
Сори, давно там не был, помер он...

Вот код:

PHP:


<? 
$url 
= "здесь урл сайта-донора"; // Trailing slash when not using filename 
$file = "content.inc"; // file to write to. remember to chmod 777 to not get errors 
$unique_start = "Отсюда начинаем граббить"; // Where to begin to grab 
$unique_end = "Здесь заканчиваем"; // Where to end the grab 

###
## Ниже ничего не редактировать
###

ini_set('max_execution_time', '0'); 
flush (); 

// fetch domein from url 
$fetch_domain = parse_url($url); 

$fetch_domain = $fetch_domain[host]; 

// Host checking code 
$socket_handle = fsockopen("$fetch_domain", 80, $error_nr, $error_txt,30); 
if(!
$socket_handle) 
{ 

print(
"Cannot make a connection to: $fetch_domain and therefore cannot collect your requested data"); 
$contents = implode("",@file( $file ) ); 
echo 
$contents; 
exit; 
} 

$fd= fread(fopen("$url", "r"), 100000); 

if (
$fd) 
{ 
$start= strpos($fd, "$unique_start"); 
$finish= strpos($fd, "$unique_end"); 
$length= $finish-$start; 
$code=Substr($fd, $start, $length); 
} 

###
## Ниже ничего не редактировать
###

// $code = preg_replace("new code", "old code", $code); 
// uncomment the above line to edit the output 

echo $code; 
$tmpfile = fopen($file,"w+"); 
$fp = fwrite($tmpfile,$code); 
fclose($tmpfile); 
flush (); 
?>



Дополнительно создать пустой файл content.inc в той же папке...

__________________
Садись в ногах! Правды нет!


Формат времени GMT. Текущее время 09:47. Страницы (2): [1] 2 »
Показаны 22 сообщений на этой странице

Powered by: vBulletin Version 2.2.4
Copyright © Jelsoft Enterprises Limited 2000, 2001.