Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Интернет » В помощь вебмастеру » Посоветуйте скрипт граббера...

Модерирует : Cheery

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2

Открыть новую тему     Написать ответ в эту тему

Sam2001



Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Собственно сабж.
Кто применяет скрипты грабберов знают, как хорошо было бы если бы... они могли работать через прокси. А может есть такие?
Кто знает, поделитесь, пожалуйста

Всего записей: 34 | Зарегистр. 11-07-2002 | Отправлено: 20:02 03-07-2003
Svarga

Moderator
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Sam2001
Чтоб через проксю работали, не встречал.
А так, загляни для начала сюда:
http://forum.ru-board.com/topic.cgi?forum=31&topic=0240#1

----------
away.

Всего записей: 4161 | Зарегистр. 25-06-2002 | Отправлено: 01:59 04-07-2003
exMIB



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Есть скрипт manlix_site_grabber_v1_0.zip _http://myfiles.pp.ru/upload/manlix_site_grabber_v1_0.zip
 
Manlix Site Grabber, версия: 1.0  
 
Граббер, скрипт сам залазит на нужный Вам сайт и выдерает нужную информацию.
 
Возможности:  
- Выдерает информацию с чужих сайтов.  
- Управление скриптом, через веб панель, защищена паролем.  
- Корректная работа скрипта, при error_reporting=E_ALL  
- Корректная работа скрипта, при register_globals=Off  
 
У кого есть другие готовые неплохо бы глянуть

Всего записей: 3300 | Зарегистр. 27-09-2001 | Отправлено: 02:45 04-01-2005
abody

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
exMIB спасибо большое, заценю

Всего записей: 3 | Зарегистр. 24-09-2004 | Отправлено: 01:10 05-01-2005
exMIB



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Чем кто пользуется ещё ?

Всего записей: 3300 | Зарегистр. 27-09-2001 | Отправлено: 02:12 07-11-2005
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
$id = fsockopen ("localhost", 17000, $errno, $errstr);  
fputs($id, "GET http://localhost:17000/?text=text HTTP/1.1\r\n");
fputs($id, "Accept: */*\r\n");
fputs($id, "Accept-Language: ru\r\n");
fputs($id, "Accept-Encoding: gzip, deflate\r\n");
fputs($id, "Host: localhost\r\n");
fputs($id, "Referer: http://top.local/index.html\r\n");
fputs($id, "Ua-Cpu: x86\r\n");
fputs($id, "User-Agent: Mozilla/4.0 (compatible; MSIE 6.0; Windows NT 5.2; SV1; .NET CLR 1.1.4322)\r\n");
fputs($id, "X-forwarded-For: 192.168.0.10\r\n");
fputs($id, "X-real-Ip: 192.168.0.10\r\n");
fputs($id, "REMOTE_ADDR: 192.168.0.10\r\n");
fputs($id, "REMOTE_PORT: 49777\r\n");
fputs($id, "Connection: Keep-Alive\r\n");
fputs($id, "\r\n");
while (!feof($id))  
{  
  echo fgets ($id,128);  
}  
fclose ($id);  

Вот этот скрипт специально для выдерания, но что то он не совсем конкретно работает, есть человек который сможет помочь мне в этом аспекте?

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 18:54 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo

Цитата:
но что то он не совсем конкретно работает

телепатов нет - расшифруй

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 18:55 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery  
вобщем совсем не работает.
По поводу  Manlix Site Grabber не работает. Админка работает все ок. А вот index.php не работает, выдает следующее:
Warning: Unknown modifier 'h' in z:\home\mysite.tst-sib.net\www\grabber\index.php on line 58
58 строка содержит следующе:
preg_match("/".$CaseFile[0]."/is",$result,$array);
Вчем может быть проблема?

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 19:26 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo

Цитата:
Вчем может быть проблема?

в том, что содержимое переменной $CaseFile[0] содержит /h, которое заканчивает регулярное выражение и выдает эту ошибку о неизвестном модификаторе h

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 19:34 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery
хм... Что ты написал честно говорю непонимаю. Я не вижу что $CaseFile[0] содержит /h, Ты ведешь к тому что 58 срока должна быть написанна по другому?

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 19:39 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo

Цитата:
Я не вижу что $CaseFile[0] содержит /h

сделай строкой выше echo $CaseFile[0];
и смотри
 

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 19:43 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery
Что я должен был увидеть? Кроме того что срока с 58 на 59 переименовалась больше нечего.
Объясни проблема в том что я что то не правельно указываю в скрипте или это в скрипте проблема?

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 19:47 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo

Цитата:
Объясни проблема в том что я что то не правельно указываю в скрипте или это в скрипте проблема?  

в содержимом переменной выше. я не знаю, откуда она у тебя заполняется и поэтому ничего сказать не могу.


----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 19:48 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery  
Пробовал много сайтов в том числе и сайт который был записан типо примера, сайт производителя скрипта, но результат одинаков. Выдает ошибку. Если не сложно скачай скрипт и посмотри будет ли ошибка.

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 19:56 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo
ну.. inc/case.inc.dat
что там? выражение берется именно оттуда

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 20:00 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery
В файле указанно: <html>(.*)<\/html>

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 20:05 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo

Цитата:
В файле указанно: <html>(.*)<\/html>

вот тебе и /h
по какой то причине игнорируется \/ и берется чисто /h
замени в строке 58
Цитата:
preg_match("/".$CaseFile[0]."/is",$result,$array);

на preg_match("#".$CaseFile[0]."#is",$result,$array);

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 20:21 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery
Большое тебе спасибо, работает.
 
Добавлено:
У меня возник вопрос по эксплотации скрипта, возможно ли такое что бы граббер использовал динамические url? Т.е. например мне нужно что бы граббер вставлял в дизайн часть кода, например поисковой машины yandex, url её вида http://www.yandex.ru/yandsearch?text=, где yandsearch?text= это часть статистическая, а что потом это динамическая т.е. запрос. Можно ли через данный граббер сделать такое?

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 20:50 02-01-2007
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Enzo

Цитата:
У меня возник вопрос по эксплотации скрипта, возможно ли такое что бы граббер использовал динамические url?

можно.. берешь и даешь ему сформированный URL

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 21:25 02-01-2007
Enzo

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Cheery
Подробнее можешь обьяснить? В настройках граббера я как и положено указываю сайт, порт,  документ к которому нужно подключится: yandsearch?text=, далее жму финишь, после захода на граббер у меня появляется пустой поисковой запрос и все. После того как я вожу запрос он меня уже переносит на yandex, что мне не нужно.

Всего записей: 92 | Зарегистр. 08-01-2006 | Отправлено: 21:45 02-01-2007
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2

Компьютерный форум Ru.Board » Интернет » В помощь вебмастеру » Посоветуйте скрипт граббера...


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru