foka_bs Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Подскажите пожалуйста есть ли в природе качалки, которые умеют закачивать веб-странички по тегам. Поясню.   Например сама страница весит 100 кило, но большую половину из этого мне не надо, а всего лишь 10-20%. Я качаю одну страничку (все они однотипные) - нахожу уникальные тэги (начало и конец - например <div> и </div>) и хочу скачать только тот кусочек, который стоит между этими тэгами. Но чем скачать - проблема. Подскажите, пожалуйста средство. Всего записей: 20 | Зарегистр. 16-06-2007 | Отправлено: 22:21 21-06-2007

Cheery .:МордератоР:. Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору foka_bs Цитата: и хочу скачать только тот кусочек, который стоит между этими тэгами страницу все равно скачать придется.. по крайней мере до </div> ---------- Away/DND Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 22:23 21-06-2007

foka_bs Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Пускай хотя бы до </div>. То что интересует лежит как раз по-середине. Но всё таки чем же ? Всего записей: 20 | Зарегистр. 16-06-2007 | Отправлено: 17:39 22-06-2007

foka_bs Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору WatzNew может. Согласен. Но только показывать. Да и пакетом качать около 1000 или 2000 страничек, увы это сколько времени надо Плюс на каждую страничку дать линк. Наверное это не вариант. Я немного поправлюсь - надо качать пакетом. Один файл весит около 100 кило. После черновой обработки не больше 20-и. Разница ощутима, тем более на диалапе Что такое Curl - ссылку если можно.   Побайтно не вариант, но попробую Wget. но тут тоже надо задавать ссылки ( а списка нету).   Мне кажется по тэгам лучше и надёжнее.   Может ещё какие есть варианты Всего записей: 20 | Зарегистр. 16-06-2007 | Отправлено: 21:38 22-06-2007

foka_bs Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору WatZNew только что попробовал. Сразу же снёс. shtml-не берёт Wget - хоть у него и есть функция "Квота", но она почему-то у меня не работает - всё равно качает целый файл, или надо где-то ещё копать. Цитата: По тэгам? Абсурд. Почему же абсурд WatzNew - пример. Пробую HTTrack, но он  в настройке сложноват.   Неужели больше ничего нету , кроме этих двух прог ? А кто ещё умеет побайтно качать ? Всего записей: 20 | Зарегистр. 16-06-2007 | Отправлено: 22:37 22-06-2007

foka_bs Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Так надо же качать много !!! Т.е. я задаю только http://www.moysait /soft/ и всё. Дальше должна работать качалка. Вообще сейчас качаю Offline Explorer'ом. А как это сделать оптимизаторами траффика ? Да и оптимизация будет небольшая 20-30%, а по времени тоже самое   Как я понял вариантов больше нету ?   P.S. Curl - командная строка, как Вы представляете более 100 с лишним ссылок да ещё и с заданными параметрами набирать в командной строке ? Не пойдёт - не удобно - вчерашний день.   Добавлено: Вообщем ничего я не нашёл. Но спасибо pom205 за наводку. Поставил Toonel http://www.toonel.net и закачка фактически в 2-а раза ускорилась, а трафик жмёт на 40%-50% - почти то что надо. А WebWarper мне не нравится. Так у него привязка к ослику, которым я совершенно не пользуюсь. Всего записей: 20 | Зарегистр. 16-06-2007 | Отправлено: 23:50 22-06-2007

A_OLENI_LUCHSHE Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата:  Например сама страница весит 100 кило, но большую половину из этого мне не надо, а всего лишь 10-20%. Я качаю одну страничку (все они однотипные) - нахожу уникальные тэги (начало и конец - например <div> и </div>) и хочу скачать только тот кусочек, который стоит между этими тэгами. Но чем скачать - проблема. Есть вариант, но это будет не совсем программа. Короче говоря всем вашим условиям удовлетворяет скрипт NewsGrabber - он как раз может текст выдирать между тегами. Поставить скрипт на хост, настроить и выдирать им - а уже результаты с этого хоста сливать любым оффлайновым браузером. А чтобы хост сам себя окупал повесьте на этот сайт Бегуна или AdSense для буржунета - еще и денег соберете. Или не обязательно на хост - если канал у вас нормальный(ну не диалап), поднимите на своем компьютере на Денвере этот скрипт - и получится у вас оффлайновый браузер с требуемой вами функциональностью. Всего записей: 986 | Зарегистр. 05-01-2004 | Отправлено: 06:10 23-06-2007 | Исправлено: A_OLENI_LUCHSHE, 06:14 23-06-2007

foka_bs Newbie Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: скрипт NewsGrabber   Интересная штучка А под Апач с дома он потянет ? Всего записей: 20 | Зарегистр. 16-06-2007 | Отправлено: 13:09 23-06-2007

A_OLENI_LUCHSHE Advanced Member Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору Цитата: А под Апач с дома он потянет ?   Да. Всего записей: 986 | Зарегистр. 05-01-2004 | Отправлено: 13:23 23-06-2007

Компьютерный форум Ru.Board » Компьютеры » Программы » Оффлайн-браузер по тегам

Переход по форумам  Закладки   » Компьютеры Цифровое изображение Программы Microsoft Windows UNIX Другие OS Hardware В помощь сисадмину Прикладное программирование Игры Форумные игры   » Интернет Web-программирование В помощь вебмастеру Графика Хостинг Зацените-ка!   » Тематические Ikonboard v.2 Ikonboard v.3 Invision Board Другие форумы PHP-Nuke и другие порталы Мобила   » Общие Спорт Флейм Темы по региональным встречам Музыка и Кино Юмор Литература и Живопись   » Ru.Board Новости Помощь по форуму   » Андеграунд eBookz Варезник Раздачи и акции Мобильный варезник Андеграунд Игры и фильмы   » Специальные Тестирование