Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » MetaProducts Offline Explorer™ / Portable Offline Browser™

Модерирует : gyra, Maz

Widok (02-08-2010 12:06): Лимит страниц. Продолжаем здесь.  Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96

   

Widok



Moderator-Следопыт
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Offline Explorer (OE) - офлайн-браузер. Программа предназначена для загрузки целых сайтов и веб-страниц на жёсткий диск компьютера.
 

         

Выпускается в четырёх версиях (сравнение):


Shareware. Длительность бесплатного периода - 30 дней.

MetaProducts Offline Explorer (OE) is a Windows 9x/ME/NT/2000/XP/2003 program that allows you to download an unlimited number of your favorite Web and FTP sites for later offline viewing, editing, browsing.
(HTTPS, RTSP, PNM, MMS and MMST downloads are supported in Offline Explorer Pro and Enterprise versions.)
Скрипты расширяющие возможности программы:
Второе дерево проектов (если вам не хватает одного).
Показать проекты с описаниями (выделенные цветом или со значком) - автор скрипта Rush.
Статьи об Offline Explorer:
FAQ темы
!советы, предостережения
!!! Для корректного копирования проектов из этой темы, устанавливаем и пользуемся vbs-модулем от ViSiToR, или же скриптом от Nagual
(после копирования переходим в дерево Offline Explorer и жмём Ctrl+V)
!!! Просьба постить проекты между тегами [more][/more], чтоб не портить читабельность темы.
 
Родственные темы:
Сравнение оффлайн-браузеров
TextPipe
Предыдущая часть темы

Всего записей: 24190 | Зарегистр. 07-04-2002 | Отправлено: 18:44 17-01-2007 | Исправлено: Zakkazak, 18:47 12-03-2010
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Тут нужно поставить уровень побольше. Насчет левых файлов - приведите пример из нескольких ссылок того, что было не нужно.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 12:23 21-10-2009
Tinca

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
OlegChernavin
Спасибо за ответ. Постараюсь описать подробнее. Итак цель следующая: скачать с сайта www.securelist.com описания вирусов. Страница с описанием имеет вид типа http://www.securelist.com/ru/descriptions/6885994/Worm.Win32.Sober.q
Создаю проект со свойствами  
 

Код:
Stream 1.2 File
[Object]
OEVersion=Enterprise 5.3.0.2908
Type=0
IID=7017
Caption=http://www.securelist.com/ru/descriptions/
URL=http://www.securelist.com/ru/descriptions/
Lev=100
Weekday=257
LimTSize=10000
LimNumber=5000
LimTime=100
EnableForms=True
FTText.Exts=htmlhtmaspaspxjspstmstmlidcshtmlhtxtxttextxspxmlrxmlcfmwmlphpphp3
FTImages.Exts=gifjpgjpegtiftiffxbmfifbmppngipxjp2j2cj2kwbmplwf
FTVideo.Exts=mpgavianimpegmovflvfliflcvivrmramrvasfasxwmvm1vm2vvobsmil
FTAudio.Exts=wavriffmp3midmp2m3uravocwmaape
FTArchive.Exts=ziparcgzzarjlhalayleirarcabtarpakacejarpdftgz
FTUDef.Exts=jscssssivbsdtdxslswfclassent
FTText.B=ooxooo
FTImages.B=ooxooo
FTVideo.B=ooxooo
FTAudio.B=ooxooo
FTArchive.B=ooxooo
FTUDef.B=ooxooo
FTOther.B=ooxooo
FTSizes=0,0,0,0,0,0,0,0,0,0,0,0,0,0,0,3,3,3,0,3,0
RSrvsBx=1
RPathBx=1
RProt=255
LastStart=180:135:70:14:114:149:227:64:
LastEnd=62:244:84:0:114:149:227:64:
LastStarted=21.10.2009 13:32:30
LastEnded=21.10.2009 13:30:03
S200=180
S304=63
SPar=180
SSav=180
SLast=200
SSiz=3294675
SMdf=180
LFiles=477
LSize=3300692
Flags=1
ImgDim=0,0,0,0
PrevURL=http://www.securelist.com/ru/descriptions/
ExploreDirs=True
ExploreSSMaps=True
ParseComplexScripts=True
LIndexed=False
IndexFiles=False

 
Теперь вроде все скачивается как надо. То есть создается каталог C:\download\www.securelist.com\ru\descriptions, а в нем каталоги вида 44444, 53637464, 4623531 и т.д. То есть вроде все как надо. Однако таких описаний всего полторы сотни, хотя на самом деле их должно быть гораздо больше.
Из "левых" файлов создаются также папки "www.google-analytics.com", "bin.clearspring.com", в принципе это не критично.
Как заставить offline explorer скачать остальные файлы?

Всего записей: 52 | Зарегистр. 02-07-2007 | Отправлено: 13:52 21-10-2009 | Исправлено: Tinca, 14:03 21-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Он будет идти по всем ссылкам, которые найдет на этих страницах. Хотя, как я понял, основное количество доступно через форму поиска. В ней нудно ввести слово или фразу из описания и можно получить ссылки на соответствующие определения.
 
Фактически, нужно перебрать все возможные слова, делая для каждого запрос. Это нереально автоматически.
 
Можно попробовать другой способ - во встроенном браузере ввести в форму поиска слово троян и нажать кнопку ПОИСК с нажатыми клавишами Alt+Ctrl - создастся новый проект для закачки этих определений.
 
То-же сделать со словом вирус. Ну и подумать, какие еще слова могут быть в описаниях всех других.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 14:16 21-10-2009
WwWork



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
день добрый, Олег.
--
машина:
1 гб озу
ВИНТ 250
ПРОЦ 2,7 ггц.
--
Качаю уже 15-20 дней  сайт, скачало порядка 700к страниц. Я постоянно сохраняюсь  в фаил и восстанавливаю загрузку  с фаила, далее  продолжаю качать. Но ОЕ Дико тормозит! К моменту когда приходишь с утра к примеру, он скачал 15-30к страниц, но в низу в статусе пишется что в процессе парса 8к страниц.
Я так понял что софтинка не расчинана на такое большое количество страниц  или надо памяти и проц по больше?

Всего записей: 16 | Зарегистр. 12-04-2007 | Отправлено: 14:52 21-10-2009 | Исправлено: WwWork, 14:53 21-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Это зависит и от процессора и от скорости диска. Оптимально будет поставить задержку между закачками 1-2 секунды, чтобы ОЕ успевал обработать скачанные файлы.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 13:04 22-10-2009
WwWork



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Спасибо за ответ.
Ставлю паузу и 4-5 сек (10-20 потоков к примеру) всё равно виснет, приходится по пол дня ждать пока отпарсит существующее, потом сохранять проект в фаил.

Всего записей: 16 | Зарегистр. 12-04-2007 | Отправлено: 16:02 22-10-2009 | Исправлено: WwWork, 16:02 22-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Медленный парсинг может быть если включено вычисление скриптов (Свойства проекта - Обработка).

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 17:51 22-10-2009
WwWork



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Насколько я понял ОЕ имеет свою локальную базу или кеш загруженных страниц.
При закачке он сохраняет туда идентификатор загруженной страницы или её url.
а когда их много (UP to 700к) ему трудно выполнять эти действия.  
--
Чтобы облегчить участь машины и ОЕ, я удалил старый проект,  перед этим сделал -> сохранить очередь (~300к стр) в файл., создал  новый проект  с другим названием, загрузил туда фаил очереди.
Но проект не грузится весь - загружает 3, ссылки и пишет, что проект загружен, когда смотришь в файл очереди, он пуст.
--
как мне возобновить закачку прерванную?
--

Всего записей: 16 | Зарегистр. 12-04-2007 | Отправлено: 14:41 23-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Такой способ не пройдет - восстановление очереди возможно только с оригинальным проектом. В Вашем случае, лучше всего загружать по Ctrl+F5 - не загружать существующие файлы.
 
Локальная база файлов проекта называется Картой в ОЕ. Кроме того, что она занимает оперативную память, побочных действий от нее нет - замедлять загрузку она не должна.
 
Если новый проект загружает только 3 ссылки - проверьте его настройки, возможно недостаточен уровень. Можно увидеть детали с помощью лога (журнала - Ctrl+Q).

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 17:01 23-10-2009
korosya

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Обнаружил в последнее время такую вещь: Запускаю любой проект (как старый, тик и вновь созданный) - он начинает качиться- скачиваются файлы, добавляются в очередь. И внезапно скачка останавливается, как буд-то была нажата кнопка "Остановить" - на значке проекта отображается крестик, внизу пишется "загрузка остановлена - столько-то файл(ов)", в списка загружаемых адресов в колонке "Статус" надпись "Aborted", в очереди нет ни одного файла. Переустановил программу, но проблема не исчезла.
В чём может быть затык?

Всего записей: 1005 | Зарегистр. 19-07-2003 | Отправлено: 20:33 25-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Бывает из-за кряков такое.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 11:04 26-10-2009
WwWork



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
OlegChernavin, спасибо.
А что есть мне надо загрузить только фаилы вида read.php, а фаилы вида articles, category ненадо.
Таким образом чтобы добраться до фаилов надо пройти несколько уровней:
category.php -->articles.php-> read.php
Если поставить фильтр загружать только read.php или загружать только read.php а category.php  и articles.php не загружать, то он загружает только главную а дальше не идёт.
Я делал примерно так в  меню Фильтров фаилов указвал text и выбирал загржать url используя URL ФИЛЬТРЫ, а уже в url фильтрах указывал что не нужны только такой фаил а другие ненужны. О_о
 
Как сделать так чтобы фаилы *articles* и *category* парсились нно не загружались?

Всего записей: 16 | Зарегистр. 12-04-2007 | Отправлено: 17:44 26-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Как понять - парсились, но не загружались?
 
Парсинг - это обработка файла для вытаскивания ссылок из него. Ну и еще изменение ссылок для оффлайн-просмотра. Не загружая файл не вытащить из него ссылки. Поэтому category.php и articles.php тоже нужно разрешить в фильтрах, чтобы они загрузились и из них были вытащены ссылки уже на нужные read.php.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 11:00 27-10-2009
WwWork



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
я имел ввиду чтобы он парсил их для обнаружения новых ссылок но на винт не писал, а писал только read.php.
--
кроме того наблюдения по ходу для тех кто пока не в теме, этой тулзой лучше качать с нормальной машины с винтом минимум 7200 оборотов и кешем нормальным. Какой бы ноут небыл бы мощным, всё равно стационарный комп быстрее качает.

Всего записей: 16 | Зарегистр. 12-04-2007 | Отправлено: 14:30 27-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Тогда добавьте в поле адресов проекта:
 
DeleteAfterParsing=category.php,articles.php

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 11:40 28-10-2009
WwWork



Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Спасибо попробую!

Всего записей: 16 | Зарегистр. 12-04-2007 | Отправлено: 11:05 30-10-2009
AZA_N

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
del (с варезником перепутала)

Всего записей: 853 | Зарегистр. 10-11-2007 | Отправлено: 13:24 30-10-2009 | Исправлено: AZA_N, 13:26 30-10-2009
losovs

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
почему не работает поиск на русском языке в CHM файле созданном offline explorer. С английским все в порядке

Всего записей: 2 | Зарегистр. 30-10-2009 | Отправлено: 20:25 30-10-2009
OlegChernavin

Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Попробую посмотреть. Пока так трудно сказать, что нужно поправить в этом формате. Не обещаю, что получится быстро сделать.

Всего записей: 2305 | Зарегистр. 02-10-2003 | Отправлено: 20:51 30-10-2009
losovs

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Попробую посмотреть. Пока так трудно сказать, что нужно поправить в этом формате. Не обещаю, что получится быстро сделать.

Заранее благодарю. Программа полезная, вот еще проблему с русским решить бы. Буду ждать.

Всего записей: 2 | Зарегистр. 30-10-2009 | Отправлено: 14:48 01-11-2009
   

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96

Компьютерный форум Ru.Board » Компьютеры » Программы » MetaProducts Offline Explorer™ / Portable Offline Browser™
Widok (02-08-2010 12:06): Лимит страниц. Продолжаем здесь.


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru