Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » Программы » Как сэкономить интернет-трафик

Модерирует : gyra, Maz

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11

Открыть новую тему     Написать ответ в эту тему

ZEWS



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
shapr

Цитата:
СProxy одно показывает, НС другое. Не пойму.

Ну правильно...
СProxy показывает что через него прошло и сколько из этого он сжал, а НС показывает что взято с инета, а что из кэша.

Всего записей: 2873 | Зарегистр. 25-02-2006 | Отправлено: 17:23 12-01-2007 | Исправлено: ZEWS, 17:25 12-01-2007
Serg_Ivanov



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
shapr

Цитата:
Интернет -  CProxy потом Proxomitron или наоборот?

Выход всегда осуществляется черз сжимающий прокси CProxy или toonel или др.
Перейди сюда, т.к вопрос касается прокси почитай и если, что спросишь:
http://forum.ru-board.com/topic.cgi?forum=5&bm=1&topic=13043&start=60

Всего записей: 7280 | Зарегистр. 30-05-2006 | Отправлено: 17:31 12-01-2007
shapr



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ZEWS
Serg_Ivanov
Спасибо за помощь всем.Если нетрудно посмотрите еще разок. CProxy - блокировка баннеров откл, рекламы вкл., кэш - откл; Proxomitron - ну там как было так и оставил. НС- вроде настроен. С ним я лучше всего разобрался пока. В Опере кэш откл.
Все правильно???

Всего записей: 218 | Зарегистр. 01-05-2005 | Отправлено: 18:49 12-01-2007
Serg_Ivanov



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
shapr
Не надо отключать кэш в Opera и CProxy.
Оно тебе мешает?
Если связка работает постепенно подстраивай под себя.

Всего записей: 7280 | Зарегистр. 30-05-2006 | Отправлено: 18:57 12-01-2007
shapr



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Serg_Ivanov
Еще раз благодарю. Связка вроде работает. Причем нормально, без тормозов. Вот только еще объясни почему резку баннеров нужно в СProxy отключить. Я так понимаю он будет их грузить, сжимать. Или я че то не так понял?

Всего записей: 218 | Зарегистр. 01-05-2005 | Отправлено: 19:12 12-01-2007
Serg_Ivanov



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
shapr

Цитата:
 Или я че то не так понял?

Ты добился того что связка у тебя работает хорошо.
А теперь уже оптимизируй каждую прогу по отдельности
как нужно тебе, отключай баннеры и т.д  
Если связка заглючит ты будешь знать, что сделал и  
сможешь вернуться назад.

Всего записей: 7280 | Зарегистр. 30-05-2006 | Отправлено: 19:26 12-01-2007
ZEWS



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
Serg_Ivanov

Цитата:
Не надо отключать кэш в Opera и CProxy.

Оперой не пользуюсь (на дух не переношу ) А вот в своём FireFox'е я кэш полностью отключил! Экономия сразу повысилась и теперь всё в одном кэше, а не в двух... иногда неудобство это доставляло...
А вот в CProxy кэша 12 метров оставил... тут рекомендовали, ну я и оставил
 
shapr

Цитата:
Вот только еще объясни почему резку баннеров нужно в СProxy отключить.

Не знаю... у меня включено.

Всего записей: 2873 | Зарегистр. 25-02-2006 | Отправлено: 19:35 12-01-2007
shapr



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Тоже резку баннеров включил. Зачем лишнее. Я так понял, при отключенной резке чешский сервер будет сжимать и пересылать на мою сторону. На фига, если их можно не трогать совсем. Кэш у Оперы оставил 5 метров с очисткой после закрытия. Может кто в курсе как Proxomitron настроить, чтоб не резал скрипт Ru.Board. Киньте в ПМ. А то там в топике молчат че-то.

Всего записей: 218 | Зарегистр. 01-05-2005 | Отправлено: 15:26 13-01-2007
Serg_Ivanov



Gold Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
shapr

Цитата:
Может кто в курсе как Proxomitron настроить, чтоб не резал скрипт Ru.Board.

 Посмотри здесь и почитай в теме:
http://forum.ru-board.com/topic.cgi?forum=5&topic=0339&start=1280#lt

Цитата:
 А то там в топике молчат че-то

Значит дела есть. Со временем ответят.

Всего записей: 7280 | Зарегистр. 30-05-2006 | Отправлено: 17:34 13-01-2007
casm82

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Обе программы могут сжимать трафик не только по протоколу HTTP, но ещё и SMTP & POP3 (ICQ и электронная почта). Кроме того, CProxy жмёт ещё и ICQ-трафик

Если настроить ICQ клиент на работу через toonel, то трафик icq тоже будет сжиматься. В таблице привожу пример для загрузки контакт листа с toonel и без него.
Подключение Принято, байт Предано, байт Всего, байт    
1. C Toonel.net   11 272   6 119 17 391    
2. Без Toonel.net   16 056  5 573 21 629

Экономия с toonel 19,59%
  По поводу статьи, желательно бы исправить опечатки:

Цитата:
можно использовать сервис WebWarper, не требующих никаких отдельных утилит. Для этого нужно всего лишь добавить один фильтр. Читать тут .
Ссылка в версии на ru-board не указана.

Цитата:
Многих пользователей сети Интернет волнует вопрос: как сэкоМомить трафик
М<-->н

Цитата:
Побочный эффект: после включения сжатия перестанут перестанут  работать такие модули Outpost
дубль

Полезная статья (что хорошо, что практичная). Подобная есть еще на Wiki (http://ru.wikipedia.org/wiki/Экономия_трафика), в ней на одну методику экономии больше («Блокировка нежелательного контента»), но нет описания настроек программ.

Всего записей: 128 | Зарегистр. 04-06-2006 | Отправлено: 18:38 13-01-2007 | Исправлено: casm82, 18:47 13-01-2007
ZEWS



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
casm82

Цитата:
Если настроить ICQ клиент на работу через toonel, то трафик icq тоже будет сжиматься. В таблице привожу пример для загрузки контакт листа с toonel и без него.

А есть такая же табличка, только ещё +CProxy через чё лучше асю пустить?

Всего записей: 2873 | Зарегистр. 25-02-2006 | Отправлено: 19:06 13-01-2007
shapr



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ZEWS
Смотри короче. Statist XP показывает к примеру 240кВ. НС аж 541. Я понимаю что реальный трафик 240. Или после CProxy он разжимается и НС показывает уже этот трафик?  
Serg_Ivanov

Цитата:
 Посмотри здесь и почитай в теме:  
http://forum.ru-board.com/topic.cgi?forum=5&topic=0339&start=1280#lt

Спасибо. Я уже это видел, но ниче для себя не нашел. Там вышли из положения заменой проги. Но мне это почему то не помогло. Будем ждать может в том топике подскажут.

Всего записей: 218 | Зарегистр. 01-05-2005 | Отправлено: 20:59 13-01-2007 | Исправлено: shapr, 21:05 13-01-2007
ZEWS



Silver Member
Редактировать | Профиль | Сообщение | ICQ | Цитировать | Сообщить модератору
shapr
541 "Взято из интернета" показывает?

Всего записей: 2873 | Зарегистр. 25-02-2006 | Отправлено: 21:46 13-01-2007
shapr



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Да

Всего записей: 218 | Зарегистр. 01-05-2005 | Отправлено: 21:55 13-01-2007
casm82

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ZEWS

Цитата:
А есть такая же табличка, только ещё +CProxy через чё лучше асю пустить?

Поэкспериментировал с qip - подключался несколько раз к сети. Сравнивал экономию при подключении через Cproxy (http и socks), toonel.net, с подключеним напрямую.
Все подключения проводились с одним и тем же составом контакт листа - количество записей и количество online контактов не изменялось.
Замеры производил с помощью BWmeter (в режиме секундомера - Ctrl-W). Результаты следующие.
Вид подключения Принято из сети, байт   Послано в сеть, байт Всего из\в сеть, байт Статистика программы Всего из\в сеть по прог.   Экономия    
Cproxy http1   9925   5439 15364 46,19% 11 240 25%    
Cproxy http2   9705   5554 15259 46,97% 11 500 25%    
Cproxy http3   9578   5492 15070 46,11% 11 270 26%    
Cproxy http среднее   9736   5495   15221   46,42%   11 337   25%    
Cproxy socks1 10263   6971 17234 45,45% 11370 16%    
Cproxy socks2 10765   5912   16677   46,23% 10610 18%    
Cproxy socks3 10320   7315   17635   44,33% 10980 14%    
Cproxy socks среднее   10 042   6025   16 067   45,34%   10967   16%    
toonel.net 1  10873 6019 16892 32,00% 11706 17%    
toonel.net 2  10543 5966 16509 33,00% 16706 19%    
toonel.net 3  10424 6005 16429 32,00% 16712 20%    
toonel.net среднее   10613   5997   16610   32,33%   15041   19%    
Без сжатия 1 14127 5455 19582 ––– –––   –––    
Без сжатия 2 14753 6819 21572 ––– –––   –––    
Без сжатия 3 14712 5419 20131 ––– –––   –––    
Без сжатия среднее   14531   5898   20428   –––   –––   –––

Сначала были сделаны три замера для подключения напрямую, далее вычислил средний трафик Tсред. - у меня оказалось тратиться 20,4 кБ.
Далее для каждого прокси были проведены три замера и вычислено среднее значение.
 
Экономия считалась как разница, между ср. трафиком и трафиком при подключении через прокси, приведенная к ср. трафику:
Ei =(Tсред.-Ti)/( Tсред.),
где Tсред. – среднее значение трафика, потраченного при прямом подключении
Ti – потраченный трафик при i-ом подключении через прокси (i=1,2,3).

Как видно статистика, показываемая самими прокси, не совпадает с результатами
 
Как оказалось лучше сжимает icq трафик Cproxy в режиме http. Однако оказалось имеется одно замечание – Cproxy через каждые 30 сек. посылает keep-alive пакеты к своему серверу. В среднем за 4,5 минуты Cproxy послал 10 пакетов общим размером 1129 байт. Т.е. 225,8 байт/минуту= 13548 байт/час, что не очень много.
toonel.net же посылает пакеты только по запросу локального клиента.
 
Сравнил так же эффективность сжатия при скачивании текстового файла сервисов – Cproxy, toonel.net, Webwarper (скачивал книгу,язык - русский, 54879 байт).
Результаты следующие.
Вид подключения Принято из сети, байт   Послано в сеть, байт Всего из\в сеть, байт Процент сжатия    
toonel.net 38116   2478   40737   74%    
Cproxy   37910   2827   40737   74%    
Webwarper   25631   1003   26634   49%    
Оригинал  --- --- 54879 ---

Как оказалось сильнее всего сжимает текст Webwarper (сжатие более чем в 2 раза).
Настроить сжатие графики в Cproxy у меня не удалось – не смотря на включенные пункты «Compress images», и выставленный ползунком средний уровень качества, размер картинки, при скачивании через Cproxy не уменьшался.
Позже сжатие графики заработало, но сравнить количественно уже не было возможности. Чисто субъективно при близком размере файла качество картинок, сжимаемых toonel.net было лучше, чем Cproxy.
 
Лично я использую HandyCache с включенными серверами посредниками, а далее toonel.net, как родительский прокси.  
В файле-списке HC для серверов посредников как исключение указал адреса сайтов, которые не корректно работают через  Webwarper, а в конце указал правило #.*  
Таким образом у меня все сайты, которые явно не исключены, перенаправляются на Webwarper. В условных прокси задал исключение – если загрузка страницы идет через Webwarper, или загружается слабо сжимаемы файл, то не использовать toonel.net. Картинки же всегда направляю через toonel.net

Код:
#7#~#True#~#Toonel img#~#127.0.0.1#~#8080#~##~##~#(?:.*(?:pic|img).*)|(.)*\.(jpg|jpeg|gif|bmp|ico)
#7#~#True#~#Exclusion#~##~#0#~##~##~#(.*webwarper.*|.*download.*)|(.*\.(7z|a(ac|ce|mf|mr|sf|vi)|b(i(k|n)|z|z2)|c(ab|hm)|d(iv(.*|x)|j(v|vu)|ll|oc)|exe|ff(l|t|x)|flv|gz|m(af|mf|pf|p(g|v)|rw|si)|mp\w{1,2}|p(df|p(s|t))|r(\d{2}|a(r|w))|scr|t(a(r|z)|b(z|z2)|g(a|z))|tif{1,2}|w(av|ma)|x(ls|pi|sl|xe)|z|zip))$  


Всего записей: 128 | Зарегистр. 04-06-2006 | Отправлено: 02:11 14-01-2007 | Исправлено: casm82, 02:30 14-01-2007
fnfn

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
casm82
к сожалению, это все искусственные тесты, которые не показывают реальную жизнь
напр, как часто ты открываешь асю по сравнению с как часто ты шлешь сообщения? как я подозреваю, сообщения ты все-таки шлешь чаще, чем коннектишься
а вот жмутся ли сообщения (и как), ты не проверил
 
с вебварпером тоже не совсем правильно - обычно ты не загружаешь чистый текст, ты загружаешь страничку с какого-то сайта. а в страничке полно других элементов - тех же картинок. toonel/cproxy умеют сжимать запросы к этим картинкам, вебварпер - не умеет. а запросы, кстати, не маленькие, запрос-ответ порядка 800 байт (даже если картинка размером 43 байта). на страничке обычно порядка 10 картинок - итого получаем 8К трафика, который вебварпер не жмет, а toonel/cproxy сжимают где-то на 50%. на самом деле трафик заголовков может быть даже больше, чем собственно страничка.
 
но так как ты сделал, с комбинацией вебварпер + toonel может и есть лучший вариант. по-идее получается что заголовки на картинки будут сжиматься. я бы еще посмотрел как жмутся .js и .css - они текстовые но жмет их вебварпер или нет, я не знаю.
 
хотя странный все-таки результат насчет сжатия текста - ты бы не мог дать адрес этой странички, которая 54879 байт? хочется самому проверить.

Всего записей: 55 | Зарегистр. 01-04-2006 | Отправлено: 06:31 01-02-2007
casm82

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
fnfn

Цитата:
к сожалению, это все искусственные тесты...

это верно, но, во-первых, для того чтобы провести эксперимент с учетом передачи сообщений, потребовалось бы найти человека, который бы их принимал и писал в ответ если бы я писал по 10 сообщений и мне бы отвечали, то в общей сложности потребовалось обменяться 10 сооб. *2 чел.*12 замеров=240 сообщений, при условии что в контакт листе статус у контактов не измениться (online|offline).
Эксперимент, что я делал, был для оценки сжатия выбранных сервисов при равных условиях, конечно, он полностью не соответствует реальным условиям, но хоть какую-то информацию об оценке сжатия получил.
Насчет сжатия текста и Webwarper, то я скачивал книгу, взятую с lib.ru. Если есть желание можно проверить на любой из выложенных книг.

Цитата:
 я бы еще посмотрел как жмутся .js и .css - они текстовые но жмет их вебварпер или нет, я не знаю  

С js проблем не наблюдал – сжимаются как вполне прилично. Привожу статистку из Far для файла bombus-im.org/flyspray/javascript/prototype/prototype.js
Архив                                                   GZip
 …
 Общий размер                                         136,816
 Упакованный размер                              15,190
 Степень сжатия                                        11%
C css немного сложнее – не со всех сайтов, удавалось их скачать через Webwarper- происходит зацикливание 302 Moved Temporarily (так же как для большинства картинок), поэтому я добавил их в исключения с mz.txt.
Кому интересно, привожу его здесь

Всего записей: 128 | Зарегистр. 04-06-2006 | Отправлено: 21:04 02-02-2007
fnfn

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
casm82

Цитата:
С js проблем не наблюдал – сжимаются как вполне прилично. Привожу статистку из Far для файла bombus-im.org/flyspray/javascript/prototype/prototype.js  

то, что они текстовые и сжимаются, я знаю.
имелось ввиду, сжимает ли их вебварпер, когда подгружает в составе странички?

Всего записей: 55 | Зарегистр. 01-04-2006 | Отправлено: 22:22 02-02-2007
casm82

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
fnfn

Цитата:
имелось ввиду, сжимает ли их вебварпер, когда подгружает в составе странички?

да сжимает, статистика что я привел как раз для js, который был сжат Webwarper-ом

Всего записей: 128 | Зарегистр. 04-06-2006 | Отправлено: 23:54 02-02-2007
fnfn

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
casm82

Цитата:
Как оказалось сильнее всего сжимает текст Webwarper (сжатие более чем в 2 раза).  

 
дошли руки проверить webwarper vs toonel
проверялось на maxtron 1.5.6, adsl, мерял TMeter (он позволяет фильтр выставить на конкретный IP в отличии от bwmeter, который меряет все подряд), реклама в webwarper отключена, кеш чистился после каждого замера.
 
оригинал (http://lib.ru/DETEKTIWY/AMBLER/dimitr.txt) :
послано 7 099, принято 321 419
 
webwarper (http://webwarper.net/ww/~av/lib.ru/DETEKTIWY/AMBLER/dimitr.txt) :
послано 11 380, принято 186 600
 
toonel
послано 2750, принято 140 800
 
три раза на каждый заход, цифры немного +- болтались из-за потерь пактов, в пределах сотен байт для входного канала и десятков байт для исходящего канала.
 
пысы - могу выслать логи пакетов для проверки
 
Добавлено:
заинтересовало, почему такой большой исходящий трафик у вебварпера.
покопался, понял что очищать кеш в случае с вебварпером нельзя - таким образом я его заставлял грузить свои скрипты. пришлось ручками кеш чистить, оставляя скрипты.
получилось:
 
webwarper
послано 3 491, принято 135 260
 
итого - вебварпер потратил на 4 799 байт меньше, что есть около 4% экономии по сравнению с toonel.
 
нужно учесть что
а) скрипты вебварпер подгружает каждые 2 часа
б) эта страничка совсем не характерна для и-нета, т.к. это чистый текст, без всяких оформительных элементов, поэтому http заголовок только один - т.е. toonel не смог толком сжимать то, что не сжимает вебварпер.
 
забавно, что через вебварпер исходящий трафик получился меньше, чем оригинальный, что вообще-то не должно быть. оказалось, что хотя HTTP-заголовок через вебварпер больше, но у меня до сервера вебварпер соединение существенно лучше, чем до lib.ru, пакеты до вебварпера почти не терялись, а до либ.ру было много потерь. понятно, что у каждого свой провайдер и там уже как карта ляжет.
 
update
cproxy
послано 3500, принято 152 700

Всего записей: 55 | Зарегистр. 01-04-2006 | Отправлено: 21:53 21-02-2007 | Исправлено: fnfn, 03:23 23-02-2007
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11

Компьютерный форум Ru.Board » Компьютеры » Программы » Как сэкономить интернет-трафик


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru