Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Компьютеры » В помощь системному администратору » Активные темы » LightSquid

Модерирует : lynx, Crash_Master, dg, emx, ShriEkeR

 Версия для печати • ПодписатьсяДобавить в закладки
Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23

Открыть новую тему     Написать ответ в эту тему

ginger



Рыжик
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

LightSquid - lite and fast log analizer for squid proxy

Текущая версия 1.8 Изменения  
Домашняя страница автор Сергей Ерохин (Sergey Erokhin).
 
LightSquid маленькая и быстрая программка сбора статистики работы пользователей через прокси-сервер Squid, является альтернативой SARG, представляет собой набор из нескольких скриптов написанных на языке программирования perl.
 
Требования:
 
Apache
Perl
Perl-GD2 (если необходимы графики)
Squid
Cron
 
Установка.

Всего записей: 854 | Зарегистр. 03-09-2001 | Отправлено: 11:18 01-02-2006 | Исправлено: zhe_zho, 18:28 27-01-2014
vworld



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
заметил странность у лайтсквида...лог идет например по IPпосле того как я поменял привязку IP=username то в статистике замесяц есть данные и по IP и оп username, т.е. не пересчитывается лог весь
Что не так?

Всего записей: 2617 | Зарегистр. 13-02-2003 | Отправлено: 07:19 31-07-2007
lightsquid

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
именно так и должно быть
если изменили тип учета (в вашем случае IP->Nam)
парсер обрабатывает только один файл (ну или один день)
 
надо пересчитать ВСЕ отчеты. т.е. скормить логи за всь месяц.
 
но надо это сделать ровно 1 (один) раз.
 

Всего записей: 105 | Зарегистр. 15-02-2006 | Отправлено: 13:04 31-07-2007
vworld



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
lightsquid

Цитата:
скормить логи за всь месяц.

закономерный вопрос как?

Всего записей: 2617 | Зарегистр. 13-02-2003 | Отправлено: 13:31 31-07-2007
w3d

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Запустить парсер без ключа today

Всего записей: 68 | Зарегистр. 07-08-2003 | Отправлено: 15:35 31-07-2007
vworld



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
w3d
lightparser.pl
так если принудительно не из крона запускаю, при чем тут параметр today?

Всего записей: 2617 | Зарегистр. 13-02-2003 | Отправлено: 16:48 31-07-2007
vworld



Silver Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
./lightparser.pl access.log.1.{gz|bz2}  
спас отца русской демократии
обработка всех архивов логов за месяц..

Всего записей: 2617 | Зарегистр. 13-02-2003 | Отправлено: 06:50 01-08-2007
lightsquid

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
>./lightparser.pl access.log.1.{gz|bz2}
>спас отца русской демократии
>обработка всех архивов логов за месяц..
 
правильно, только это зависит от того как ротеятятся логи
например в АСП линуксе стоит ротация раз в неделю
 
есть люди у которых раз в час
 
ну в общем виде
./lightparser.pl access.log.1.{gz|bz2}
./lightparser.pl access.log.2.{gz|bz2}
./lightparser.pl access.log.3.{gz|bz2}
./lightparser.pl access.log.4.{gz|bz2}
...
...

Всего записей: 105 | Зарегистр. 15-02-2006 | Отправлено: 13:37 01-08-2007 | Исправлено: lightsquid, 13:37 01-08-2007
vladagapov

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Хочу поделиться тем, что придумал для ограничения доступа к статистике.
Идея: каждый пользователь может смотреть только свою статистику, за любой период.
Два варианта:
1. В скриптах user_time.cgi, user_detail.cgi, user_month.cgi, graph.cgi переменную user объявляем как $user=$ENV{'REMOTE_ADDR'}, т.е. адрес запросившего. Получается, что детализацию за другого пользователя он посмотреть не может. Однако, он может посмотреть общую статистику, да и на чужой комп зайти посмотреть можно...
2. Заменяем переменные аргументами ($year = $ARGV[0]...), на сервере генерим скрипт
(./user_detail.cgi 2007 08 07 192.168.1.1 > 123.html), потом этот файл копируем для временной сессии. Но там теряются все ссылки.
Предложения, критика приветствуются.

Всего записей: 4 | Зарегистр. 21-05-2006 | Отправлено: 16:33 09-08-2007
CaHuTaP

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Цитата:
а как на винде замутить работы этой софтины?
 
Надо немного поработать напильником
1.  Создать файл cat.pl с таким текстом
while ( <> ) {
        print;
    }
и положить в каталог установки lightsquid
2. изменить lightparser.pl - поискать в тексте "cat" и заменить на "cat.pl"
3. Во всех файлах *.cgi заменить первую строку #!/usr/bin/perl на #!c:/perl/bin/perl.exe  

 
все так и сделал, но при запуске lightparser.pl тишина...куда копать?

Всего записей: 36 | Зарегистр. 19-02-2003 | Отправлено: 10:29 20-09-2007
lightsquid

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
есть еще вариант, но он отшибет поддержку архивов как класа
 
заменить
open FF, "$catname $logpath/$filename|" || die "can't access log file\n";
 
на
open FF, "$logpath\\$filename" || die "can't access log file\n";

Всего записей: 105 | Зарегистр. 15-02-2006 | Отправлено: 17:53 20-09-2007
CaHuTaP

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
как скормить парсеру архивы типа logDDMMYY.gz (внутри лог файл logDDMMYY)?

Всего записей: 36 | Зарегистр. 19-02-2003 | Отправлено: 11:38 28-09-2007
lightsquid

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
вариантов - много, от
просто временно переименовать/скопировать ваши файлы и пускать парсер
до
править исходник
 
т.к. таск как я понимаю надо сделать единожды, то я бы сделал 1-й вариант
 
типац икла по вфсм файлам, копируем его в файл с нужным именем, пускаем парсер, удаляем файл.
 

Всего записей: 105 | Зарегистр. 15-02-2006 | Отправлено: 18:53 28-09-2007
Nilfgardec

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Такая беда. Поставил lighstquid
 
Проверяю используя броузер, откройте страницу http://<адрес_хоста_с_Apache>/lightsquid/  - Не находит страницу.
 
Если просто http://<адрес_хоста_с_Apache> пишет It works!
 
Что надо сделать, чтоб заработало?

Всего записей: 125 | Зарегистр. 24-03-2006 | Отправлено: 16:44 16-10-2007 | Исправлено: Nilfgardec, 16:47 16-10-2007
sergzt

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
при запуске руками ./lightparser.pl говорит такое:  
Warning, `/var/www/html/reports/lightsquid/report/lockfile` exist, maybe anoter process running !
LockPID : 5007
tsdelta : 1590 second(s) (maxlocktime: 1800)
 
+вся статистика обнулилась (кроме "Популярные сайты" и "Кто скачал БОЛЬШИЕ файлы" )
 
в чем проблема?
 
PS 3 дня считало все нормально
 
Добавлено:
проблема решилась сама собой понятия не имею как
 
 

Всего записей: 1 | Зарегистр. 17-10-2007 | Отправлено: 22:50 17-10-2007 | Исправлено: sergzt, 02:37 18-10-2007
dvserg

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Тема для 1.7 http://www.diskatel.narod.ru/

Всего записей: 1 | Зарегистр. 27-12-2005 | Отправлено: 22:44 27-10-2007
BBC7

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Поставил lightsquid параллельно с SARG, обработка логов Dansguardian (логи в формате squid) -  симпатии к первому.
В lightsquid'е только заменил слово в  пути папки логов "squid' на "dansguardian".
Автору удачи и поддерживаю просьбу о MAC-адресах - т.к. используется DHCP и поэтому IP-адрес не говорит ни о чем... А "умников" умеющих менять MAC'и у нас пока нет...

Всего записей: 51 | Зарегистр. 16-11-2004 | Отправлено: 00:55 28-10-2007
CaHuTaP

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
скажите, можно ли как-ни будь прикрутить отчет big files за месяц по юзерам, а не только по дням?

Всего записей: 36 | Зарегистр. 19-02-2003 | Отправлено: 08:04 29-10-2007
lightsquid

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору


Цитата:
Поставил lightsquid параллельно с SARG, обработка логов Dansguardian (логи в формате squid) -  симпатии к первому.
В lightsquid'е только заменил слово в  пути папки логов "squid' на "dansguardian".
 

Спасибо

Цитата:
 
Автору удачи и поддерживаю просьбу о MAC-адресах - т.к. используется DHCP и поэтому IP-адрес не говорит ни о чем... А "умников" умеющих менять MAC'и у нас пока нет...

а в чем проблемма ??
в каком поле есть мак, приведите пример.
 
если он в стандартном или его можно добыть - то проблемм нет вообще
 
Добавлено:

Цитата:
скажите, можно ли как-ни будь прикрутить отчет big files за месяц по юзерам, а не только по дням?

 
сейчас нет, а если не секрет, зачем ?
 
в теории не очень сложно сделать одним списком.

Всего записей: 105 | Зарегистр. 15-02-2006 | Отправлено: 19:31 29-10-2007
BBC7

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
а в чем проблемма ??
в каком поле есть мак, приведите пример.
 
если он в стандартном или его можно добыть - то проблемм нет вообще

Для DHCP-сервера, запущенного на этой же машине, MAC-адрес и соответствующие IP и имя клиентского компьютера можно получить из файла current  в /var/log/dhcpd.
Кусок из этого файла:
 
@40000000471d7b032946c3cc DHCPREQUEST for 192.168.0.61 from 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d7b032946d36c DHCPACK on 192.168.0.61 to 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d7b0600c4c124 DHCPREQUEST for 192.168.0.61 from 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d7b0600c4d4ac DHCPACK on 192.168.0.61 to 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d839a1d36244c DHCPREQUEST for 192.168.0.90 from 00:15:58:4a:53:78 (p4) via eth0
@40000000471d839a1d363bbc DHCPACK on 192.168.0.90 to 00:15:58:4a:53:78 (p4) via eth0

Всего записей: 51 | Зарегистр. 16-11-2004 | Отправлено: 21:29 30-10-2007
lightsquid

Junior Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Для DHCP-сервера, запущенного на этой же машине, MAC-адрес и соответствующие IP и имя клиентского компьютера можно получить из файла current  в /var/log/dhcpd.
Кусок из этого файла:
 
@40000000471d7b032946c3cc DHCPREQUEST for 192.168.0.61 from 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d7b032946d36c DHCPACK on 192.168.0.61 to 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d7b0600c4c124 DHCPREQUEST for 192.168.0.61 from 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d7b0600c4d4ac DHCPACK on 192.168.0.61 to 00:1a:92:71:83:12 (AMD3000) via eth0
@40000000471d839a1d36244c DHCPREQUEST for 192.168.0.90 from 00:15:58:4a:53:78 (p4) via eth0
@40000000471d839a1d363bbc DHCPACK on 192.168.0.90 to 00:15:58:4a:53:78 (p4) via eth0

 
т.е. в самом репорте сквида нет данных о мак ? только ip ?
 
да не проблемма !
для этого и существует ip2name
 
там три функции
 
в ините парсим это файл, создаем соответствие ip mac и по идее времени (если надо)
 
далие втроая функция по ип добывает нужное
 
третья в данном случае будет пустрой
 
примеры - можно глянуть в папке ip2name
 
кстате есть готовый пример для статик dhcp
парсит конфиг дхцп выдерает от туда регистрационные ники
 

Всего записей: 105 | Зарегистр. 15-02-2006 | Отправлено: 12:39 31-10-2007
Открыть новую тему     Написать ответ в эту тему

Страницы: 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23

Компьютерный форум Ru.Board » Компьютеры » В помощь системному администратору » Активные темы » LightSquid


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.B0ard
© Ru.B0ard 2000-2024

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru