HandyCache форум

Главная категория => Дополнения, плагины => Тема начата: Walker от 01 марта 2007, 07:54:25



Название: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: Walker от 01 марта 2007, 07:54:25
WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)

Установка "с нуля":
  • Нужно поставить WrSpySetup (взять с оф.сайта: http://www.wrspy.ru/ ),
  • потом накатить обновление до 1.6.5 WrSpyUp165: http://www.wrspy.ru/download/WrSpyUp165.rar
  • и заменить ехе-шник из этого архива: http://www.wrspy.ru/download/WrSpy166e.rar (подходит для логов HC версии 0.98b1 и младше).

Учет кэша в настройках режима. Работает при вводе лога, поэтому при
изменении - перезалить логи (Очистка и Закачка с нуля)
В настройках вида отчета отключить все, касательно Станций, тк в логе
нет IP адресов клиентов. Ежели не отключать, то весь трафик спишется
на 127.0.0.1


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: mai62 от 01 марта 2007, 12:13:12
Walker
Цитировать
Жду решения автора НС, для реализации его поддержки в бесплатной анализерке WrSpy
Если для этого мне нужно что-то сделать, то готов обсудать.
Цитировать
В настройках вида отчета отключить все, касательно Станций, тк в логе
нет IP адресов клиентов. Ежели не отключать, то весь трафик спишется
на 127.0.0.1
А нельзя для этого использовать поле Пользователь? Могу еще добавить IP пользователя.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: cepera_ang от 01 марта 2007, 12:50:08
Walker
Отлично получилось!
А откуда берутся категории сайтов? а то у меня выдало
Цитировать
http://www.google-analytics.com/ 19 519  Порнуха

И еще - если есть такой анализ, по категориям и т.д. может будет нетрудно сделать анализ по правилам НС?
Пользователь? Могу еще добавить IP пользователя.
Так стоит и сделать.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Walker от 01 марта 2007, 13:53:24
Собственно, мне хотелось бы только IP пользователя и, по возможности, исходящий трафик. Сейчас в поле IP фиксированно пишется 127.0.0.1, а исходящий трафик берется из длины запроса :). Наличие поля IP пользователя позволяет даже отслеживать миграцию оных по компьютерам, или статистику работы именно компьютеров (полезно, одним словом).
К вопросу о категориях. Для них есть специальная настройка. Суть ее в поиске в URL заданных контекстов и по нахождению - причисление к той или иной категории. В приведенном URL есть контекст anal, отсюда и порнуха. Список категорий приведен для примера и его можно и нужно править.
PS к вопросу о правилах. Прожка уневерсальная и в других прокси нет таких категорий (за редким исключением). Поэтому это несколько проблематично, хотя и может быть предметом обсуждения :)


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: mai62 от 01 марта 2007, 14:56:52
Walker
Цитировать
Собственно, мне хотелось бы только IP пользователя и, по возможности, исходящий трафик.
ОК. Сделаю.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Walker от 02 марта 2007, 07:19:11
Для заинтересованых WrSpy для НС
http://www.wrspy.ru/download/WrSpy166f.rar
Поправлен алгоритм учета кэша, предыдущий вариант занижал его эффективность.
В архиве - поправленый ехе-шик. Установка с нуля - см  Ответ #24 : 01 Марта 2007, 07:54:25


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: cepera_ang от 03 марта 2007, 18:28:29
В НС по умолчанию новые пользователи создаются в виде: User_19:47:44. При обработке логов с такими пользователи и создании отчета по пользователям wrspy выдает ошибку - "Ошибочный путь или имя файла" так как символ : и некоторые другие недопустимы в именах файлов. Необходимо сделать проверку при создании отчета.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: cepera_ang от 04 марта 2007, 02:22:54
Как насчет сохранения в логе user-agenta? И давайте уже установим конечный срок, до которого будем определяться с форматом и после которого можно уже начать реализацию и в Нс и в wrspy. А то иначе можно сто лет ждать и выбирать.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Rick от 04 марта 2007, 07:33:43
Как насчет сохранения в логе user-agenta?
Поддерживаю. Но, пожалуй, не полностью всю строку, а только полученные из нее название+версию.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Walker от 05 марта 2007, 08:32:34
Вот, http://www.wrspy.ru/download/WrSpy166h.rar
Заменить ехе-шник
Заменяется любой из символов : ? / | \ на _ (подчеркушку)


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: cepera_ang от 16 марта 2007, 23:00:05
Итак, на чем мы остановились? Будем делать статистику или нет?


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: mai62 от 17 марта 2007, 00:23:31
Пока, что касается статистики, в след. версии будет:
- поля разделены символом табуляции вместо пробела
- поле Пользователь будет выглядеть, например, так: local/127.0.0.1
- добавлено поле Отправлено
- поле Получено будет выглядеть, например, так: 122334/435 (где 122334 - размер файла, 435 - размер заголовка ответа)
- пустых полей не будет, будет записано 0


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Walker от 19 марта 2007, 04:36:04
Просьба сообщить мне, когда настанет время переделывать анализерку :)


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: mai62 от 19 марта 2007, 09:41:04
Walker
Отправил образцы логов тебе на мыло


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Walker от 19 марта 2007, 11:51:25
ОК. Ответ продублирую здесь

m> - поля разделены символом табуляции вместо пробела
Сделал
m> - поле Пользователь будет выглядеть, например, так: local/127.0.0.1
если local - логин, 127.0.0.1 - адрес клиента, то сделал
m> - добавлено поле Отправлено
Отправлено - исходящий трафик, сделал
m> - поле Получено будет выглядеть, например, так: 122334/435 (где 122334 - размер файла, 435 - размер заголовка ответа)
А что мне с заголовком делать? Я просуммировал его с размером файла и
получил входящий. Это правильно?
m> - пустых полей не будет, будет записано 0
ОК
По присланным образцам проверился.
Если все верно, могу выложить обновление.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: Walker от 19 марта 2007, 12:10:04
Добро получил.
Вот http://www.wrspy.ru/download/WrSpy166k.rar
С предыдущим форматом логов несовместим.
Инструкция по установке - выше


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: cepera_ang от 20 марта 2007, 02:30:56
Удивительное дело :) Анализатор логов для новой версии вышел быстрее, чем сама новая версия! Вот что значит накопилась критическая масса запросов (до этого больше года за статистику никто толком не брался).


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HC)
Отправлено: mai62 от 20 марта 2007, 02:35:32
Думаю мы должны поблагодарить уважаемого Walker за чуткое отношение к просьбам пользователей НС. Бета-тестеры же получат возможность тестировать сразу две программы.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: Walker от 27 декабря 2007, 09:52:00
У меня такой вопрос к уважаемому автору HC.
Мне уже давно пора зафиналить версию WrSpy 1.6.6, поэтому интересуюсь судьбой новой версии HC, а точнее формата его логов. Дело в том, что в последних варантах прожки я использую новый формат логов. Если я сделаю нормальное обновление прожки с поддержкой нового формата логов HC, то будет ли это корректно по отношению к пользователям HC? Или нужно делать откат к старому формату?


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: mai62 от 27 декабря 2007, 12:04:55
Со дня на день выйдет новая версия. Могу дать тебе образцы логов (по моему они не изменились с тех пор как я тебе давал) или ссылку на новую версию.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: Walker от 27 декабря 2007, 12:54:24
Для вящей пущьности, хрошо бы убедиться, что все нормально...
В смысле образец логов...


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: mai62 от 27 декабря 2007, 15:47:41
ОК. Заброшу на мыло.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: asgrigor от 07 января 2008, 21:57:48
у меня такой вопрос, поставил обнавление на HC? изменился формат логов и WrSpy перестал выдавать статистику с логов!!!! ЕСТЬ ПРЕДЛОЖЕНИЯ


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: cepera_ang от 08 января 2008, 01:20:41
Скачай последнюю версию WrSpy. Если внимательно читать, то можно увидеть, что WrSpy начал понимать новый формат еще до того, как его реализовали в НС.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: asgrigor от 08 января 2008, 01:49:49
спасиба буду внимателен


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: Walker от 09 января 2008, 04:34:28
Для нового формата логов достаточно на WrSpySetup (или любую боле раннюю версию) накатить WrSpyUp166.


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: asgrigor от 10 января 2008, 17:45:55
такой вопрос как зделать теперь общий расчет трафика на прокси сервере не очень хочется с калькулятором сидеть считать каждого пользователя
Добавлено: 10 Января 2008, 17:43:12

вот функцию с которая в виде станции 127.0.0.1 считила общий траф можно как нить в обновленную версию вставить.
Буду очень благодарен!!!!!


Название: Re: WrSpy - программа для анализа логов прокси (в т.ч. HandyCache)
Отправлено: Walker от 11 января 2008, 04:33:46
А зачем с калькулятором? У WrSpy с самого рождения есть отчет в Excel, там тремя движениями мыши можно просуммировать все.