Анализатор логов Apache (собственная разработка)

12 3
Scorpio
На сайте с 04.03.2006
Offline
47
10598

Взял себе в качестве дипломной работы анализатор лог-файлов сервера Apache.

Посмотрите, оцените тут.

Если такой сервис будет полезен еще кому-то, то выложу в свободный доступ с описанием работы с ним и инсталляшкой.

M
На сайте с 19.05.2007
Offline
3
#1

А смысл? Функционала пока мало, до LI очень серьёзно не дотягивает.

Перед разработкой подобного сервиса неплохо бы придумать фишку, которая будет выгодно отличать вашу статистику от любой другой, пока же удивить нечем.

Покупаю: морды, а также места под статьи, ссылки на внутренних и ссылки с закрытых сеток каталогов навсегда. Возьму: сайты на комплексное продвижение.
Mihajlo
На сайте с 30.10.2006
Offline
135
#2

поисковые фразы еще сделайте :)

и диаграмки можно средствами php рисовать самостоятельно

Segey
На сайте с 23.08.2005
Offline
404
#3

Scorpio,

А можно парочку вопросиков :) ?

Логи предварительно обрабатываются как-то? Т.е. обращение к дизайну учитывается и чистится? Если да, то на чем написан этот скрипт и сколько по времени выходит на 150-200Мб логе?

Brexit - уже совсем рядом. (https://about-this-model.blogspot.com/2019/03/brexit.html)
Scorpio
На сайте с 04.03.2006
Offline
47
#4

mDoktor, LI не логи анализирует, так что не путайте ;)

подход тут совершенно иной.

Mihajlo, так диаграмки я средствами PHP и рисую.

ок, поисковые фразы в проекте ;)

Segey, лог файл вначале парсится и информация распределяется по соответствующим таблицам. Скрипты, которые уже непосредственно статистику формируют не лезут в логи, а берут информацию из соответствующей таблицы.

написано все на php.

скрипт, который парсит лог и заносит в базу - берет за каждую итерацию 1000 записей.

это я экспериментально так поставил, чтоб не возник тайм-аут в 30 секунд. но это можно поправить для ускорения работы. Секогня засеку сколько при таких данных будет на петерхосте заносится лог в 18-20 метров.

в логе может быть несколько сайтов (как например на петерхосте), временные рамки логов также неограничены.

M
На сайте с 10.02.2007
Offline
74
#5

В качестве фишки можно предложить статистику посещений роботов поисковых систем.

Это выгодно будет отличать Ваш анализатор от многих других. Ну и над графикой ещё работать и работать.

Scorpio
На сайте с 04.03.2006
Offline
47
#6

mavpa, имеется в виду по кол-ву страниц?

над графикой интерфейса? если будет много заинтересованных в использовании. а так это удобный инструмент для вебмастеров и смысла оттачивать дизайн я не вижу.

W
На сайте с 06.09.2005
Offline
42
#7

Сравнение AWstat по "Ссылающиеся страницы" ваш скрипт лучше.

Еще Можно добавить

1. Индексация в поисковиках => список файлов которым бот посмотрел;

webmasters -вебмастер с сайтов:http://www.ibrahimovfamil.narod.ru (http://www.ibrahimovfamil.narod.ru) http://www.allshops.h15.ru (http://www.allshops.h15.ru),http://www.forumall.h15.ru (http://www.forumall.h15.ru) http://www.zarabotka.hut1.ru (http://www.zarabotka.hut1.ru)
Diversant
На сайте с 29.03.2006
Offline
322
#8

Мне понравилось статистика по индексирующим ботам :)

Scorpio
На сайте с 04.03.2006
Offline
47
#9

webmasters, то есть и роботс.тхт, вы имеете в виду?

(сейчас скрипт берет все что отдает 200 и не является картинкой, архивом, видео, тхт-файлом. то есть только веб-страницы)

Diversant, спасибо :)

в админке можно самому добавлять/удалять ботов и ПС. прописывая как надо регулярное выражение для вычисления бота.

Diversant
На сайте с 29.03.2006
Offline
322
#10

Можно мне скинуть анализатор .... ??? Потестю ....

12 3

Авторизуйтесь или зарегистрируйтесь, чтобы оставить комментарий