Что такое лог-файлы. Анализ лог-файлов.

Лог-файл (или просто лог) - это главный источник информации о поведении посетителя на вашем Web-сайте. Когда кто-то заходит на сайт, лог-файл записывает, например, какие ключевые слова он использовал, чтобы найти ваш ресурс, какие страницы посетил, насколько там задержался и т.д.

Каждое обращение к сайту фиксируется сервером и о нем остается запись в лог-файле. По этим записям можно узнать огромное количество информации о посетителях. Лог-файл сервера представляет собой текстовый файл, в котором в особом формате записаны все данные об обращениях к сайту.

При обращении пользователя к сайту происходит сразу несколько событий.

Событие 1. Запрос страницы.

Браузер посетителя передает на сервер (на котором находится сайт) запрос на выдачу страницы. При этом на сервере становится известной следующая информация:

• IP-адрес посетителя;
• Запрашиваемый URL;
• Дата и время запроса;
• Географическое положение клиента;
• Используемый пользователем браузер;
• Адрес страницы с которой зашел посетитель и т.д.

Событие 2. Выдача страницы.

Сервер возвращает клиенту запрошенный документ (страницу, картинку, файл и пр.).

Событие 3. Запись в лог.

Сервер записывает данные о произошедшей транзакции в журнал событий (лог-файл).

Пример записей в лог-файле.

213.180.195.231 - - [29/Jan/2007:00:07:17 +0000] "GET /excel/lsn015.html HTTP/1.1" 200 18918 "-" "YaDirectBot/1.0" 74.6.71.37 - - [29/Jan/2007:00:13:03 +0000] "GET /eralash HTTP/1.0" 301 317 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)"

74.6.71.37 - - [29/Jan/2007:00:13:06 +0000] "GET /eralash/ HTTP/1.0" 200 12234 "-" "Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)"

213.186.116.166 - - [29/Jan/2007:00:26:51 +0000] "GET /eralash/soft/speed.zip HTTP/1.0" 200 217872 "-" "Wget/1.10.2 (Red Hat modified)"

213.180.207.25 - - [29/Jan/2007:00:27:14 +0000] "GET /robots.txt HTTP/1.1" 200 54 "-" "Yandex/1.01.001 (compatible; Win16; I)"

Лог-файлы представляют собой сырые данные, которые необходимо обработать. Качество обработки и определяет качество статистики.

В лог-файлах сайта содержится вся необходимая информация, которой вполне достаточно, чтобы знать все об аудитории, которая посещает сайт.

Следует иметь ввиду, что абсолютно "реальную" статистику получить практически невозможно, в силу ряда технических причин. Не существует каких-то корректных способов оценить величину отклонения "реальности" от измеренных характеристик, однако принято считать, что эти отклонения в среднем не превышают 5-10%. Если сайт живет "размеренной жизнью" (не проводятся активные рекламные кампании и проч.), то можно считать ошибку измерения постоянной и успешно сравнивать между собой данные по соседним дням, неделям и месяцам.

Существуют специализированные программы для работы с лог-файлами - это, так называемые, анализаторы лог-файлов. Наиболее известные - Analog, Webalizer, Webtrends, NetPromoter, WebAnalizer.

На сайте представлена оригинальная разработка для анализа лог-файлов - Loganalyzer. С помощью ЛОГАНАЛИЗАТОРА можно определить следующие статистические данные:

Общая статистика:

• Хосты;
• Посетители;
• Просмотры;
• Поисковики.

Обращения к страницам:

• URL страницы;
• Количество посещений;
• Заходы с поисковиков;
• Трафик (Мб);
• Поддерживаемые поисковики: Yandex, Google, Rambler, Апорт, Майл.ру, Webalta

Рефереры:

• Домены;
• URL;

Поисковые запросы:

• Текст запроса;
• Количество запросов;
• Поддерживаемые поисковики: Yandex, Google, Rambler, Апорт, Майл.ру, Webalta

Поисковики:

• Наименование паука;
• Количество запросов;
• URL страницы;
• Код;
• IP паука;
• Дата запроса;
• Поддерживаемые поисковики: Yandex, Google, Rambler, Апорт, Webalta

Скачать программу и более подробно с ней ознакомиться можно на странице http://on-line-teaching.com/soft/loganaliz.html

Удачи:)