Отправляет email-рассылки с помощью сервиса Sendsay
  Все выпуски  

Новости портала "Горячие ссылки"


     Здравствуйте!

      Приветствую читателей новостей проекта "Горячие ссылки". В данный момент у рассылки следующее количество подписчиков: 949.

Прошло достаточно времени, чтобы подвести итоги весенней блокировки запросов от поисковых роботов к динамически генерируемым страницам нашего проекта. В таблице 1 приведены данные о доле запросов к страницам сервера, формируемых роботами поисковых систем, по отношению к общему числу запросов всех посетителей. Сравниваются данные до и после блокировки запросов к динамическим страницам. Столбцы в таблице упорядочены в порядке убывания доли запросов после блокировки.

Таблица 1

Робот
Все
Yahoo! Slurp Yandex Link Valet StackRambler GoogleBot MsnBot Mail.Ru/1.0
До
23%
7.80%
2.20%
1.50%
1.40%
0.50%
0.80%
8.50%
После
4.10%
1.50%
0.84%
0.57%
0.47%
0.37%
0.18%
0.10%

Видно, что результат достигнут: доля запросов от роботов сократилась в 6 раз до более чем приемлемого уровня. За исключением некоторых, роботы сохранили свое относительное влияние на общий итог.
В таблице 2 по данным рейтинга Top20 определены 10 наиболее востребованных файлов сайта до и после блокировки, приведены данные за отдельный день. Числа соответствуют количеству запросов, суммарной нагрузке на сервер (именно в порядке ее убывания и упорядочены строки в двух частях таблицы) и среднему размеру загружаемого файла. Строки левой части пронумерованы по порядку, а соответствующие номера некоторых страниц повторяются справа.

Таблица 2

До блокировки Запросы Трафик Размер       После блокировки Запросы Трафик Размер
  Всего
116587
470 M
4 K
  Всего
106884
276 M
2 K
1. /cgi-bin/hotsql.pl
7504
144 M
19 K
2. /banners/hotbutt.php
45796
117 M
2 K
2. /banners/hotbutt.php
42330
111 M
2 K
3. /banners/hotbutt.gif
52404
96 M
1 K
3. /banners/hotbutt.gif
49159
90 M
1 K
5. /cgi-bin/form.pl
306
11 M
36 K
4. /cgi-bin/hadpress.pl
1732
24 M
14 K
1. /cgi-bin/hotsql.pl
213
4 M
22 K
5. /cgi-bin/form.pl
398
14 M
36 K
10. /
126
3 M
28 K
6. /cgi-bin/topref.pl
687
14 M
21 K
7. /images/hot.gif
373
3 M
9 K
7. /images/hot.gif
793
5 M
7 K
*. /cgi-bin/urllist.pl
57
2 M
46 K
8. /cgi-bin/reg.pl
1449
5 M
4 K
8. /cgi-bin/reg.pl
612
2 M
4 K
9. /cgi-bin/top20.pl
847
5 M
6 K
6. /cgi-bin/topref.pl
49
704 K
14 K
10. /
177
4 M
23 K
4. /cgi-bin/hadpress.pl
30
369 K
11 K

Итоги так же очевидны: число запросов к серверу снизилось всего на 8%, т.е. информативно он ничего не потерял, в то время как суммарный трафик снижен на 41%. По отдельным строкам таблицы 2 (страницам проекта) можно сказать следующее:

  • на страницы каталога сайтов (№1) и интерактивное оглавление <ГАДского вестника> (№4) до блокировки роботов ложилась максимальная нагрузка, теперь она настолько снизилась, что оглавление Журнала чуть не вышло за пределы первой десятки;
  • кнопки счетчика (№2) и логотипа (№3) проекта сохранили свои по справедливости лидирующие позиции, на них блокировка, как и ожидалось, не отразилась;
  • уменьшение нагрузки на остальные скрипты (№№5-6, 8-9) фактически увеличило влияние статических страниц (№10 как пример) и важной динамической страницы, обозначенной символом (*) в правой части таблицы 3 - это перечень лидирующих сайтов Каталога, который индексируется поисковыми системами и дает всей Сети представление об информационной наполненности Каталога.

Такие вот результаты, в следующем выпуске рассылки продолжим обсуждение развития проекта.

     Ваш Александр Левченя
      Адрес сайта: http://hotlinks.ru
      Электронная почта: webmaster@hotlinks.ru


В избранное