Новости портала "Горячие ссылки"

Здравствуйте!

Приветствую читателей новостей HotLinks.Ru. В данный момент у рассылки следующее количество подписчиков: 1142. В соответствии со сложившейся за последние месяцы традицией майские обновления коснулись почти всех материалов сервера. Возможно, этот месяц будет последним для такого широкого фронта модернизаций - во-первых, наступает лето, то есть пора отдыха и перерыва в работе, во-вторых, получается, что все идеи по переделке портала, придуманные за последние годы (!), почти претворены в жизнь. Но не будем загадывать далеко вперед и оглядываться назад, перечислю, что изменилось за месяц.

Проверка доступности серверов
Новое в каталоге ресурсов
Модернизация программ рейтингов
Новости "ГАДского вестника"
Обновления портала в целом

Проверка доступности серверов

Главным достижением мая стала система проверки "живых" ссылок, задуманная еще в 1999-2001 годах. И вот теперь она, наконец, реализована - вся техническая часть разработана Владиславом Арановым. Программа позволяет не только отсеивать "битые" ссылки, но и обладает некоторыми дополнительными возможностями:

• Фиксация времени обработки запроса, проверяющего доступность сервера.
• Фиксация даты последнего изменения документа, которую сообщает запрашиваемый сервер.
• Отслеживание доступности ссылки на предыдущей проверке для контроля изменения статуса доступности.
• Теперь при регистрации новой ссылки в каталоге проверяется ее доступность, некорректные с этой точки зрения заявки блокируются. За 10 дней проигнорировано 37 ссылок (примерно 10% регистрирующихся).
• Готовится к запуску система регулярной автоматической проверки всех ссылок каталога. Оценки показали, что полный проход всей базы данных разумно производить за два-три месяца, то есть ежедневно проверять около 200 ссылок.

Первичная проверка показала, что на 3589 доступных ссылок каталога приходится 960 некорректных (давно зарегистрированных или вообще ошибочных). Большинство запросов обрабатывались менее чем за одну секунду, но в среднем на проверку одной ссылки тратится две секунды. Возвращаемая сервером дата последнего обновления документа в подавляющем большинстве случаев является текущим днем, так что обрабатывать это число смысла не имеет. Подробности итогов двух проверок представлены далее.

Результаты по категориям ссылок

Первая фронтальная проверка всей базы данных каталога показала, что "качество" ссылок (процент недоступных) различается в разных группах ресурсов:

По таблице видно, что самые "качественные" ссылки зарегистрированы через форму на HotLinks.Ru, далее идет лидирующая сторонняя система регистраций. Хуже всех регистрации с остальных систем, скорее всего, там регистрируется много сайтов - однодневок, которые быстро закрываются. Предпоследнее место - у "проверенных", то есть у аннотированных администратором ссылок: дело в том, что проверка многих из них проводилась уже несколько лет назад, и многие из ссылок за это время также устарели.

Проверка времени доступа

В следующей таблице представлено распределение по "быстроте" обработки запроса, проверяющего доступность сервера:

Суммарное время, требующееся на проверку всей базы ссылок, составляет около 12 часов. Для разных страниц время ответа варьировалось в диапазоне от 30 миллисекунд до 10 минут.

Проверка возвращаемой даты

Для части базы зафиксирована дата последнего обновления документа-ссылки, возвращаемая сервером:

Из таблицы видно, что реальные даты обновления документа, если они отличаются от текущей, возвращаются только в 3,5% случаев - то есть анализировать такие данные регулярно для всех ссылок смысла не имеет.

Анализ изменений статуса доступности

Когда часть базы была проверена повторно через две недели после первой проверки, из 16325 ссылок 403, бывших ранее доступными, стали недоступны, а 379, ранее отмеченных как "битые", заработали.

Следующим образом выглядит распределение "пришедших" и "ушедших" ссылок в зависимости от того, была ли проверена аннотация на данный ресурс:

Таким образом, если за две недели меняет свой статус каждая десятая ссылка, то разумно проверять всю базу за два-три месяца.

Новое в каталоге ресурсов

Во-первых, расширение возможностей основного интерфейса коснулось левого фрейма (формы отбора ссылок):

• Переключатель "только проверенные ссылки" обозначает теперь, что отображаются только проверенные (то есть аннотированные когда-либо администратором) и доступные при последнем "обходе" базы данных сайты.
• Рубрикатор тематических разделов каталога в виде дерева задействован при регистрации новой ссылки: теперь вначале производится выбор раздела (по данному интерактивному списку), потом заполняется остальная часть анкеты регистрации.
• Под списком разделов помещены ссылки на титульную страницу каталога и форму регистрации нового ресурса - эти ссылки различаются для русской и англоязычной версий каталога, работающих, тем не менее, в рамках единого интерфейса.

Что касается регистрации новых сайтов, то интерфейс заполнения заявки - уведомления о регистрации существует в полностью англоязычном варианте, так что только с нынешнего момента "международный" вариант каталога стал действительно полноценным.

Дополнительная информация появилась и на правой половине экрана - в перечне отобранных ссылок:

• Если показаны сайты только одного тематического раздела (обычно это происходит при активизации ссылки в списке разделов слева), по умолчанию отображается и описание этого раздела с указанием числа ссылок и суммарных итогов рейтинга.
• Если в базу каталога внесены несколько документов с некоторого сервера, после указания одного из них выводился текст "Документов с сервера: количество". Теперь это сообщение оформлено в виде ссылки, отображающей список всех документов с данного сервера в базе каталога (то есть фактически производится поиск по доменному имени).
• В дополнение к информации о том, является ли или нет аннотация на ссылку проверенной, сообщается о возможности доступа к ресурсу и о времени обработки запроса при обращении с сервера HotLinks.Ru (в миллисекундах). Дополнительно указывается, была ли ссылка доступна при предыдущей проверке, если теперь она недоступна, и наоборот.

Кроме того, исправлено несколько недоработок и ошибок, в том числе:

• Оптимизирован запрос отбора участников рейтинга TopXX - теперь из отборной категории исключены дублирующиеся ссылки.
• При указании "авторской" регистрации ссылок (внесены администратором в 1999-2000 гг.) фон логотипа каталога изменен с синего на желтый для лучшей читаемости надписи.

Модернизация программ рейтингов

У рейтинга сайтов TopXX появилась только одна новая особенность: в режиме "Весь срок" (переименованном в "Итог") при выборке по второй категории (Gold) отображается дополнительный столбец с указанием суммарного числа визитов ("нажатых" ссылок на документы с данного сервера). Возможно сортировка в порядке убывания значений данной графы.

Для рейтинга документов нашего сервера Top20 список нововведений значительно шире:

• Две дополнительные графы, доступные только в режиме отображения информации по тематическим разделам каталога ресурсов за весь срок работы сервера, аналогичны предыдущем пункту анонса: это столбцы с суммой визитов (общее число "нажатий" ссылок данного раздела) и суммой показов (общее число обращений с серверов, ссылки на которые размещены в данном разделе). Для упрощения расчетов учитываются только сайты - участники рейтинга TopXX.
• Во всех режимах второй категории (информация о тематических разделах) возможен отбор только авторских разделов (на данный момент 10 разделов из 206, у каждого из которых есть свой ведущий). При сортировке по графам "визиты" и "показы" перечисляются только те разделы, сайты из которых участвуют в рейтинге TopXX.

Описывая нововведения рейтинга Top20, включающие запросы из разных таблиц базы данных, стоит еще раз объяснить, чем отличаются данные о разделах, выводимые в разных областях интерфейса каталога:

• Данные в перечне разделов (левый фрейм основного интерфейса) суммируются по основной таблице ссылок или по таблице ссылок - участников рейтинга TopXX: номер раздела, количество ссылок, дата последнего обновления и суммарный рейтинг (число визитов по ссылкам или число показов - обращений с сайтов участников рейтинга).
• Эти же данные выводятся в части описания раздела справа, если оно запрашивается. Все суммарные величины определяются по тому набору ссылок, который найден или выбран. Общий рейтинг раздела здесь учитывает число обращений к интерактивной странице данного раздела (после ее появления) плюс рейтинг данного раздела старого каталога за 1999-2001 годы.
• Основой для выборки данных о разделе в рамках интерфейса рейтинга Top20 является специализированная таблица, в которой суммируются посещения статических файлов раздела за каждый день, месяц и так далее. А данные о визитах и показах запрашиваются из других таблиц, выступающих в роли дополнительных, - если в этом возникает необходимость.

Новости "ГАДского вестника"

Несколько новых материалов оформлены в виде очередного, 36-го, выпуска журнала. Это следующие статьи:

• Творчество - "Вера" (рассказ представляет Senna, выступая уже не только в роли автора фантастики): "Атеизм - это отсутствие какой-либо веры. Я же верю. Я верю в себя. Правда, хорошая вера?"
• Жизнь в Сети - "Письма счастья" (публикация личной коллекции Вашего покорного слуги): "В один прекрасный день Вы получаете предложение разослать копии полученного Вами текста по еще нескольким адресам, после чего подарки судьбы посыплются на Вас, как из рога изобилия".
• Измерение "Ф" - "Средиземье - ничего себе мирок!" (самопародия авторов публикуемого у нас фентезийного романа): "На экране - одна сплошная чернуха. Два черных всадника на черных конях мчатся куда-то на фоне черной-пречерной ночи."
• Вокруг света - "101 км удивительной жизни" (вторая попытка Екатерины Кумзеровой принять участие в суточном лыжном марафоне): "Это не казалось возможным, да и сейчас я с трудом верю, что это таки произошло. Но, пожалуй, мы действительно этого хотели, поэтому все получилось."

• Изменилось оформление страницы оглавления, особенно "трех таблиц" (Рубрики / Авторы / Выпуски): они выделены рамками, ниже для комментария приведено описание того, что в таблицах указано.
• При заполнении трех таблиц действуют условия поиска и отбора статей из основного их перечня: список рубрик, авторов и выпусков, количество статей, общий рейтинг и максимальная дата определяются по общим условиям. Отбирая все статьи одного автора, можно увидеть, сколько из них попало в ту или иную рубрику, и какой общий рейтинг они там получили.
• Ссылки в общем списке каждой из трех таблиц включают в себя все параметры поиска, поэтому после отбора всех статей одного автора можно еще и ограничиться только одной из рубрик.
• В верхней части каждой из трех таблиц может быть размещена ссылка, отменяющая выборку по данному параметру. Если отображаются все рубрики, то заголовок таблицы - просто слово "Рубрики", если выбрана одна рубрика - это ссылка, отменяющая условие.
• Через все ссылки на странице оглавления, вызывающего его новые варианты, передается полный набор параметров поиска, отбора и сортировки. Это относится к формам поиска статей и изменения количества статей в списке на одной странице.
• Наконец, при вызове конкретной статьи из оглавления журнала материал оформляется в виде "газетного стенда": вверху указан заголовок статьи - ее название, автор, рубрика и номер выпуска журнала, а по бокам текста - деревянная поверхность стенки…

Обновления портала в целом

Новые материалы появились на персональной странице автора проекта: это текст одного из отчетов по научной работе и переоформление страницы в целом. Теперь она представляет собой что-то вроде "линии жизни" из мультимедийной энциклопедии, где каждому событию за последние пять лет соответствует пиктограмма, открывающая окно с дополнительной информацией. Здесь перечислены все проекты, над которыми я работал и продолжаю работать. А посвящается эта страница очередному Дню Рождения: пусть он еще и нескоро, зато юбилей!

Чтобы разобраться в очередной раз, какие из материалов сервера являются более популярными, была определена посещаемость разных статей. Вот что получилось:

С учетом этих данных был изменен внешний вид титульной страницы сервера:

• Ссылки на программы рейтингов вынесены на центр первого экрана и оформлены в виде частей логотипа проекта.
• Список "Другие страницы" переработан: изменен их порядок, добавлены ссылки на альтернативные титульные страницы.
• Размещена таблица с перечнем 10 статей "ГАДского вестника": они выбраны из самых популярных таким образом, чтобы принадлежать десяти разным авторам, разным рубрикам и выпускам журнала. В таблице представлены ссылки на все эти статьи, ссылки на страницы с информацией о рубриках, авторах и выпусках и форма поиска по оглавлению.
• Изменились параметры информера с программкой телепередач. Ошибка, из-за которой он временно не функционировал, исправлена.
• Логотип рейтинговой системы SpyLOG размещен на большинстве страниц сервера - опять же, с учетом данных последней таблицы.

Таково состояние проекта на начало лета, как я говорил, может наступить период застоя... Но работать-то все сделанное точно будет даже в самые худшие времена!

      До встречи, Ваш Александр Левченя
      WWW: http://www.hotlinks.ru
      E-mail: webmaster@hotlinks.ru