За 2007-05-30

Re[5]: robots.txt

Hello Ryoga67,

Первое (возможно не самое верное) решение, которое пришло в голову-
генерить robots.txt динамически.

Все для веб-мастера на http://www.htmlinfo.kiev.ua
Форум для веб-мастеров: http://forum.htmlinfo.kiev.ua

   2007-05-30 20:47:28 (#669182)

Re[4]: robots.txt

>> Disallow: /div?tableID=16
>> вот так будет правильно.

> Не факт. Есть еще метатэги: <meta name="robots" content="noindex,follow">
> (по ссылкам пускай ходят ))) )

Не возможно, страница динамическая и данный параметр в движке не
выставляется для определённой страницы.

> А вообще задача непонятна. Почему не надо индексировать страницу? Это же не
админка...
> Если страницы нет, то надо заголовок 404 отдавать.

> Алексей

Дублирующийся контент
> User-agent: *
> Disallow: /вписывай, что не должно индексироваться/

> Zigzag

Страница динамическая и не находиться в каталоге.

Решил проблему следующим образом добавил страницу занова старую
удалил в итоге ссылка имеет следующий вид
http://kinzaza.za/div?tableID=298 вот эту страницу и запретил в
robots.txt так как данный префикс ни где более не встречается.

   ryoga***@m*****.ru 2007-05-30 19:00:11 (#669168)