Главная :: Форум :: Web ClipArt :: Поиск :: Статистика :: Топ 10 :: Публикация :: Рекомендовать
netadmin.ws
Панель управления Регистрция свободна! Календарь Список пользователей Часто задаваемые вопросы Поиск по форуму Архив скриптов Главная   
Форум сетевых администраторов
Форум сетевых администраторов Форум сетевых администраторов » Веб Форумы » VBulletin 3.x.x » Как перенаправить пауков?
Предыдущая тема     Следующая тема
Автор
Тема    Новая тема     Ответить на эту тему
Igor
Модератор
Средний рейтинг: 4.29 | Оценок: 14
/нажмите чтобы посмотреть кто оценивал/

Зарегистрирован: Jul 2001
Место проживания: USA
Публикаций: 745
Статус: Igor в оф-лайне
Как перенаправить пауков? [сообщение #76100]

Встала серьезная проблема: пауки сожрали 20 Гигов трафика в этом месяце.

Короче, ребята, подскажите. Нужно срочно сделать так, чтобы паук распозновался, и вместо страницы темы форума ему показывалась соответсвующая страница архива.

Попутно можно решить вторую задачу, чтобы человек зашедший с поиска в архив, сразу перебрасывался на реальнкю страницу форума.

Кто может помочь?

__________________
C уважением, Игорь
cblog.ru

Сообщить модератору об этом сообщении | Предупреждение | IP: определен

Old Post 26-04-2005 22:26
Нажмите сюда для просмотра профайла Igor Отправить Персональное сообщение Igor Посетить домашнию страничку Igor! Найти сообщения от Igor Добавить Igor в свой список друзей Редактировать/Удалить сообщение Ответить Цитируя
miXei
Консультант по vB
Средний рейтинг: 4.2 | Оценок: 10
/нажмите чтобы посмотреть кто оценивал/

Зарегистрирован: Mar 2002
Место проживания: www.mixei.ru
Публикаций: 363
Статус: miXei в оф-лайне
[сообщение #76121]

Думаю, что запретить индексировать можно через .htaccess
а на Архив запрет не ставить.

А что касается автоматического перебрасывания, то поисковики вроде не любят такого.
То есть когда они будут индексировать твой архив и наткнуться на команду перебрасывания, то могут вроде не индексировать дальше.
(как на практике не знаю)

__________________
miXei.ru - Дискуссионный клуб

Сообщить модератору об этом сообщении | Предупреждение | IP: определен

Old Post 28-04-2005 07:29
Нажмите сюда для просмотра профайла miXei Отправить Персональное сообщение miXei Посетить домашнию страничку miXei! Найти сообщения от miXei Добавить miXei в свой список друзей Редактировать/Удалить сообщение Ответить Цитируя
Exist
Участник

Зарегистрирован: Jun 2004
Место проживания: Russia
Публикаций: 22
Статус: Exist в оф-лайне
[сообщение #76135]

quote:
Думаю, что запретить индексировать можно через .htaccess

хм... еще бы на серваке наглухо заблокировать ip адреса поисковиков и дело с концом...
На счет индексации надо повозиться с robots.txt (на яндексе есть хорошее описание работы с ним)
На счет редиректа... на счет редиректа - по идее (моей) паук редиректы восспнимает как ссылки для индексации... а поскольку будет запрет стоять... в общем, мысля ясна.

Exist добавил 28-04-2005 в 20:55:40:
Или еще проще:
<META name="Robots" content="index,nofollow">
Указание индексации поисковыми роботами данного документа.
Может принимать значения:
ALL - индексировать всё.
INDEX - индексировать эту страницу.
FOLLOW - индексировать ссылки на этой странице.
NONE - не индексировать, игнорировать полностью.
NOINDEX - не индексировать, игнорировать эту страницу.
NOFOLLOW - не индексировать ссылки на этой странице.
---
правим шалоблы.. - как править. ей богу не знаю.. и как с метами поисковики работают - тоже не знаю. Проверять надо.

__________________
Non fingendum aut excogitandum sed inveniendum, quid natura faciat aut ferat.

Сообщение было отредактировано Exist 28-04-2005 в 20:46

Сообщить модератору об этом сообщении | Предупреждение | IP: определен

Old Post 28-04-2005 20:33
Нажмите сюда для просмотра профайла Exist Отправить Персональное сообщение Exist Найти сообщения от Exist Добавить Exist в свой список друзей Редактировать/Удалить сообщение Ответить Цитируя
Igor
Модератор
Средний рейтинг: 4.29 | Оценок: 14
/нажмите чтобы посмотреть кто оценивал/

Зарегистрирован: Jul 2001
Место проживания: USA
Публикаций: 745
Статус: Igor в оф-лайне
[сообщение #76147]

Ð_ебяты, то что вы пишете это все ясно.
Как временное решение я так и сделал сейчас - через robot.txt запретил паукам лазить по страницам форума. Проверено, работает, вот смотрю сейчас 20 пауков находятся на сайте и все по архиву лазят.

Но идея была получше, надо средствами php определять поисковик или нет (как в online.php это делает), а потом взависимости от того поисковик это или просто посетитель одних перенаправлять редиректом с обыкновенных страниц в архив, а других наоборот с архива на обыкновенные страницы.

__________________
C уважением, Игорь
cblog.ru

Сообщить модератору об этом сообщении | Предупреждение | IP: определен

Old Post 29-04-2005 20:59
Нажмите сюда для просмотра профайла Igor Отправить Персональное сообщение Igor Посетить домашнию страничку Igor! Найти сообщения от Igor Добавить Igor в свой список друзей Редактировать/Удалить сообщение Ответить Цитируя
Igor
Модератор
Средний рейтинг: 4.29 | Оценок: 14
/нажмите чтобы посмотреть кто оценивал/

Зарегистрирован: Jul 2001
Место проживания: USA
Публикаций: 745
Статус: Igor в оф-лайне
[сообщение #76231]

Мда, обидно.

__________________
C уважением, Игорь
cblog.ru

Сообщить модератору об этом сообщении | Предупреждение | IP: определен

Old Post 06-05-2005 21:58
Нажмите сюда для просмотра профайла Igor Отправить Персональное сообщение Igor Посетить домашнию страничку Igor! Найти сообщения от Igor Добавить Igor в свой список друзей Редактировать/Удалить сообщение Ответить Цитируя
miXei
Консультант по vB
Средний рейтинг: 4.2 | Оценок: 10
/нажмите чтобы посмотреть кто оценивал/

Зарегистрирован: Mar 2002
Место проживания: www.mixei.ru
Публикаций: 363
Статус: miXei в оф-лайне
[сообщение #76240]

Думаю, можно попробовать средствами php прописать условия, что если определенные ip, то выдавать редирект или определенный контент.

Очень сильно сомневаюсь, что поисковик пойдет по редиректу и вообще будет что-то индексировать, если у тебя будет редирект.

__________________
miXei.ru - Дискуссионный клуб

Сообщить модератору об этом сообщении | Предупреждение | IP: определен

Old Post 07-05-2005 07:19
Нажмите сюда для просмотра профайла miXei Отправить Персональное сообщение miXei Посетить домашнию страничку miXei! Найти сообщения от miXei Добавить miXei в свой список друзей Редактировать/Удалить сообщение Ответить Цитируя



Формат времени GMT. Текущее время 12:18.
Новая тема   Ответить на эту тему [ Версия для печати Печать | Отправить эту страницу другу/знакомому! Отправить | Получать уведомления об обновлении этой темы Подписка ] Предыдущая тема     Следующая тема
Навигация по форуму:
Оценка темы:

Правила форума:
Вы не можете создавать новые темы.
Вы не можете отвечать на существующие темы.
Вы не можете прикреплять файлы.
Вы не можете редактировать свои сообщения.
HTML теги выкл.
Спец. код вкл.
Смайлики вкл.
[IMG] тег выкл.
 

Page generated in 0.01143909 seconds (36.77% PHP - 63.23% MySQL) with 23 queries.


  Главная :: Форум :: Web ClipArt :: Поиск :: Статистика :: Топ 10 :: Публикация :: Рекомендовать
©NetAdmin.ws, 2001-2026.
Powered by: vBulletin
Copyright ©2000, 2001, Jelsoft Enterprises Limited.