Перейти из форума на сайт.

НовостиФайловые архивы
ПоискАктивные темыТоп лист
ПравилаКто в on-line?
Вход Забыли пароль? Первый раз на этом сайте? Регистрация
Компьютерный форум Ru.Board » Интернет » В помощь вебмастеру » Скрипт сокрытия внешних ссылок от поисковиков

Модерирует : Cheery

 Версия для печати • ПодписатьсяДобавить в закладки

Открыть новую тему     Написать ответ в эту тему

IFKey



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
 
Скрипт для сокрытия внешних ссылок (на каталоги сайтов) от поисковиков. Собственно любая информация и решения по теме ищутся.
Немаловажно еще, что скрытая от поисковика ссылка должна быть видна роботу каталога или рейтинга.

Всего записей: 331 | Зарегистр. 20-03-2007 | Отправлено: 11:32 07-05-2012 | Исправлено: IFKey, 12:07 07-05-2012
Cheery



.:МордератоР:.
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
IFKey
смотрите user-agent и выводите или не выводите в зависимости от поисковика.
типичная вещь для "вирусов" на сайте, что уводят трафик.

----------
Away/DND

Всего записей: 52737 | Зарегистр. 04-04-2002 | Отправлено: 17:53 07-05-2012
IFKey



Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Названия поисковых ботов:
_http://www.pkgid.ru/index.php?name=News&op=view&id=317
Написал простенькую функцию...
 
Функция определения бота:
Цитата:
function checkBot($bots)
{
  $i = 0;
  foreach($bots as $botname)
  {
    $pos = strpos($_SERVER["HTTP_USER_AGENT"], $botname);
    if ($pos !== false) $i++;
  }
  if ($i>0) return true;
  return false;
}

 
Использование:
Цитата:
# выдавать ссылки всем кроме поисковых ботов
$bots = array(
'aport',
'archive_org',
'Ask Jeeves',
'booch',
'GetSmart',
'GigaBlast',
'Gigabot',
'Googlebot',
'grub-client',
'ia_archiver',
'Jetbot',
'libwww',
'Lycos',
'MnoGoSearch',
'Yahoo',
'msnbot',
'NaverBot',
'oBot',
'Openbot',
'rambler',
'scooter',
'slurp@inktomi',
'StackRambler',
'SurveyBot',
'TurnitinBot',
'TurtleScanner',
'Vampire',
'Webalta',
'WebCrawler',
'WebZIP',
'WhatUSeek',
'Yandex',
'YaDirectBot',
'YandexBlog',
'YandexSomething',
'Googlebot'
);
if (!checkBot($bots)) {
    # код счетчиков и баннеров...
}


----------
Предлагаю запчасти для спецтехники и пышные юбки пачки :)

Всего записей: 331 | Зарегистр. 20-03-2007 | Отправлено: 12:05 24-05-2012 | Исправлено: IFKey, 12:14 24-05-2012
Solenyi_XYU

BANNED
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Благодарю, будем пробовать в работе




Нарушение п. 3.2.2. главы IV Соглашения по использованию, набор постов.

Всего записей: 10 | Зарегистр. 22-12-2020 | Отправлено: 13:06 27-12-2020
ValeraKer

Newbie
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Все, что доступно пользователю, будет доступно поисковику!

Всего записей: 14 | Зарегистр. 14-02-2021 | Отправлено: 19:50 14-02-2021
Mavrikii

Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
ValeraKer
а кто сказал, что речь о пользовательской стороне? очевидно же, что по UA/IP на стороне сервера можно определить поисковик или нет и не выдавать ненужные ссылки.

Всего записей: 11639 | Зарегистр. 20-09-2014 | Отправлено: 03:31 15-02-2021
cppasm

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
Mavrikii
Он про то, что в общем случае никто не мешает поисковику указать UserAgent какого-нибудь браузера например - и все эти попытки что-то скрыть окажутся бесполезными.

Всего записей: 846 | Зарегистр. 19-12-2006 | Отправлено: 14:08 15-02-2021
Mavrikii

Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
cppasm
Не про то. И поисковики не меняют свой UA, как и диапазон сети.

Всего записей: 11639 | Зарегистр. 20-09-2014 | Отправлено: 15:22 15-02-2021
cppasm

Advanced Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору

Цитата:
Не про то.

Ну если ты умеешь мысли читать то ок.
 

Цитата:
И поисковики не меняют свой UA, как и диапазон сети.

Вопрос в том какие поисковики.
В вопросе как-то не написано от какого конкретно поисковика надо скрыть.
Несмотря на длинный список в ответе - он явно неполный.
Во-вторых - расскажи в чём техническая сложность сделать поисковую систему которая для бота будет посылать такой-же UserAgent как какой-нибудь браузер?
Человек про это и написал - всегда есть возможность прикинуться "пользователем" и получить контент, было бы желание.
Скрыть от конкретных популярных поисковиков - да, можно.
Но это не то же самое что "скрыть от поисковиков".

Всего записей: 846 | Зарегистр. 19-12-2006 | Отправлено: 16:17 15-02-2021
Mavrikii

Platinum Member
Редактировать | Профиль | Сообщение | Цитировать | Сообщить модератору
cppasm

Цитата:
Вопрос в том какие поисковики.

Официальные, легальные, популярные.
До остальных вебмастеру нет дела.
 
Очевидно же почему вообще тема была создана.

Всего записей: 11639 | Зарегистр. 20-09-2014 | Отправлено: 18:54 15-02-2021
Открыть новую тему     Написать ответ в эту тему

Компьютерный форум Ru.Board » Интернет » В помощь вебмастеру » Скрипт сокрытия внешних ссылок от поисковиков


Реклама на форуме Ru.Board.

Powered by Ikonboard "v2.1.7b" © 2000 Ikonboard.com
Modified by Ru.Board
© Ru.Board 2000-2020

BitCoin: 1NGG1chHtUvrtEqjeerQCKDMUi6S6CG4iC

Рейтинг.ru