Вопрос #73580

 #  

 #  

Формально можно использовать файл robots.txt, в котором прописаны запреты для роботов. Однако по факту ничего не помешает роботу проигнорировать запрет и внести информацию не в основную базу данных (на основе которой формируется поисковая выдача), а во внутреннюю, используемую специалистами поисковика для сбора дополнительной информации о ресурсах.

Отчасти проблему можно решить, анализируя инфу агента, просматривающего сайт. Поисковые роботы честно обозначают себя как роботов. Однако тут легко нарваться на санкции со стороны поисковика за то, что людям и роботам предоставляется различная информация. С другой стороны у роботов неактивен механизм JavaScript, что уже можно использовать. Сценарий на JavaScript формирует ссылки, которые в реальном браузере становятся активными; робот эти сценарии видит, но не выполняет, поэтому сами ссылки уже не воспринимает. Кроме того все внутренние сценарии страницы воспринимаются как служебная часть, не подлежащая просмотру пользователем, поэтому роботы вообще их игнорируют.

Если я в чём-то ошибаюсь, пусть меня поправят.

 #  

Quark пишет

механизм JavaScript

Я не знаю будут ли видеть эту ссылку роботы, просто даю пример вышеизложенного. Чего то типа такого http://prntscr.com/dq0wfz

Приблизительный пример посмотрите здесь http://javascript.ru/forum/dom-window/26645-nocreateElement-noonclick.html#post163477

 #  

тегами но фолов, но реф - типа для яндекса и гугла

 #  

urchem пишет

тегами но фолов, но реф - типа для яндекса и гугла

читал типа теги не катят эти..
мне нужно что бы роботя яши и гугул вообще не увидели ссылку в статье ибо будет плохо дело для сайта

 #  

Сделайте Flash-ссылку. По моему её робот не увидит http://jobs.besaba.com/wmmail/job.html

Это исходный код страницы http://prntscr.com/dqalob
А это сам код флешки http://prntscr.com/dqam2r

P.S. не думаю что робот будет анализировать флешку.
Если такое подойдёт с флешкой могу помочь.

Добавлено спустя 11 минут 14 секунд
Флешка размещается где угодно хоть и на другом сайте, в данном случае на одном и в одной директиве со страницей http://prntscr.com/dqaogx

Добавлено спустя 27 минут 46 секунд
Вместо текста ссылки можно вставить что угодно(картинку, анимацию, видео и т.д.)

Добавлено спустя 1 час 03 минуты 20 секунд
Ну и контрольный выстрел:

var a1 = "http://";
var a2 = "www.wmmail.ru/";
var a3 = "index.php?cf=wall-viewuser&uid=";
var a4 = "1257597";
navigateToURL(new URLRequest(a1+a2+a3+a4), "_self");