Очередной "шедевр"

[zubr]

А почему бот не будет ходить по js-ссылкам. Я недавно делал бота, ходит прекрасно по скриптам и в яндекс-метрике все как надо отрабатывает.

[Sla]

Потому что поисковому боту это не нужно (мое мнение)
А специализированному? Ну... пусть ходит.
Интересно было бы посмотреть на более нагруженных проектах действия "пользователя" через вебвизор.
Но вот то что я вижу, что есть "пользователи", которые заходят с отключенными js, Пусть функционал сайта (не этого) и прост как двери, но тем не менее, хотя бы галерея есть. А вот у меня есть проектик, так он построен весь на аяксе, и двигают его только ссылками и директом, вкладывая "безумные" бабки. Вот с этого проекта у меня и появилась идея такое сделать. А будет готово и отработана, предложу людЯм.
И потом, а почему боту с js  и не ходить по ссылкам, но по правильным ссылкам.

Яметрика, как я понимаю, вешается на клик, анализируя,  что кликает, а боты не имитируют клик.
zubr, ты клики имитировал?

А вот такую конструкцию, например
$('a').click(function(){
   window.location= ($this).attr('rel')
});

как ее без клика отработать?

[zubr]

Мой бот имитацию через браузер делал - клики по ссылкам, побуквенный ввод в поисковую строку, перемещение мыши, скроллинг страницы и т. п. - все имитируется.

З.Ы. По крайней мере у заказчика на тестируемых сайтах - в первые позиции поисковика вывел.

[Sla]

zubr, интересно глянуть

[zubr]

Sla, в личку закинул демку.
В течение работы демки в каталоге появится лог, показывающий под каким ip выходил, с каким юзер-агентом, какие страницы открывал на какое время.

[zubr]

Sla, только не злоупотребляй. Много раз подряд не прогоняй, потому как там прогон будет идти под одним и тем же ip и юзер-агентом. Яндекс может забанить этот айпишник.

[Sla]

Прикольно, а че меня банить? Я один раз на Я зашел, а.. конфиг-то не у меня, конфиг там на сервере
И небось поисковые фразы тоже на сервере?

[zubr]

Поисковые фразы в конфиге, там же и список айпишников и юзерагентов. У тебя только эмулятор, есть еще и программа-менеджер, которая загружает конфиг и рандомно распределяет в течение суток запросы. И исходя из полученного графика вызывает эмулятор.
Если много раз заходить под одним айпишником, то могут забанить айпишник сервера, на котором крутится php-ный скрипт, играющий роль прокси.

З.Ы. Забыл предупредить, при запуске проги чистятся куки и история. Но уже поздно.

[Sla]

З.Ы. Забыл предупредить, при запуске проги чистятся куки и история. Но уже поздно.

А я не пользую ИЕ.

[zubr]

А я не пользую ИЕ.

И это хорошо.

[Sla]

Кстати, а идея сработала.

В индексе появились нужные страницы, вернее ссылки. Теперь осталось допилить