−4°C
завтра: 4°C
Погода в Перми
−4°C
утром−4°C
днем5°C
завтра4°C
Подробно
 64,07
+0.1238
Курс USD ЦБ РФна 19 апреля
64,0688
+0.1238
 72,24
−0.1162
Курс EUR ЦБ РФна 19 апреля
72,2440
−0.1162
  • v.i.p.

    Сообщений: 13142

    Вопрос сайтостроителям. Собственно в заголовке.

    Описание проблемы: с вводом нового сервиса статистики на портале (в профиле), обнаружилось что робот Гугля, сканирует странички, закрытые:

    1. В файле robots.txt
    2. js скриптом так: onclick="window.location(урл)" (то что такие ссылки он находит - есть даже в их справке)
    3. есть подозрение, что он ваще js интерпретирует легко...

    В индекс такие страницы как и положено не лезут (пока не обнаружены), но все равно неприятно... ходит ведь по ним - легко!

    Более того, похоже что эта скотинка, анализирует элементы форм (select, input) и содержимое подставляемое get-ом подставляет в урл, комбинируюя произвольным порядком... у меня в сервисе вебмастера периодически появляются "неправильные" ссылки с ошибкой 404, 500 из таких сочинений...

    Особливо интересно в свете их последних нововведений по ранжированию и пессемизациям...:хммм:

    "Только так, только личная инициатива и напряженная работа над собой. Вот я вас хочу именно к этому призвать .. Нужно своей собственной рукой все делать" (с) В.В. Путин :)

  • guru

    Сообщений: 9338

    Вы ведь понимаете, что это невозможно. Все что сервер отдал - будет прочитано и пережевано. Не гуглем - так еще кем-то.
    Единственный вариант - ориентируясь на "client name" не выдавать контент страниц (скриптов), который хотите спрятать. Но вы понимаете, что это
    а) несерьезно (никто не гарантирует имя робота, никто не гарантирует, что нет другого робота того же гугля, с другим именем, который иногда ходит "для проверочки")
    б) да еще и чревато подозрениями со стороны поисковиков, что вы их обманываете (см. выше "проверочка").

    Предлагаю забить.

  • guru

    Сообщений: 9338

    В ответ на: с вводом нового сервиса статистики на портале (в профиле), обнаружилось что робот Гугля, сканирует странички, закрытые
    А статистика без пароля? т.е. вы ее всем показываете?

  • v.i.p.

    Сообщений: 13142

    Понимаю, поэтому и спрашиваю.

    Ваще-то спасибки... пока придумывал пример когда надо скрыть ссылку с публичной странички на приватную, нашел решение, "попердикулярное" вопросу... Собственно вопрос - снят. Надо просто выкинуть ещё кусок "суперкода" с портала...:миг:Всё гораздо проще делается.:миг:

    "Только так, только личная инициатива и напряженная работа над собой. Вот я вас хочу именно к этому призвать .. Нужно своей собственной рукой все делать" (с) В.В. Путин :)

  • v.i.p.

    Сообщений: 13142

    Месяц висело в общем доступе (это та статистика отдачи страниц сервером, которая голубенькая в каждом левом нижнем углу портала над счетчиками мейла и лыж). Щас полностью доступна только платникам. В ближайшее время планируем запустить подневные графики посещений...

    "Только так, только личная инициатива и напряженная работа над собой. Вот я вас хочу именно к этому призвать .. Нужно своей собственной рукой все делать" (с) В.В. Путин :)

Записей на странице:

Перейти в форум

Модератор: