| Elite-Board tech support https://forum.illusionweb.ru/ |
|
| Индексация в поисковиках, нагрузка ботов на сайт https://forum.illusionweb.ru/viewtopic.php?f=3&t=3934 |
Страница 1 из 1 |
| Автор: | armn555 [ 21 апр 2020, 21:56 ] |
| Заголовок сообщения: | Индексация в поисковиках, нагрузка ботов на сайт |
Здравствуйте Мой сайт начал сильно тормозить и отключатся, произошло это по проблеме активной индексации моего сайта ботами yandex Я спустил обход в веб мастере на самый минимальный но это не помогло. Вот их сообщение: Проверили ситуацию с сайтом Скрытая информация , видим, что на данном ресурсе располагается очень большое число ссылок с get-параметрами по адресам вида Скрытая информация /?action=pub_profile&id=100&type=5&c=466&l=611717 . Так как таких ссылок очень и очень много, робот может совершать достаточно большое число обращений, чтобы проиндексировать их все. Если такие страницы не должны индексироваться, например, их контент уже есть в поиске на других страницах сайта, вы можете ограничить их индексирование в robots.txt сайта, например, директивами вида:Disallow: *type= Disallow: *id= Тогда робот будет знать, что индексировать их не нужно, и не будет к ним обращаться, это в свою очередь должно помочь уменьшить число запросов к сайту. Подробнее о файле robots.txt вы можете прочитать на странице нашей Помощи: https://yandex.ru/support/webmaster/con ... s-txt.html . Рекомендую вам также воспользоваться инструментом проверки файла robots.txt: https://webmaster.yandex.ru/tools/robotstxt/ . Непосредственно в инструменте вы можете корректировать указания и проверять, запрещены или разрешены необходимые вам страницы к индексированию. Обращение мое разработчику: Помогите решить проблему, как и что закрыть от индексации в robot.txt ,Что бы сайт не пострадал и что бы поисковики не нагинали сайт а брали только полезную информацию. А то хостинг тариф не слабый, но все же не выдерживает...думаю будет полезно всем. |
|
| Автор: | Geo [ 21 апр 2020, 23:28 ] |
| Заголовок сообщения: | Re: Индексация в поисковиках, нагрузка ботов на сайт |
В Elite-Board нет модулей, которые бы генерили такие ссылки. Это что-то чужое. |
|
| Автор: | Равиль [ 22 апр 2020, 05:07 ] |
| Заголовок сообщения: | Re: Индексация в поисковиках, нагрузка ботов на сайт |
Ничего подобного, в логах сервера нет. Смотрите что сами добавляли, сторонние скрипты к примеру. Уделите внимание тому, включена ли авторизация через соцсети. От них такой шлак может идти. Перепроверьте целостность модулей, возможно к вам кятай в гости приходил. Эти постоянно что-то нашустрить пытаются (минимум раз в сутки). Не смотря на то, что доступ всей стране закрыл. Ещё можно с первого цода ллк, все IP банить. О туда постоянное сканирование всех страниц сайта идёт. |
|
| Страница 1 из 1 | Часовой пояс: UTC + 3 часа |
| Powered by phpBB® Forum Software © phpBB Group https://www.phpbb.com/ |
|