Агрессивное сканирование google ботами

Тема в разделе "PrestaShop", создана пользователем Maimeri, 12 авг 2019.

  1. Maimeri

    Maimeri

    Регистрация:
    17 окт 2015
    Сообщения:
    53
    Симпатии:
    4
    Всем доброго времени суток.

    90+ дней назад гугл-боты создавали нагрузку на сервер и я ограничил скорость сканирования сайта. Пару дней назад ограничение спало и за последние два дня ботом с ip адреса 66.249.64.199 поступило 6,4565 CPU, %, что сильно нагрузило сервер.

    Мне интересно он и дальше так же агрессивно будет сканировать или снова будет требоваться ограничивать скорость сканирования?

    Отмечу, что ранее такого не замечалось и все было нормально. Никогда до этого момента трех месячной давности сайт на превышал ограничения серверных минут хостинга. А потом стало как помазано и гугл боты стали так рьяно сканировать сайт.
     
  2. Dotrox

    Dotrox Команда форума

    Регистрация:
    27 ноя 2012
    Сообщения:
    3.198
    Симпатии:
    1.306
    Перед этим не было добавления товаров/категорий?
    Какой возраст сайта?


    Стоит сразу сказать, что ПрестаШоп довольно требователен к ресурсам и повышенная нагрузка совсем не означает слишком агрессивное сканирование.
     
  3. Maimeri

    Maimeri

    Регистрация:
    17 окт 2015
    Сообщения:
    53
    Симпатии:
    4
    Сайту лет 7 кажется. Товар добавляется и редактируется практически каждый день. Но раньше такой ситуации не наблюдалось.

    На сегодняшний день и момент нагрузка от ip 66.249.64.199 составляет 1,0909 CPU, %. Может "наелся" за эти два дня...