В последнее время интернет ресурсы достаточно стремительно развиваются. Появляются все новые и новые сайты. Да и контент стремительно растет. Поисковые системы соответственно все больше и больше работают, пережевывая поступающую информацию. Под этим понимается индексация новой информации и