директива забранява индексирането

  • Crawl го забави
    Създаване на Robots.txt пълни равномерно всички задължителни полета. Както ви инструкции, ще видите съдържанието на вашите директиви robots.txt. По-долу са описани подробно всички директиви на файлове