страници

Значение - това е, което е значението на страници, а това означава, подходящ е за търсене
Значение - е параметър, който показва как изискванията на потребителя, направете заявка вход, резултатът произведени от търсачката.
File - настройка и указанията забрани индексирането на страници
Директива и определяне на robots.txt Robots.txt - Тази услуга файл, който служи като препоръка за ограничаване на достъпа до съдържанието на уеб документи за търсачките. В тази статия, ние ще обсъдим