Найдено на страницах

Несколько тегов, разделённых запятой, означают логическое И между ними. Вы также можете использовать точку с запятой в качестве логического ИЛИ. И имеет высший приоритет над ИЛИ. Вы не можете использовать скобки для группировки условий. Звёздочка (*) внутри тега используется в качестве маски для "подстроки".

Обзоры Список сервисов для генерации robots.txt

19 декабря 2008 г.

Не знаете как правильно создать файл Robots.txt? Не расстраивайтесь. В данной статье представлена большая коллекция сервисов для создания robots.txt. Некоторые из них являются коммерческими, но большинство бесплатные онлайн-генераторы.