/usr/local/apache/htdocs/lib/public_html/book/WEBMASTER/robots.txt Библиотека на Meta.Ua Файл /robot.txt
<META>
Интернет
Реестр
Новости
Рефераты
Товары
Библиотека
Библиотека
Попробуй новую версию Библиотеки!
http://testlib.meta.ua/
Онлайн переводчик
поменять

# /robots.txt - указывает поисковым роботам какие каталоги
# брать для индексации не следует.
# Если пуст или не существует, то все можно брать
#
# Пример /robots.txt file
#
# User-agent: webcrawler
# Disallow:
#
# User-agent: lycra
# Disallow: /

User-agent: *
Disallow: /cgi-bin/moshkow
Disallow: /cgi-bin/html-KOI/AQUARIUM/songs
Disallow: /cgi-bin/html-KOI/AQUARIUM/history
Disallow: /cgi-bin/html-windows/AQUARIUM/songs
Disallow: /cgi-bin/html-windows/AQUARIUM/history

Комментарии
Анонимно
Войти под своим именем


Ник:
Текст сообщения:
Введите код:  

Загрузка...
Поиск:
добавить сайт | реклама на портале | контекстная реклама | контакты Copyright © 1998-2018 <META> Все права защищены