# Запись «User-agent» должна содержать название поискового робота. Пример записи «User-agent», где обращение происходит ко всем поисковым системам без исключений и используется символ * User-agent: * # Для индексирования запрещен файл _call_libs.php, находящийся в корневом каталоге и файл user_order.php, располагающийся в директории «gicleegallery/memberarea»: Disallow: /_call_libs.php Disallow: /gicleegallery/memberarea/user_order.php # Для индексирования запрещены директория «_css» и, следовательно, всё содержимое данной директории: Disallow: /_css/ Disallow: /cgi-bin/ Disallow: /images/ Disallow: /files/ Disallow: /PROSTATS/ Disallow: /gicleegallery/cgi-bin/ Disallow: /gicleegallery/images/ Disallow: /gicleegallery/memberarea/ Disallow: /gicleegallery/admin/ Disallow: /alexandergallery/cgi-bin/ Disallow: /alexandergallery/images/ Disallow: /alexandergallery/admin/ Disallow: /davidmartine/cgi-bin/ Disallow: /davidmartine/images/ Disallow: /liacfreeport/cgi-bin/ Disallow: /liacfreeport/images/ Disallow: /liacfreeport/memberarea/ Disallow: /liacfreeport/admin/ Disallow: /newyorkstatelodging/images/ Disallow: /newyorkstatelodging/admin/ # Для индексирования запрещены директория admin, а так же все файлы и директории, начинающиеся c «admin», т. е. файлы: «admin.htm», «adminka.htm», директории: «admin», «admin1» и т.д. Disallow: /admin Disallow: /config Disallow: /memberarea