# специальный файл с директивами для роботов
User-agent: *
Disallow: /forum/profile.php
Disallow: /forum/topics_anywhere.php
Disallow: /forum/top_i.php
Disallow: /cgi-bin
Disallow: /forum/rss.php
Disallow: /forum/attach_mod
Disallow: /forum/admin
Disallow: /forum/db
Disallow: /forum/files
Disallow: /admin
Disallow: /imges
Disallow: /parser.php
Disallow: /export.php
<META NAME="revisit" CONTENT="7 days">
<META NAME="revisit-after" CONTENT="7 days">