User-agent: Yandex
Disallow: /cat.php # блокирует доступ к страницам начинающимся с '/cgi-bin'
Disallow: /forum # блокирует доступ к страницам начинающимся с '/cgi-bin'