User-agent: Mediapartners-Google* 
Disallow: /temp/ # не индексировать эти каталоги
Disallow: /tmp/ # не индексировать эти каталоги
Disallow: /banners/ # не индексировать эти каталоги
Disallow: /banrec/ # не индексировать эти каталоги
Disallow: /links/ # не индексировать эти каталоги
Disallow: /boards/ # не индексировать эти каталоги
Disallow: /stats/
Disallow: /stat/
Disallow: /tst/
Disallow: /images/*

User-Agent: Yahoo! Slurp
Disallow: /*

User-agent: *
Disallow: /temp/ # не индексировать эти каталоги
Disallow: /tmp/ # не индексировать эти каталоги
Disallow: /banners/ # не индексировать эти каталоги
Disallow: /banrec/ # не индексировать эти каталоги
Disallow: /links/ # не индексировать эти каталоги
Disallow: /boards/ # не индексировать эти каталоги
Disallow: /stats/
Disallow: /stat/
Disallow: /tst/
Disallow: /images/*

User-agent: Yandex
Disallow: /temp/ # не индексировать эти каталоги
Disallow: /tmp/ # не индексировать эти каталоги
Disallow: /banners/ # не индексировать эти каталоги
Disallow: /banrec/ # не индексировать эти каталоги
Disallow: /links/ # не индексировать эти каталоги
Disallow: /boards/ # не индексировать эти каталоги
Disallow: /stats/
Disallow: /stat/
Disallow: /tst/
Disallow: /images/*
Host: 100dorog.ru