Google & robot.txt

Адрес сайта, сюда или в личку.

Тогда надо завести аккаунт в Google Automatic removal - там указываешь путь к robots.txt, и все запрещенные к индексации файлы будут удалены из поисковой базы; больше они точно не будут проиндексированы. У меня тоже была подобная ситуация.

Сам недавно с подобным столкнулся.

Дело в том, что гугл не всегда запрашивает роботс, особенно если приходит по ссылке не на индексную страницу.

Скорее всего он эти страницы внес в индекс, но со временем выбросит.

А вообще лучше запрет дублировать в мета-роботс.

Есть сильное подозрение, что где-то в robos.txt есть ошибка, которую Гугль не желает игнорировать, зато игнорирует всю запись целиком. Такой ошибкой может быть, к примеру, яндексовская директива Host или яховская директива Crawl-delay в общем разделе, а не персональном для конкретного бота.

Кстати, не могу не заметить факта, что в FAQ у Яхи пример даётся именно для бота Slurp, тогда как у Яндекса стоит *.