Всё что душе угодно от недоступности всего robots.txt для гугла в данный момент до проблем с конкретной страницей. если выявлена конкретная проблема или страница(по идее там жмякнуть можно) то либо noindex либо разбирайтесь обо что спотыкается гугел, он может сам нарушить Ваш robots.txt или использовать "старый" и потом сам удивляться об этом. И так то это вообще гадание на кофейной гуще особенно в подобном представлении проблемы.
раскрыть ветку (1)

