Роботс

Грузил ссылки как обычно. На другом сайте такого нет.

Посмотрел в robots вроде все норм, как и показано в инструкции на ютюбе.

Чесно скажу, что сам в этом мало понимаю, т.к. начинающий.

Может кто сталкивался прошу помочь. Заранее спасибо.