На моем сайте нашел фаил robot.txt что это?
Что нужно делать удалить или аставить его, у меня яндекс сайт не индексирует вобще может это из за него?
Это его содержимое!!
Код HTML:
User-agent: Mediapartners-Google*
Disallow:
User-agent: *
Disallow: admin.php
Disallow: /admin/
Disallow: /images/
Disallow: /includes/
Disallow: /themes/
Disallow: /blocks/
Disallow: /modules/
Disallow: /language/