Здравствуйте ребята. Когда начал тестировать сайт на хостинге, то добавил файл robots.txt, чтобы запретить индексацию, но почему сайт всё равно проиндексировался. Из-за чего может быть? До этого момента сайт не был добавлен в Search Console (Google) и Яндекс.Вебмастер.
User-agent: *
Disallow: /
Disallow: /