Если вы не первый раз делаете сайт, то наверняка слышали про такой файл, как robots.txt. Это важный файл, он определяет какие страницы нужно исключить из индекса и собственно из поиска.
Если вы не первый раз делаете сайт, то наверняка слышали про такой файл, как robots.txt. Это важный файл, он определяет какие страницы нужно исключить из индекса и собственно из поиска.