Robots.txt - как исключить определенную страницу сайт из поиска. Использование кириллицы
Материал из Wiki - Iphoster - the best ever hosting and support. 2005 - 2023
The printable version is no longer supported and may have rendering errors. Please update your browser bookmarks and please use the default browser print function instead.
Robots.txt - как исключить определенную страницу сайт из поиска. Использование кириллицы
Использование кириллицы запрещено в файле robots.txt, поэтому нужно делать переводл в латиницу через punycode.
Для того чтобы исключить определенную страницу сайта - нужно использовать параметр Disallow:, для примера:
Disallow: /wiki/%D0%A1%D1%81%D1%8B%D0%
