Один из самых недооцениваемых файлов в друпале robots.txt. Некоторые недооценивают его по незнанию. Другие пренебрегают им из за его мнимой незначительности. Прежде, чем описывать множество параметров, которые можно внести в файл, стоит заметить, что перед тем как, что то изменять в стандартном файле - стоит понять к чему это приведёт. Наличие или отсутствие тех или иных модулей может привести к различным последствиям. И пытаясь добиться от файла максимально-положительного эффекта для сайта подразумевается, что на сайте уже установлены модули, которые обычно вносят в группу SEO-модули, как Pathauto и Globalredirect. Так как именно при настроенных синонимах стоит, например, убирать дубли из индекса.
Последние комментарии