Можно было бы пост раздуть до необъятных размеров, потом я подумал и решил что разбор мелочей, которые просто ненужны в данном файле, описание дополнительных возможностей и наворотов в этом простом механизме seo, абсолютная трата времени. И написал коротенький пост о самом главном в этой инструкции для поисковых роботов robots.txt.
Инструкция для роботов ПС - robots.txt.
Понравилась статья? Подпишитесь на канал, чтобы быть в курсе самых интересных материалов
Подписаться