Я искал различные способы уменьшения дублирования контента на веб-сайте клиента.
Один метод, с которым я столкнулся, — это использование некоторого кода для проверки того, является ли клиент определенным ботом или нет. Используя эту информацию, можно выбрать, отображать информацию клиенту или нет.
Было бы опасно использовать этот метод с Google по какой-либо причине?
Вот код (PHP) для информации:
if(strstr(strtolower($_SERVER['HTTP_USER_AGENT']), "googlebot"))
Подробнее здесь: https://stackoverflow.com/questions/204 ... -dangerous
