DuckAssistBot
DuckAssistBot в реальном времени обходит страницы для ответов DuckDuckGo с помощью AI, в которых указываются источники. DuckDuckGo сообщает, что эти данные не используются для обучения моделей AI. Запрет убирает вас из источников этих ответов, но не влияет на вашу органическую позицию в поиске DuckDuckGo.
Что он делает
DuckDuckGo сообщает, что DuckAssistBot — веб-краулер для DuckDuckGo Search, который в реальном времени обходит страницы для её ответов с помощью AI, где источники указываются на видном месте. По её словам, эти данные никак не используются для обучения моделей AI.
Издатели могут отказаться быть источником для ответов с помощью AI, запретив DuckAssistBot в robots.txt. DuckDuckGo сообщает, что изменение вступает в силу через 72 часа и не влияет ни на органические позиции, ни на то, появляется ли сайт в её результатах поиска.
Токен robots.txt
DuckAssistBot
Строка user agent
DuckAssistBot/1.2; (+http://duckduckgo.com/duckassistbot.html)Как его разрешить
User-agent: DuckAssistBot
Allow: /Как его заблокировать
User-agent: DuckAssistBot
Disallow: /Как проверить настоящие визиты
DuckDuckGo публикует полный список IP-адресов, которые использует DuckAssistBot, в виде файла JSON. Сверяйте исходный IP запроса с этим списком, а не доверяйте user agent.