> 返回资讯列表
news_article.exe
📰
#OpenAI#GPT#Google#Claude#Anthropic

133 из 10 099 Магазины Shopify блокируют сканер ИИ. Шесть блокируют один магазин ChatGPT.

133 of 10,099 Shopify stores block an AI crawler. Six block the one ChatGPT shops with.

2026年9月6日5 次浏览来源:Dev.to 阅读原文

Торговцам говорят две противоположные вещи о сканерах ИИ: блокируйте их, потому что они берут ваш контент и ничего не возвращают; и признайте их, потому что именно так магазин попадает в ответ на покупки ИИ. Оба предполагают, что решение принимается. Мы хотели узнать, сколько магазинов сделали один, и в какую сторону. Каждый магазин в корпусе из 10 099 известных витрин Shopify читается как часть сканирования. Файл разбирается так, как его анализируют основные сканеры: выигрывает самая конкретная группа, это запасной вариант, выигрывает самое длинное правило соответствия, бьет по галстуку. Каждому из двенадцати имен сканеров задается один вопрос: может ли он принести? Магазин считается блокирующим сканер, когда ответ «нет». Второе чтение смотрит на страницу продукта для переноса тега или . С 29 августа по 2...

Торговцам говорят две противоположные вещи о сканерах ИИ: блокируйте их, потому что они берут ваш контент и ничего не возвращают; и признайте их, потому что именно так магазин попадает в ответ на покупки ИИ. Оба предполагают, что решение принимается. Мы хотели узнать, сколько магазинов сделали один, и в какую сторону. Каждый магазин в корпусе из 10 099 известных витрин Shopify читается как часть сканирования. Файл разбирается так, как его анализируют основные сканеры: выигрывает самая конкретная группа, это запасной вариант, выигрывает самое длинное правило соответствия, бьет по галстуку. Каждому из двенадцати имен сканеров задается один вопрос: может ли он принести? Магазин считается блокирующим сканер, когда ответ «нет». Второе чтение смотрит на страницу продукта для переноса тега или . Чтения проводились с 29 августа по 2 сентября 2026 года. Каждый магазин, который заблокировал, по крайней мере, один сканер или нес тег, является одним рядом в CSV в конце. Остальная часть корпуса ничего не блокирует и является знаменателем. Что этого не видно. Robots.txt — это запрос. Магазин также может заблокировать сканер на краю, с правилом управления ботами или брандмауэром, и этот блок невидим здесь, потому что сканер не блокируется. Каждый счет ниже - это пол. В результате 133 из 10 099 магазинов блокируют хотя бы один сканер: 1,32%. Кроулер То, что он подает Fetches во время ответа Магазины, блокирующие обучение CCBot Common Crawl No 81 GPTBot OpenAI и поиск No 77 Bytespider TikTok / Doubao No 72 Amazonbot Alexa + / Rufus No 60 Google-Extended AI Overviews & AI Mode заземление No 58 ClaudeBot Claude Retrieval и цитаты No 53 Applebot-Extended Apple Intelligence No 48 Meta-externalagent Meta AI No 47 ChatGPT-User Live fetches во время чата ChatGPT да 11 PerplexityBot Perplexity поиск и покупки да 10 OAI-SearchBot ChatGPT поиск и результаты покупок да 6 Perplexity-User Live fetches, когда пользователь Perplexity спрашивает да 3 «Fetches в момент ответа» отмечает четыре сканера, которые читают страницу или индексируют результат поиска в момент, когда человек спрашивает. Остальные восемь сканируют заранее, чтобы обучить или заземлить модель. Разделение следует за опубликованным описанием имени каждого оператора. Двенадцать - это имена, которые на самом деле имеют списки блоков торговцев, а не каждый агент времени ответа, который существует. Агенты Anthropic и Google не входят в их число. Как блокировать 130 из 133 блоков Весь сайт, а не страницы продукта. Только 3 квартала. 54 блока ровно один гусеничный. 28 блокировать те же восемь, дословно: Amazonbot, Applebot-Extended, Bytespider, CCBot, ClaudeBot, GPTBot, Google-Extended, мета-экстерналаген. Еще 4 блокируют те восемь и другие. Идентичные списки не возникают независимо; этот читается как скопированный фрагмент, и он не содержит ни одного из четырех сканеров времени ответа. 1 магазин блокирует все двенадцать. Обучение или ответ Из 133 магазинов, которые блокируют что-либо, 120 блокируют только учебные и заземляющие сканеры. 13 блокируют, по крайней мере, один сканер, который извлекает во время ответа; 1 из этих блоков только сканеры времени ответа, 12 блокируют оба типа. Самая ясная пара - OpenAI. Поезда - это то, из чего построены результаты поиска и покупок ChatGPT. 77 магазинов блокируют первый. 6 блокирует второй, и каждый из этих 6 также блокирует первый. Обратное, держите сканер покупок и впустите обучающий сканер, происходит в 0 магазинах. Ни один магазин в корпусе не решил остаться в стороне от ответов на покупки ИИ. Магазины, которые выходят из них роботами. txt существуют, потому что скопированный отказ от обучения включал имя. В магазинах Noai Tag 8 есть тег мета-роботов на странице продукта. 6 из 8 блоков вообще ничего в robots.txt. По их именам, шесть из восьми являются магазинами товаров музыкантов, которые снова выглядят как один шаблон, а не восемь решений. Тег является отдельным механизмом, и это исследование не делает никаких заявлений о том, какие сканеры чтят его. То, что он делает и не означает блокирование сканеров ИИ, редко встречается в Shopify. 98,7% магазинов не блокируют ни один из двенадцати robots.txt. Где это происходит, там мох

> 分享: