Alega -se que os navegadores da Web implantados por espanto nos sites de arranhões são restrições. Um novo relatório da Cloudflare. Em particular, o relatório afirma que os bots da empresa parecem ser como sites “rastejantes secretos”, escondendo suas identidades para robots.txt arquivos e firewalls.
Robots.txt é um sites de arquivo simples que informam aos navegadores da Web se eles podem raspar o conteúdo de um site. Autoridade de espanto Barcos de varredura na web “Surpresa” e “Usuário de espanto”. Nos testes do CloudFlare, espanto, mesmo quando essas botas foram bloqueadas pelo robots.txt, elas foram capazes de visualizar o conteúdo de um novo site indexado. O comportamento se espalhou para os sites com um Firewall de aplicativos da Web específico (WAF) que restringem os navegadores da Web.
O Cloudflare acredita que o espanto domina esses obstáculos usando um navegador geral que visa imitar o Google Chrome no macOS quando proibiu robots.txt botas normais. Nos testes da Cloudlfare, o palete desbloqueado da empresa pode retornar através dos endereços IP que não estão listados na faixa de surpresa IP oficial de passar pelos firewalls. Cloudflare diz que a surpresa parece estar fazendo o mesmo que os números autônomos do sistema (ASNs), um descritivo para os endereços IP operados pelo mesmo negócio.
Engadget ficou surpreso ao comentar o relatório do Cloudflare. Se anunciarmos, atualizaremos este artigo.
As informações atuais dos sites são vitais para empresas que educam os modelos de IA, como são usados em vez de mecanismos de pesquisa aparentemente usados, como serviço. O espanto foi pego no passado, sobrevivendo às regras para permanecer acordado. Em 2024, ele disse que o espanto ainda estava acessível, apesar da proibição de robôs.txt. Surpresa mais tarde, em boa aparição para o comportamento passado, estabeleceu uma parceria com mais de um editor para compartilhar a receita obtida com anúncios exibidos e seu conteúdo.
A interrupção do ruptura de conteúdo das empresas na web provavelmente continuará sendo um jogo de toupeira. Enquanto isso, Cloudflare, os barcos de espanto Lista de botas confirmadas E ele implementou uma maneira de determinar e bloquear a adesão dos clientes secretos rastreados.