Eu não acho que vai demorar muito até então OpenAI também entrará em jogo para o desenvolvimento de um mecanismo de busca baseado em inteligência artificial. O novo web crawler GPTBot cu modea linguagem ampla GPT-5 já foi lançada.
aqueles que usam ChatGPT eu sei isso model de linguagem ampla (LLM) está em execução GPT-3.5, sendo treinado em um conjunto de dados atualizado em setembro de 2021. Portanto, se informações mais recentes forem solicitadas a partir desta data, ChatGPT não é capaz de fornecer informações precisas. Claro, válido para a versão gratuita que não suporta o uso de plugins auxiliares.
Com o lançamento GPTBot, OpenAI tem o caminho aberto para a indexação de páginas da web através deste novo web crawler. Como empresas como Google, Microsoft, Yahoo e muitas outras vêm fazendo há muitos anos.
GPT-5 e o novo web crawler GPTBot desenvolvido pela OpenAI.
o novo web crawler GPTBot utiliza web agent:
User agent token: GPTBot
Full user-agent string: Mozilla/5.0 AppleWebKit/537.36 (KHTML, like Gecko; compatible; GPTBot/1.0; +https://openai.com/gptbot)Os proprietários de sites podem controlar a indexação de páginas da Web por meio do arquivo robots.txt, usando as mesmas diretivas que para os outros web crawlere de outras empresas.
Por exemplo, se o proprietário de um site não quiser que OpenAI para coletar informações do site, pode adicionar robots.txt as linhas:
User-agent: GPTBot
Disallow: /Mesmo que ele aja como um web crawler, GPTBot terá um propósito distinto: coletar dados disponíveis publicamente, evitando cuidadosamente fontes que envolvam paywalls, coleta de dados pessoais ou conteúdo que viole as políticas OpenAI.
Mas existem algumas controvérsias, algumas que até atraíram ações legais contra a empresa OpenAI sobre privacidade e uso de conteúdo sem o consentimento dos autores ou sem identificar as fontes.
Em junho, o regulador de privacidade do Japão emitiu um alerta para OpenAI sobre a coleta não autorizada de dados. A Itália também proibiu temporariamente o uso no início deste ano ChatGPT devido a supostas violações das leis de privacidade da União Europeia.
