A OpenAI, empresa responsável pelo lançamento do ChatGPT há cerca de um ano, tem utilizado as redes sociais para tratar das preocupações relacionadas ao desempenho “inativo” do GPT-4 em plataformas como as mídias sociais e avaliações do Google.
chsyys/Flickr
Este movimento ocorre em resposta ao aumento do feedback negativo dos usuários online, incluindo uma avaliação de uma única estrela na seção de avaliações do Google da empresa.
A OpenAI fornece informações sobre a preparação de modelos de conversação, avaliações de desempenho e testes A/B.
Através de sua conta no Twitter, @ChatGPTapp, a OpenAI explica as dificuldades que surgem ao treinar modelos de chat.
A organização ressaltou que o procedimento não é completamente “limpo” e que as divergências nos programas de treinamento podem resultar em notáveis variações na personalidade da IA, abordagem criativa e inclinação política.
A avaliação completa de um modelo de AI inclui métricas de avaliação offline e testes A/B online. A decisão de lançar um novo modelo é baseada em uma abordagem focada em dados para melhorar a experiência do usuário “real”.
A pontuação do Google Review Score da OpenAI é influenciada tanto pelo desempenho do GPT-4 quanto por questões relacionadas à cobrança.
Essa explicação chega depois de várias semanas de usuários relatando que o desempenho do GPT-4 tem se deteriorado em plataformas de mídia social como X.
Eu não sei se alguém percebeu, mas o rendimento do GPT-4 Turbo é consideravelmente inferior em comparação ao GPT-4 padrão.
Entendo que esteja em fase de pré-visualização neste momento, mas noto uma considerável piora.
Max Weinbach postou um tweet em 8 de novembro de 2023.
Houve debate sobre se o GPT-4 ficou “preguiçoso” recentemente. Os testes informais que realizei indicam que isso pode ser verdade.
Fiz novamente uma série de análises antigas usando o Code Interpreter. O GPT-4 ainda possui conhecimento sobre o assunto, mas continua me pedindo para fazer o trabalho. Agora, um passo é muito e alguns são incomuns. pic.twitter.com/OhGAMtd3Zq
Tweet de Ethan Mollick em 28 de novembro de 2023.
Também houve relatos de reclamações nos fóruns comunitários da OpenAI.
chsyys/Burst
Um usuário, após vivenciar uma situação desagradável, decidiu avaliar a OpenAI com apenas uma estrela através do Google Reviews. Além disso, outras reclamações envolveram problemas com contas, faturamento e a percebida artificialidade da inteligência artificial utilizada pela empresa.
Recentemente, um usuário do Product Hunt deu uma avaliação à OpenAI que aparenta estar associada ao declínio do GPT-4.
Outros problemas também são mencionados pelos revisores locais em relação ao GPT-4. No Yelp, o desempenho do ChatGPT 3.5 da OpenAI recebe uma classificação de apenas uma estrela.
A classificação da OpenAI no Google Maps agora é de apenas 3,8 estrelas, enquanto no Yelp! a classificação é lamentável, com apenas 1 estrela.
A qualidade do GPT-4 tem sido afetada negativamente, o que pode ser prejudicial para o seu desempenho. Espero que a empresa consiga superar essa situação.
“Nate Chan (@nathanwchan) em 9 de dezembro de 2023.”
O motivo de insatisfação:
De acordo com informações sobre a OpenAI, a revisão que recebeu mais likes está em consonância com rumores recentes sobre um ambiente de trabalho instável, onde é alegado que a OpenAI é um local “hostil e não amigável”, com funcionários tóxicos.
De acordo com as avaliações mais relevantes no Glassdoor sobre a OpenAI, foi indicado que os desafios enfrentados pelos funcionários em relação à frustração e ao desenvolvimento de produtos estão relacionados à mudança de prioridade da empresa em direção aos lucros.
Esse acontecimento oferece uma perspectiva especial sobre como as vivências de clientes e funcionários podem impactar qualquer empresa por meio de avaliações em sites locais e plataformas de classificação de negócios.
Destaques positivos do Google SGE – Comentários do Google.
Além de algumas queixas eventuais, os avaliadores do Google reconheceram o efeito inovador da tecnologia da OpenAI em diversas áreas.
A revisão mais favorável sobre a empresa pode ser encontrada no Google SGE (Search Generative Experience).
chsyys/UnPlash
Em resumo.
As últimas descobertas da OpenAI sobre os modelos de chat, o processo de treinamento e a resposta ao feedback público do GPT-4 destacam como a tecnologia de IA é dinâmica e está sempre evoluindo, e como isso afeta aqueles que utilizam a plataforma de IA.
Principalmente indivíduos que foram recentemente convidados a se tornarem membros do ChatGPT Plus, após terem ficado em lista de espera durante o período em que a OpenAI suspendeu novas assinaturas e atualizações. Ou aqueles que estão trabalhando no desenvolvimento de GPTs para o próximo lançamento da GPT Store.
Conforme a inteligência artificial progride, é importante que os especialistas nessas áreas se mantenham flexíveis, atualizados e prontos para responder às mudanças tecnológicas e à forma como o público recebe esses avanços.
Ilustração principal: Fotografia de destaque por Tada Imagens/Shutterstock.