23°C 16°/ 24°
Notícias

Afinal o ChatGPT não é assim tão inteligente para programação

15 Comentários

É caso para dizer… está tudo maravilhado com o ChatGPT! No entanto, nos últimos tempos, em algumas conferências, tem-se ouvido dizer que há ainda um longo caminho para a inteligência artificial. Um estudo recente revela que o ChatGPT não é assim tão inteligente em questões de programação.


Programação com ChatGPT? 52% das respostas são incorretas…

Os programadores têm recorrido a chatbots como o ChatGPT da OpenAI para os ajudar a programar. Até aqui tudo bem, mas um estudo recente revela que há um problema. 52% das respostas de programação geradas pelo ChatGPT estão incorretas. Isso mesmo, leu bem, 52%!

Para o estudo, os investigadores analisaram 517 perguntas no Stack Overflow e analisaram a tentativa de resposta do ChatGPT.

Descobrimos que 52% das respostas do ChatGPT têm informações incorretas, 77% das respostas são mais detalhadas do que as respostas humanas e 78% das respostas têm diferentes graus de inconsistência em relação às respostas humanas

De referir que para o estudo os investigadores escolheram o GPT-3.5 em vez do GPT-4 , a versão mais recente do modelo de linguagem no momento do estudo. Deve-se notar que os investigadores realizaram também testes paralelos com o GPT-4 e concluíram que, embora o modelo mais recente tenha um desempenho “ligeiramente melhor”, ambos apresentam uma alta taxa de imprecisão.

Autor: Pedro Pinto
Partilhar:
Tags:
ChatGPT programação
A sua conta da Steam é tão pessoal que a Valve nem permite que a deixe como herança…
Artigo anterior

A sua conta da Steam é tão pessoal que a Valve nem permite que a deixe como herança…
Zombiology, uma estranha forma de procurar a Imortalidade
Próximo artigo

Zombiology, uma estranha forma de procurar a Imortalidade
Também pode gostar
PUB

Comentários

15

Deixe um comentário

O seu endereço de email não será publicado. Campos obrigatórios marcados com *

  1. Avatar de Carlos Fernandes
    Carlos Fernandes

    Esse estudo foi feito antes ou depois da parceria? https://ppl.sitedev.pt/inteligencia-artificial/stack-overflow-acaba-de-estabelecer-uma-parceria-com-a-openai/

    Responder
  2. Avatar de Ggggg
    Ggggg

    Volto a repetir o que li , dito por um especialista Francês : a actual inteligência artificial tem muito pouco de inteligência , porque utiliza sobretudo estatística . Durante anos tentou-se realmente criar inteligência artificial , mas falharam . A actual IA não é capaz de pensamentos originais , criativos , recorre ao que já foi feito e a partir da estatística , escolhe o que lhe parece melhor …se eu bem entendi foi isto que ele disse

    Responder
    1. Avatar de Corrector
      Corrector

      Exaxto mas não precisas socorrer tão longe. Inteligencia “acontece” quando o conhecimentp é aplicado 1x e “resolve” o problema. O nome teria que ser Sabedoria Artificial já que é baseado em aprendizagem de tentativa/erro e até com “estimulo”. Exactamente a mesma maneira como treinamos crianças ou cães.

      Responder
    2. Avatar de André R.
      André R.

      Apoiado!

      Responder
    3. Avatar de Gooden
      Gooden

      Se pensares bem a IA neste momento não irá pensar “para além” do que o ser Humano pensa porque esta aprende com o que vê no nosso comportamento, etc…

      Na minha opiniao a IA poderá ter um grande “salto” quando for “integrada” com Qbits e tecnologia Quantica o que está a milhas de acontecer.

      Responder
  3. Avatar de Rodrigo
    Rodrigo

    Até agora tem me ajudado muito, principalmente a criar ligações com API’s, praticamente não preciso de ler os manuais

    Responder
    1. Avatar de Nuno
      Nuno

      em ligações a APIS estás a fornecer um body e um header com certos parâmetros e pouco mais, é difícil apelidar isso de programação, praticamente qualquer pessoas sem competências em programação é capaz de o fazer…

      Responder
    2. Avatar de Gooden
      Gooden

      Nao é mais facil pegar no json da api e criar o codigo todo de uma só vez? Por excemplo com OpenAPI swagger podes usar https://editor.swagger.io/ e colocar la o json e ele faz-te as classes e metodos Automaticamente

      Responder
  4. Avatar de Nuno
    Nuno

    Qual a link para o estudo? O ChatGPT deixa qualquer pesquisa de Google em busca de esclarecimentos a anos luz em termos de eficácia e qualidade dos resultados. A verdade é essa. Integrado como ‘co-pilot’ em IDEs é soberbo! Nesta fase não é capaz de desenvolver una aplicação completa com base numa lista de requisitos por exemplo, mas é uma questão de tempo (pouco).

    Responder
  5. Avatar de Jsim
    Jsim

    Não existe inteligência Artificial, o que temos é machine learning, algo completamente diferente mas usar o termo AI vende muito mais…

    Responder
    1. Avatar de João
      João

      +1

      Responder
    2. Avatar de Nuno
      Nuno

      https://azure.microsoft.com/en-us/resources/cloud-computing-dictionary/artificial-intelligence-vs-machine-learning

      Responder
    3. Avatar de Técnico Meo
      Técnico Meo

      +1

      Responder
  6. Avatar de Kuka+Belludo
    Kuka+Belludo

    O problema, como em tu na informática, está entre a cadeira e o teclado.

    Responder
    1. Avatar de Gooden
      Gooden

      Chama-se a isso: “Maosware” xD

      Responder
Aviso:

Todo e qualquer texto publicado na internet através deste sistema não reflete, necessariamente, a opinião deste site ou do(s) seu(s) autor(es). Os comentários publicados através deste sistema são de exclusiva e integral responsabilidade e autoria dos leitores que dele fizerem uso. A administração deste site reserva-se, desde já, no direito de excluir comentários e textos que julgar ofensivos, difamatórios, caluniosos, preconceituosos ou de alguma forma prejudiciais a terceiros. Textos de caráter promocional ou inseridos no sistema sem a devida identificação do seu autor (nome completo e endereço válido de email) também poderão ser excluídos.