Inteligência Artificial
Em resumo
Um modelo de linguagem como o ChatGPT é uma rede neural treinada para prever o próximo pedaço de texto, e as respostas surgem dessa previsão repetida token a token.
1
Um modelo de linguagem como o ChatGPT funciona prevendo qual é o próximo fragmento de texto (chamado token) a partir de tudo o que veio antes.
2
Antes de qualquer cálculo, o texto é quebrado em tokens, que podem ser palavras inteiras, partes de palavras ou sinais de pontuação.
3
Ao final, o modelo produz uma distribuição de probabilidade sobre todo o vocabulário.
Continue lendo
A matéria completa, com fontes e contexto.