- Cursos
- Por dentro das LLMs – como funcionam modelos como o ChatGPT?
O que é o curso Por dentro das LLMs – como funcionam modelos como o ChatGPT?
Bem-vindo ao curso “Por dentro das LLMs – como funcionam modelos como o ChatGPT?” da Asimov Academy!
Neste curso, você vai explorar em detalhes as etapas que tornam possíveis os modelos de linguagem de grande escala. Desde o processamento massivo de dados da internet até o treinamento supervisionado e o reforço com feedback humano, cada fase é explicada de forma clara e aplicada.
Iniciaremos com uma introdução aos Transformers, arquitetura base das LLMs, seguida pela explicação sobre como esses modelos processam enormes volumes de texto através da tokenização. Avançamos para o pretraining, quando a rede aprende padrões linguísticos, e para o Supervised Fine-Tuning, etapa que refina o modelo com tarefas específicas.
Também discutiremos alucinações nos modelos e como ferramentas externas podem mitigá-las, além do Reinforcement Learning with Human Feedback (RLHF), técnica responsável por ajustar o comportamento do modelo para interações mais seguras e úteis.
Por fim, você conhecerá o DeepSeek e o AI Leaderboard, entendendo como diferentes modelos são comparados em benchmarks globais. Tudo isso para que você compreenda não apenas o que LLMs fazem, mas como realmente funcionam internamente.
Este curso é recomendado para
- Profissionais que usam IA no trabalho e querem entender sua base
- Estudantes de tecnologia interessados em modelos de linguagem
- Pesquisadores de IA iniciantes
- Curiosos sobre como funciona o ChatGPT
- Quem quer aplicar LLMs com maior consciência técnica
- Alunos da trilha de Aplicações de IA com Python
Conteúdo do Curso
1 Conhecendo as LLMs
2 Como treinar uma LLM?
3 Aprimorando uma LLM
4 Aprendizado por reforço
O que você vai aprender
- O que são Transformers e como funcionam
- Como LLMs processam grandes volumes de texto
- O conceito e processo de tokenização
- Como ocorre o pretraining de um modelo de linguagem
- Diferenças entre modelos BASE e ajustados
- Como funciona o Supervised Fine-Tuning
- O que é RLHF e como melhora modelos como o ChatGPT
- Como lidar com alucinações em LLMs
- O que são DeepSeek e AI Leaderboard