Currículo

Trilhas de aprendizagem

Um caminho conectado dos primeiros princípios aos sistemas modernos de modelos de linguagem.

foundations · 8 aulas disponíveis

Orientação e fundamentos

Construa um modelo mental preciso dos modelos de linguagem e da matemática necessária para tudo o que vem depois.

foundations · 7 aulas disponíveis

Veja como o texto se transforma em tokens, vetores e estruturas numéricas que uma rede neural consegue processar.

foundations · 9 aulas disponíveis

Aprenda como redes neurais representam funções, medem erros, propagam gradientes e melhoram por otimização.

core · 5 aulas disponíveis

Percorra o caminho do estado recorrente aos modelos encoder-decoder e à attention, ancestrais imediatos do Transformer.

core · 14 aulas disponíveis

Monte a arquitetura por trás dos LLMs modernos, começando por self-attention e suas operações de query, key e value.

advanced · 13 aulas disponíveis

Projete os objetivos, os dados, a otimização, o paralelismo e o modelo de custos de um treinamento sério de um modelo de linguagem.

advanced · 11 aulas disponíveis

Transforme preditores pré-treinados em assistentes úteis por meio de instruction tuning, preferências humanas, reinforcement learning e destilação.

advanced · 12 aulas disponíveis

Entenda como modelos treinados geram texto e como escolhas de decoding equilibram diversidade, coerência, latência e custo.