¿Cuál es la tarea principal que realiza un mini LLM (o cualquier modelo de lenguaje)?

Cuestionario sobre Mini LLM

Quiz
•
Computers
•
University
•
Hard
Alfonso Meléndez
Used 1+ times
FREE Resource
5 questions
Show all answers
1.
MULTIPLE CHOICE QUESTION
30 sec • 1 pt
Traducir texto de un idioma a otro
Predecir el siguiente token en una secuencia de texto
Resumir documentos largos
Responder preguntas de opción múltiple
2.
MULTIPLE CHOICE QUESTION
30 sec • 1 pt
En el mini LLM descrito, ¿qué representan las "neuronas"?
Letras individuales del texto
Las entradas de la tabla de embeddings
Los valores no nulos después de aplicar la función ReLU
Los logits finales antes de la softmax
3.
MULTIPLE CHOICE QUESTION
30 sec • 1 pt
¿Qué función cumple la softmax en este modelo?
Lineariza los logits en embeddings de tokens
Normaliza los logits en probabilidades para cada posible token siguiente
Reduce la dimensionalidad del estado oculto
Determina qué neuronas están activas
4.
MULTIPLE CHOICE QUESTION
30 sec • 1 pt
¿Por qué es suficiente que el mini LLM aprenda solo pesos y sesgos lineales (sin capas profundas)?
Porque el lenguaje es fundamentalmente un proceso lineal
Porque con una sola capa oculta y softmax se pueden capturar patrones de coocurrencia
Porque más capas ralentizan demasiado el entrenamiento
Porque las activaciones no lineales son perjudiciales en los transformers
5.
MULTIPLE CHOICE QUESTION
30 sec • 1 pt
En el ejemplo de aprender asociaciones (como que "gato" frecuentemente sigue a "el"), ¿qué parámetros ajusta el modelo?
La tasa de aprendizaje durante el descenso de gradiente
Los valores de los tokens en el vocabulario
Los embeddings de los tokens y los pesos que conectan al estado oculto con los logits
La temperatura de la softmax
Similar Resources on Wayground
10 questions
Deep Learning - Q1

Quiz
•
University
10 questions
MÓDULO II: GESTIÓN Y USO DE LAS TABLETAS

Quiz
•
University
10 questions
Arboles

Quiz
•
University
10 questions
ML B2 CH6

Quiz
•
University
10 questions
Normas ISO Desarrollo de Software

Quiz
•
University
10 questions
T7.2 Plan de Pruebas

Quiz
•
University
10 questions
Ingeniería de Software 1 -Segundo Parcial

Quiz
•
University
10 questions
paquetes contables lección 1

Quiz
•
11th Grade - Professi...
Popular Resources on Wayground
25 questions
Equations of Circles

Quiz
•
10th - 11th Grade
30 questions
Week 5 Memory Builder 1 (Multiplication and Division Facts)

Quiz
•
9th Grade
33 questions
Unit 3 Summative - Summer School: Immune System

Quiz
•
10th Grade
10 questions
Writing and Identifying Ratios Practice

Quiz
•
5th - 6th Grade
36 questions
Prime and Composite Numbers

Quiz
•
5th Grade
14 questions
Exterior and Interior angles of Polygons

Quiz
•
8th Grade
37 questions
Camp Re-cap Week 1 (no regression)

Quiz
•
9th - 12th Grade
46 questions
Biology Semester 1 Review

Quiz
•
10th Grade