Modelos de linguagem grandes: teste seu conhecimento

  1. Quantos 2 gramas (bigrams) estão presentes na seguinte frase:

    they visited New York last week

  2. Quais atributos de modelos de linguagem grandes os ajudam a fazer previsões melhores do que outros tipos de modelos de linguagem? Escolha todas as opções relevantes.

    Escolha quantas respostas você achar adequado.

  3. Verdadeiro ou falso: um transformador completo consiste em um codificador e um decodificador.

  4. Um LLM é treinado em um grande corpus de dados que inclui o seguinte exemplo:

    My cousin's new fashion line is so cool!

    Qual mecanismo ajuda o LLM a aprender que, nessa frase, "legal"? provavelmente significa "ótimo" e não se refere à temperatura da roupa?

  5. Qual das afirmações a seguir sobre ajuste fino versus destilação é verdadeira?