Koala: modelo conversacional para investigación académica (chatbot basado en LLaMA)

• Modelo Koala-13B entrenado con conjuntos de conversación e instrucciones sobre LLaMA, similar a Alpaca
• Genera resultados preferidos frente a Alpaca para diversas consultas y, al menos en más de la mitad de los casos, puede producir respuestas iguales a las de ChatGPT
• Supervised Fine-Tuning con datos de conversación de código abierto recopilados de la web
  • 60K conversaciones de ShareGPT
  • 87K ejemplos de preguntas y respuestas de HC3
  • Open Instruction Generalist (OIG)
  • Conjunto de datos de 52K publicado por Stanford Alpaca
  • Anthropic HH (160K)
  • OpenAI WebGPT (20K)
  • OpenAI Summarization (93K)

[verilogeek]

Literalmente, un zoológico de modelos..

[xguru]

LLaMA, Alpaca, Koala... los modelos de IA parecen un zoológico.