Perfeccionar los LLM

Podrías ajustar un LLM de código abierto para

• Enséñale a seguir conversaciones.
• Enséñale a respetar y seguir las instrucciones.
• Haz que se niegue a responder a determinadas preguntas.
• Dale un estilo específico de "hablar".
• Hacer que responda en determinados formatos (por ejemplo, JSON).
• Céntrese en un ámbito específico.
• Enséñale ciertos conocimientos.

Para ello, es necesario crear un conjunto de pares de preguntas y respuestas para mostrar al modelo la pregunta y la respuesta esperada. A continuación, puede utilizar una herramienta de ajuste fino para realizar el entrenamiento y hacer que el modelo responda la respuesta esperada para cada pregunta.