Hola, Maria, espero que estés bien
Parece que estás experimentando con la generación de texto y las probabilidades de palabras en modelos de lenguaje como ChatGPT y Gemini. Aquí tienes algunas ideas para ayudarte:
Comprender las Probabilidades: Las probabilidades que ves son la estimación del modelo sobre qué palabra es más probable que siga en el contexto dado. Por ejemplo, en "no sé lo que haría sin mi", "familia" tiene la mayor probabilidad porque, en muchos contextos, es común referirse a la familia en esa frase.
Ajustar la Temperatura: La temperatura que estás usando (1.5 en el caso de Gemini) afecta la creatividad del modelo. Una temperatura más alta hace que el modelo sea más creativo y menos predecible, mientras que una temperatura más baja hace que el modelo elija palabras más seguras y comunes.
Experimentar con Diferentes Frases: Intenta variar las frases y observa cómo cambian las probabilidades. Esto te ayudará a entender mejor cómo el contexto afecta las decisiones del modelo sobre qué palabra elegir.
Uso del Tokenizador: Puedes usar el tokenizador de OpenAI para ver cómo se dividen las frases en tokens. Esto puede darte una mejor idea de cómo el modelo procesa el texto antes de generar respuestas.
Espero que estas sugerencias te ayuden a explorar y entender mejor cómo funcionan estos modelos de lenguaje. ¡Bons estudios!