El turno de noche
Un Gemma local escribe el informe de las 7 de la mañana. ¿Dónde acierta y dónde inventa?
Un Intel N100 y una Raspberry Pi 5 se mandan un latido cada 10 segundos de 22:00 a 6:30. A las 6:30, reglas fijas buscan incidentes en los latidos, y Gemma 3 4B, corriendo en cada equipo con Ollama, escribe el informe con lo que encontraron. Aquí están las cuatro noches que corrieron, una por una: dos tranquilas y dos con ocho fallas provocadas a horas fijas. Escoge una noche y toca una barra para ver el detalle.
La noche, de 22:00 a 6:30
Lo que escribió Gemma
Los dos informes de esa noche, tal como salieron: mismo modelo, mismo JSON de incidentes, mismas instrucciones, temperatura 0 y semilla 42 en los dos equipos. Debajo de cada uno, lo que marcó el evaluador automático, que busca horas y cifras que no estén en el JSON, incidentes omitidos o inventados y la comparación con la noche anterior, y lo que se encontró al leerlo, que el evaluador no puede ver.
De dónde sale
Todo lo de esta página sale de los archivos que produjeron los equipos esas noches: el JSON del detector, el registro de las fallas provocadas, los informes y la medición de cada redacción. Lo único escrito a mano son los hallazgos de la lectura. El detector corre una sola vez, a las 6:30, así que la hora de detección es cuándo se habría disparado la regla, reconstruida con los datos, no una alerta en vivo. El retraso se cuenta desde que empezó la falla.
El código, tal como corrió, y los latidos crudos de las dos noches con fallas están en GitHub con licencia MIT; con ellos el detector da exactamente el mismo JSON.
La nota: el turno de noche →
El código y los datos crudos en GitHub →