SlopGuard – app de GitHub que puntúa y pone en cuarentena PR/issues generados por IA (no los cierra automáticamente)
(slopguard.app)Es cada vez más común que los maintainers de proyectos open source sufran por PR e issues de baja calidad generados por IA. Los primeros 30 segundos pueden parecer convincentes, así que no puedes simplemente ignorarlos, y filtrarlos uno por uno termina consumiendo muchísimo tiempo. Pero si los cierras solo por el patrón, también corres el riesgo de espantar a contribuyentes reales que llegan por primera vez.
SlopGuard es una app de GitHub. Se instala con un clic (sin necesidad de Action YAML), puntúa los PR e issues entrantes de 0 a 100, etiqueta características de procedencia y, si superan el umbral, agrega la etiqueta slop-quarantine junto con un comentario que explica la razón. Nunca los cierra automáticamente. Las decisiones como quitar de cuarentena o rechazar quedan en manos del maintainer, que las realiza directamente con comentarios /slop approve y /slop reject.
El plan gratuito (hosteado) usa solo heurísticas. No requiere clave de LLM y, en el conjunto de evaluación publicado, obtiene 100% de precisión y 92% de recall (aclaran honestamente que el conjunto es pequeño, y la metodología está publicada en el repo). El plan de pago suma juicio de LLM para detectar incluso los casos más sutiles.
El código fuente está disponible (MIT + Commons Clause), así que puedes leerlo directamente y hacer self-hosting para tu propio uso.
Aún no hay comentarios.