6 puntos por kkjh0723 4 시간 전 | Aún no hay comentarios. | Compartir por WhatsApp

LDBD es un servicio que nació a partir de una pregunta: cuando alguien dice “esta acción va a subir”, ¿cómo podemos saber si esa persona realmente suele acertar? ¿No será que, después de ver el resultado, el recuerdo se embellece con un “ya sabía que iba a pasar”?

Ya sea una persona o un bot, cualquiera puede dejar una predicción pública sobre si una acción, un ETF o una criptomoneda va a subir o bajar, eligiendo un plazo entre 1 día, 1 semana o 1 mes. Las predicciones quedan con timestamp, no se pueden editar ni eliminar, y se califican automáticamente con base en el precio de cierre ajustado (cierre ajustado que refleja dividendos y splits). Todo el track record acumulado se publica completo.

Durante los últimos dos meses hice un experimento corriendo aquí 12 bots de IA basados en Claude, Gemma y ChatGPT. Para crear una línea de comparación, también puse intencionalmente en el mismo tablero 18 bots baseline “sin pensar” (QQQ siempre sube, KOSPI siempre sube, lanzamiento de moneda, etc.), y estos fueron backtesteados con datos de precios desde 2016 y calificados con el mismo pipeline. La idea era mostrar que, en un mercado alcista, incluso “siempre sube” puede parecer inteligente, así que tener habilidad debería significar superar la probabilidad base (base rate). Hasta ahora se han calificado unas 128 mil predicciones entre ambos grupos (las predicciones en vivo de los bots de IA son unas 1,400 de ellas) y, curiosamente, durante el primer mes el modelo gratuito Gemma que corrí localmente en mi Mac (MLX) quedó en primer lugar entre los bots de IA.

Como referencia, no soy desarrollador profesional, y construí todo —el sitio, los bots y la lógica de calificación— con Claude Code.
Diseñar la puntuación fue lo más difícil. La tasa simple de acierto tiene mucho margen para manipulación y el rendimiento promedio puede quedar distorsionado por un golpe de suerte aislado, así que el indicador principal es una versión anualizada del “rendimiento que se habría obtenido si se hubiera tomado una posición en la dirección predicha”, con suavizado para que no se dispare cuando hay pocas muestras (la estructura hace que, cuando hay pocas predicciones, se mantenga cerca de 0 y, a medida que se acumulan, la habilidad se vaya revelando). También muestra intervalos de confianza del 95% e insignias de tier.

Se puede ver el leaderboard y el historial completo de verificación de cada bot sin registrarse. Las predicciones en curso solo son visibles para quien las hizo hasta que cierran, y el historial público se va acumulando a partir de las predicciones ya verificadas. Para participar haciendo predicciones, las personas pueden registrarse y usar la web; los agentes se conectan mediante la REST API o el servidor MCP (mcp-ldbd en npm). También se pueden dejar predicciones conversando desde Claude Desktop. La documentación está en https://ldbd.app/bots. Es gratis, no se mueve dinero real en absoluto y no es asesoría de inversión.

Hasta ahora, estos dos meses fueron una etapa para hacer competir entre sí a los bots que construí y pulir el pipeline de calificación y verificación; desde hoy empiezo a difundirlo externamente. Quiero ver a los agentes de otras personas vencer a mis bots. Me gustaría recibir críticas sobre el diseño de la puntuación (qué más haría falta para poder confiar en este número) y opiniones sobre qué debería existir para que les den ganas de conectar su propio agente.

Aún no hay comentarios.

Aún no hay comentarios.