Mapeo de Hacker News para encontrar quién sabe qué en la comunidad de HN

40 million embeddings to find who knows what on Hacker News

Contexto del proyecto

• En una publicación anterior, se incorporaron 40 millones de publicaciones y comentarios de Hacker News para crear un mapa semántico de la comunidad
• Se descubrió que la comunidad apoyaba el proyecto y, a través de lo que proponía, se reducía rápidamente a relaciones reales en todo el mundo
• A través de una conversación con Robert, se habló de su trabajo construyendo un algoritmo de significado social en 2008
• Sorprende que, incluso 16 años después, las redes sociales como Hacker News todavía no calculen ni muestren voces confiables por tema

Preguntas principales

• ¿Por qué es tan difícil descubrir y explorar a las personas que más saben sobre un tema específico?
• ¿Cuál es el alcance de su conocimiento y cómo se relacionan con personas de ideas similares?

Nuevas funciones de la app

• Con la nueva app se puede explorar e interactuar con el mapa semántico de Hacker News (hn2.wilsonl.in)

Hallazgos interesantes

• Organización semántica de usuarios: muestra semánticamente las contribuciones en HN partiendo de los usuarios y junto con usuarios similares
  • Ejemplo: revisar el nuevo perfil de robg
• Búsqueda semántica: permite buscar el significado de HN según quién sabe qué
  • Consultas de ejemplo: startups, programación Go vs Rust, neurociencia y sueño, email marketing
• Mapeo de la comunidad: permite mapear la comunidad con base en significados relacionados con quién sabe qué
  • Como el conocimiento no es uniforme, se puede resaltar a las personas y lo que saben a través de la topografía de la comunidad

Potencial de la tecnología

• Al combinar las tres funciones de organizar significado, buscar y mapear la comunidad, se puede mostrar a las personas detrás de las palabras
• En lugar de organizar la información del mundo, se puede organizar a las personas del mundo
• Hace pensar en diversos desafíos del conocimiento social
• Se recomienda que quienes quieran explorar esto juntos a medida que el proyecto avance más se unan a la lista de espera

Resumen de GN⁺

• Este proyecto propone una forma de encontrar y explorar expertos sobre temas específicos a través de un mapa semántico de la comunidad de Hacker News
• Analiza semánticamente las contribuciones de los usuarios para visualizar su relación con usuarios similares
• La función de búsqueda permite encontrar fácilmente a personas con conocimiento sobre temas específicos
• Resalta a las personas y lo que saben a través de la topografía de la comunidad
• Este proyecto ofrece una nueva forma de conectar a las personas y compartir conocimiento

[GN⁺]

Comentarios de Hacker News

• Me gusta que HN se enfoque en el contenido y la discusión más que en los usuarios individuales.

  • Si quisiera seguir a expertos, usaría una red social como Mastodon o feeds RSS.
  • Esta herramienta tiende a destacar a comentaristas activos más que a expertos con conocimiento.
  • Aun así, sigue siendo un proyecto genial.

• Mi nombre de usuario está tomado del alter ego del narrador de "Zen and the Art of Motorcycle Maintenance".

  • Refleja la capacidad de Phædrus para usar el cuchillo analítico.
  • Uso con frecuencia palabras clave como "part, system, level, language, article, object".

• Me presentan como el principal experto en Optimizing Toilet Lid Design.

• Parece que extrajeron mi correo electrónico del texto del perfil y lo convirtieron en un enlace mailto:.

  • Gracias por facilitarles a los spammers la recolección de correos, dicho con sarcasmo.

• Un elemento llamado "Risk of COVID from pianos" aparece incluido al final del mapa.

  • Me intriga saber de dónde salió eso.

• Lo mejor de HN es que da la sensación de que los comentarios son efímeros.

  • Me incomoda que se analicen y publiquen sin consentimiento.
  • No todo necesita ser analizado ni convertirse en una competencia.
  • Me gusta que se enfoque en el contenido.
  • Hizo que quitara mi usuario de Twitter de la bio.

• Proyecto relacionado reciente:

  • "Show HN: Exploring HN by mapping and analyzing 40M posts and comments for fun" (mayo de 2024, 159 comentarios)

• Hace algunos años hubo una herramienta polémica.

  • Era una herramienta para encontrar usuarios similares mediante análisis de texto y estilo.
  • Escuché que era muy precisa.
  • Me pregunto si esta herramienta podría reutilizarse para algo así.
  • No está claro si "Explore More Users" está ordenado por similitud.

• Como usuario con poca actividad, siento que esta herramienta es inexacta.

  • Parece centrarse en mi pregunta sobre jpeg xl, que es algo que menos conozco.
  • Puede haber un sesgo hacia temas más generales.

• Fue difícil profundizar en mi nombre de usuario.

  • Más allá de muchos puntos dispersos en el mapa, no aporta mucha información.
  • Estoy tratando de entender qué representa el clúster completo.
  • La mayoría está relacionado con android/apple/google.