La crisis de descubribilidad de los sitios web pequeños (2021)
(marginalia.nu)- En internet hay muchos sitios web pequeños interesantes y únicos, pero son difíciles de encontrar por grandes canales como Google o Reddit, y la búsqueda depende mucho del azar
- Aunque quienes los crean no aspiren a un gran éxito, si casi no tienen tráfico aparte de bots, la motivación se debilita, y la caída de visitantes lleva a un dead-sea effect que provoca la desaparición de sitios
- RSS y Atom sostienen el ecosistema de blogs, pero pueden estrechar la diversidad de la web al hacer que todo lo publicado se adapte al formato de entrada de blog
- El feed automático de enlaces de Gemini funciona a pequeña escala, pero en HTTP es difícil de sostener sin una moderación fuerte por el astroturfing, el clickbait y el blogspam
- La alternativa más simple es que cada persona publique una lista de bookmarks de sitios interesantes, y que esas listas se conecten entre sí para ampliar las rutas de descubrimiento
Las rutas de descubrimiento por las que desaparecen los sitios web pequeños
- En internet hay muchos sitios web pequeños interesantes, pero en la práctica es muy difícil encontrarlos
- No aparecen mucho en Google ni en Reddit, y aunque se pueden descubrir por casualidad con el buscador Marginalia, no es una forma de exploración dirigida
- Aunque no se busque un gran éxito, tener casi cero tráfico aparte de los bots comunes reduce la motivación de quienes operan el sitio
- A medida que cae el tráfico, desaparecen sitios web pequeños; y a medida que hay menos sitios, también bajan aún más los visitantes, generando un dead-sea effect
- RSS y Atom permiten que los blogs apenas se mantengan, pero una estructura centrada en feeds obliga a que todo lo escrito encaje en forma de entrada de blog, produciendo resultados sofocantes y homogéneos
Límites de los feeds automáticos y del descubrimiento centralizado
- En Gemini, los feeds automáticos de enlaces como Antenna funcionan bastante bien a pequeña escala
- En HTTP, es difícil que el mismo enfoque funcione bien
- Llegan astroturfing, clickbait pobre y blogspam
- Para frenarlos se necesita mucha moderación, y aun así los resultados no son buenos
- Los enfoques centralizados y algorítmicos son muy vulnerables a la manipulación en internet
- Los webrings son simpáticos, pero demasiado aleatorios; y mantener directorios de enlaces curados se parece mucho a un trabajo de tiempo completo
- También se podría limitar el acceso a un feed automático de enlaces con un modelo de red de confianza (web-of-trust), pero una estructura excluyente crea otro walled garden y perjudica la descubribilidad
Una federación laxa mediante listas de bookmarks
- Una alternativa más simple es que cada persona cree y publique una lista de bookmarks hacia sitios web que le parezcan interesantes
- Cada quien decide qué considera interesante
- Una lista de bookmarks puede enlazar a otras listas de bookmarks, por lo que se expande de forma recursiva
- Crear listas de bookmarks es divertido, como armar un álbum de recortes, y el resultado también es agradable de explorar
- Al observar una muestra de sitios web personales, es muy poco frecuente que enlacen a otros sitios web personales
- Un hipervínculo no es un gran compromiso; si encontraste algo aunque sea un poco bueno en un sitio web, puedes enlazarlo
- Para que los sitios web pequeños prosperen como una comunidad saludable, deben promocionarse entre sí mucho más que ahora
1 comentarios
Comentarios de Hacker News
En Neocities han estado trabajando para mejorar la capacidad de descubrimiento de sitios web personales pequeños, y al final terminó pareciéndose a una plataforma de creación de sitios con elementos sociales híbridos: https://neocities.org
Me gusta llamar a esta corriente la “web pequeña”; normalmente se le decía “sitios web personales” o “homepage”, pero no se sentía tan preciso.
Ojalá la búsqueda de web pequeña de Kagi incluyera a Neocities; hay muchos sitios excelentes y, gracias al sitemap compilado, sería fácil incorporarlos: https://neocities.org/browse
Normalmente este tema se presenta como “nostalgia por la web de los 90” o “una resistencia solitaria contra Facebook”, pero en realidad existe contenido mágico que solo es posible porque la web existe como lienzo, y eso no está en las grandes plataformas de redes sociales.
Solo Neocities ya genera cientos de millones de vistas al mes en el conjunto de sus sitios, así que todavía se navega muchísimo por la web.
Los sitios personales pueden incluso tener más ventaja para exponer contenido que una cuenta promedio de redes sociales. Salvo unas pocas cuentas afortunadas, la mayoría tiene su alcance orgánico limitado por algoritmos extraños.
Puede que no les vaya bien en el ranking de búsqueda de Google, pero la gente comparte enlaces por todos lados, incluso en canales privados como Slack/Discord/IRC/mensajería, y así también se puede lograr una distribución significativa.
Como dijo @izs, “si lo construyes, la gente vendrá” es una cita incorrecta de una película de béisbol con fantasmas de Kevin Costner, pero si haces un buen sitio con buen contenido, la gente de verdad termina llegando por caminos que todavía no entendemos bien, de una forma bastante sorprendente.
Es bastante genial ver de antemano cómo algunos de los nuevos sitios de Neocities, especialmente los inusualmente interesantes, terminan alcanzando millones de vistas de forma orgánica.
Casi todas las empresas del boom puntocom también creían que las luces al final de la historia significaban su reivindicación, pero en realidad era la ambulancia que venía a llevarlos al psiquiátrico, y la mayoría estaba equivocada.
Últimamente hasta pensé en dejar NeoCities porque quería poner elementos dinámicos en mi sitio, pero por experiencia pasada sé que entonces me meto en una madriguera de conejo y termino sin hacer nada.
Así que decidí mejor resolver las partes de Hugo que me estaban volviendo loco y ahora estoy retomando el trabajo.
En general NeoCities sí tiene una base de usuarios con una vibra más joven, pero me gusta bastante.
Tiene un feed, y está bueno descubrir las cosas raras que la gente publica en sus sitios; recupera muy bien la sensación de GeoCities.
También me encanta que alguien haya revivido los botones 88x31, y me gusta el backend en Sinatra + Sequel.
Me pregunto si también ofrecen metadatos.
Estoy trabajando en hacer que el resto de la web también sea más fácil de descubrir, así que algo así sería muy interesante.
Las redes sociales degradan las publicaciones con enlaces externos, y Google degrada los sitios que no se actualizan todos los días o que ni siquiera tienen SSL activado.
Hacer un buen sitio con buen contenido requiere tiempo y esfuerzo, pero al final esa información suele terminar sirviendo de alimento para gente que la repite con palabras más simples en blogs de contenido o en redes sociales.
Claro, sin backlinks, y en el peor de los casos incluso intentando convertir en producto conocimiento publicado gratis.
Cuando esto se repite suficientes veces, la gente termina dejando de mantener ese tipo de sitios.
Hasta hace no mucho, todos los blogs tenían un blogroll, una lista de blogs que le gustaban al autor.
No había nada mejor que lograr que tu blog apareciera en el blogroll de un bloguero “famoso”.
Es curioso ver a gente que no vivió esa era de los blogs reinventándolo ahora de manera espontánea.
Parece que los blogueros de hace 20 años ya sabían algo antes de que los monopolios publicitarios los mataran.
Pero sí hay una gran diferencia entre la blogósfera de antes y la de ahora. En los blogs viejos había anuncios, y la mayoría de los blogueros experimentó de una forma u otra.
Nos dejamos tentar por la monetización y en el proceso nos arruinamos solos.
Los blogueros más jóvenes parecen haber aprendido. Están recreando esa vieja blogósfera, pero esta vez sin anuncios y bloqueando activamente el rastreo.
Si lo piensas, parece que así funciona la evolución, y es hermoso.
Si te gustaba ese blog, había bastante probabilidad de que también encontraras algo interesante en su blogroll.
Hay cosas como “redes publicitarias” que promocionan gratis varios sitios del resurgimiento web: https://wsmz.gay/#misc-bannerlink
Me gustan bastante, sobre todo cuando encajan bien con la estética del sitio.
Una página para usar como lista pública de marcadores, donde quería poner desde libros hasta posts de blog y videos de YouTube: https://mahesh-hegde.github.io/readings/
Pero no escribo mucho y hace mucho tiempo que no la actualizo.
En el inglés de mi región sonaba como bog roll, o sea papel higiénico, así que si hubiera sido por eso seguro lo habría recordado.
Entiendo que estos textos salen de una buena intención, pero me parece que dicen más sobre los hábitos de uso de internet de alguien que sobre internet en sí
La mayoría de las redes sociales tienen una sección en el perfil para poner un “sitio web personal”
Muchas veces encuentro esos sitios personales siguiendo los perfiles de GitHub de la gente desde repositorios o PR interesantes
A veces esos sitios enlazan a otros sitios web, y en HN también me fijo si los perfiles de comentaristas interesantes tienen un enlace a su web
Muchos de los posts que llegan a HN también vienen de sitios web personales, y esos sitios a su vez suelen enlazar a otros sitios web
Si uno quisiera, podría pasarse haciendo esto todo el día y aun así no tendría problema en encontrar más cosas para leer de las que caben en un día
Así que no sé si de verdad nos estamos quejando de internet, o si más bien estamos atrapados en jardines amurallados como YouTube y TikTok, queriendo dedicar más tiempo al internet de antes pero sin poder hacerlo por lo adictivos que son
Pero para el usuario promedio de internet, los sitios web pequeños son prácticamente como si no existieran
Es muy raro ver enlaces a sitios hechos a mano en perfiles de Instagram y TikTok, y Google cada vez manda más todas las búsquedas a los mismos 500 sitios gigantes de SEO
Antes Digg servía mucho para eso, StumbleUpon también era buenísimo para este tipo de descubrimiento, y Reddit en sus inicios tenía un efecto parecido
Hoy ya no sé adónde habría que ir
Podría seguir haciendo clic hasta encontrarlos, pero sinceramente no tengo tiempo, y ahora que voy por la mitad de mis 30, no me voy a poner a saltar entre hipervínculos buscando pistas de buen contenido
Ya hay mucha gente haciendo ese trabajo, así que lo que falta es un buen lugar donde reunir esa curaduría para que otros puedan descubrirla
Solo ponerme al día con las conversaciones de salas de anime en Matrix y servidores de RPG en Discord ya me dejaría sin tiempo para trabajar, preparar el RPG que dirijo o hacer los quehaceres de la casa
Ni hablar de blogs personales, Substack, Reddit, HN y demás
Más que pensar que la gente está hambrienta de contenido personal, me parece que, como dijiste, se acerca más a un problema del lado del usuario
Las soluciones de descubribilidad que consisten simplemente en explorar la web como lo describiste o usar el método del artículo de marginalia.nu no satisfacen tan rápido el deseo de “ser visto” como un proceso más afinado técnicamente
Esto me llega bastante
Publiqué mi sitio web para practicar idiomas en HN, LinkedIn y varios otros lugares, pero no logré que a la gente le interesara
Apenas conseguí un poco de respuesta en el Facebook eslavo, y entrar a un webring parece que ayudó un poco también
Es gratis, y de verdad gratis. Porque es algo que me gusta y quiero compartir
Si lo publico en muchos lugares y nadie hace clic, entonces ¿qué se supone que debo hacer?
¿Tengo que comprar anuncios para que usen mi sitio web gratuito?
También probé cosas como etiquetas Open Graph o descripciones que vi en artículos de SEO, y lo publiqué en redes sociales, pero la respuesta fue tibia
Alguien mencionó algo como delicious, o tal vez StumbleUpon, o alguna otra cosa
Quizá podría ser algo como marcadores federados
Siento que la cultura cambió a “si no está en Facebook, es como si no existiera en internet”, y no sé cómo volver atrás desde eso
Parece que la mayoría usa la computadora y el teléfono como si fueran un bootloader de Instagram
Responde esa pregunta y, si puedes, amplía toda esa categoría de conocimiento
Si simplemente empiezas a publicar lo que te nazca, lo único garantizado es la recompensa psicológica de haber puesto tus pensamientos afuera
Si tienes que comprar anuncios, eso significa que ya estás haciendo contenido en un espacio donde el grupo de competidores es lo bastante grande
Si tienes un modelo de negocio sostenible, eso en sí no tiene nada de malo
Por más que los usuarios de HN critiquen a Google por ser una empresa de publicidad, hay que entender que su producto central sigue siendo la búsqueda
La búsqueda es el proceso de llevar al usuario hacia contenido que satisfaga su consulta
Se puede debatir la calidad de los resultados o extrañar cómo era la búsqueda antes, pero la premisa central sigue ahí
Google, como mínimo, tiene que producir resultados mínimamente relevantes
El juego del SEO aparecerá y desaparecerá, pero Google siempre tendrá incentivos para ofrecer resultados significativos que la gente quiera
Las métricas para medir satisfacción podrán cambiar, pero la necesidad de contenido satisfactorio no desaparece
Los feeds RSS, los sitemaps, los datos estructurados y demás son solo herramientas; al final, lo que se crea es contenido
Incluso entre los sitios con mucho tráfico hay muchos que hacen pésimo todo esto básico y aun así les va bien
Es fácil decirlo y difícil ejecutarlo, pero está completamente dentro de lo posible
Hay que pensar más en el valor que le das al usuario
En uno, el motor de búsqueda es una plataforma publicitaria, y la enorme masa de contenido diseñada para generar ingresos también es una plataforma publicitaria
En el otro, el motor de búsqueda sirve para encontrar información y lista sitios que publican información útil, interesante, rara o divertida gratis, para que alguien además del autor pueda disfrutarla
Si confundes esas dos cosas, vas a terminar decepcionado
Funcionaba bastante bien
Tenía muchas ganas de encontrar buen material para practicar y aprender esloveno, aparte de los cursos caros de la University of Cleveland
Parte de este problema parece ser que los sitios web pequeños ya ni siquiera son indexados por Google
Mi blog, que tiene 15 años, tiene 15 páginas indexadas según Google Search Console, y 174 páginas en “Descubierta: actualmente no indexada”
Aunque de vez en cuando publico algo nuevo, la cantidad de páginas indexadas ha ido bajando con el tiempo
La página de Search Console dice “revisa el problema y decide si debes corregir estas URL”, pero casi el único consejo que se puede encontrar es esperar hasta que se indexen, y en la práctica parece que eso nunca ocurre
No voy a decir que mi blog tenga el mejor o el contenido más interesante del mundo, pero no creo que nadie diga que es peor que las tonterías duplicadas, orientadas al SEO y a menudo incorrectas que hoy llenan las primeras páginas de los resultados de búsqueda sobre tecnología
Opero un SaaS que ayuda a los dueños de sitios a lograr que su contenido sea indexado, y está aumentando la captación de usuarios; creo que gran parte de la causa es simplemente la IA
La cantidad de nuevas páginas web añadidas era bastante lineal con el tiempo, pero cuando aparecieron las herramientas de escritura con IA, de pronto se disparó casi verticalmente, como un palo de hockey
Ahora se pueden publicar miles de páginas en minutos, y como resultado se ha generado un enorme atasco en la cola de rastreo de Google, lo que también alarga los tiempos de indexación en general
El impacto es desproporcionadamente mayor para los sitios pequeños
La mayor parte de mi sitio personal lleva casi 2 años atrapada en el limbo de “Discovered - currently not indexed” de Google, y aunque solicito la indexación con regularidad y hago las tareas habituales como optimizar las puntuaciones de Lighthouse, sigue igual
Entré al foro de soporte de Google Search y fue bastante triste. Se sentía como si muchísima gente estuviera gritando al vacío
Casi parece que Google abandonó la búsqueda
Si de verdad quisieran mejorarla, la clave sería alejarse del modelo financiado por publicidad
Larry Page y Sergey Brin ya advirtieron en 1998 que “los motores de búsqueda financiados por publicidad están inherentemente sesgados hacia los anunciantes y se alejan de las necesidades de los consumidores”[0]
Personalmente, creo que incluso un modelo de soporte pagado podría cubrir al menos los costos operativos mínimos
No ganaría tanto dinero como la publicidad, pero como puerta de entrada a internet y a otros servicios de Google, aún podría tener mucho valor tanto para Google como para los usuarios
[0] "The Anatomy of a Large-Scale Hypertextual Web Search Engine", Computer Networks, vol. 30 (1998), pp. 107-117; la cita está en Appendix A y parece faltar en algunas versiones recientes en línea
Mi sitio no es tan antiguo, tendrá unos 8 años, y subo contenido nuevo con cierta regularidad, pero a veces páginas viejas salen del índice sin razón aparente y algunas quedan atrapadas en el grupo de descubiertas pero no indexadas
Intento actualizarlas periódicamente o ampliar un poco el contenido, pero normalmente eso no ayuda a la indexación
Mi sitio tampoco tiene el contenido más interesante, pero sí recibe tráfico constante
Google solo indexa la página principal, e ignora el resto si no hay enlaces externos
Da igual que tenga un buen sitemap y buenas puntuaciones de usabilidad
Ojalá una acción antimonopolio rompa ese conflicto de interés en particular
Kagi tiene una opción para buscar en lo que ellos llaman la “web pequeña”[1]
No lo he usado mucho, pero las pocas veces que lo hice pareció dar buenos resultados
[1] https://blog.kagi.com/small-web
Parte de eso viene del tipo de persona que probablemente tendría un sitio así, y también influye de dónde hayan sacado la lista
Puede que hayan empezado con algo como el blogroll de HN
Aun así, en general son sitios interesantes, y cada pocas semanas vuelvo a visitarlos
Me recuerda a una versión más útil del viejo StumbleUpon
Si Google no está indexando sitios web pequeños, me intriga cómo Kagi puede mostrarlos
El problema de la idea de los marcadores es la putrefacción de enlaces
Mantener una lista actualizada requiere esfuerzo
Por eso los web rings nuevos tampoco están funcionando muy bien
Conozco unos 190 web rings “nuevos”, y solo se puede acceder a alrededor del 20% sin encontrarse con un mensaje 404
Un motor de búsqueda de la “web pequeña” podría ser el camino
Además de Kagi, los que conozco son estos
https://search.marginalia.nu/
https://wiby.me/
https://searchmysite.net/
Coincido en que es difícil descubrir sitios web pequeños
Al crear https://Cloudhiker.net, reuní cientos de esos sitios en un servicio tipo StumbleUpon moderno, y a la gente le gusta
Si te pones a recorrer un web ring haciendo clic, incluso ahora puedes descubrir muchos sitios geniales hechos por desconocidos de todo el mundo
Antes me uní a Indie Webring(https://xn--sr8hvo.ws/) y a Fediring(https://fediring.net/)
Además, en mi archivo personal de marcadores también hay cientos de enlaces: https://bookmarks.kovah.de
No veo cómo eso lo hace más moderno
El modelo de “haz y publica una lista de marcadores que apunten a sitios web interesantes; tú decides qué es interesante” y “nada impide que una lista de marcadores enlace a otras listas de marcadores”, si le sumas los comentarios de amigos de amigos sobre marcadores compartidos, se convierte en el bookmarklet Note in Reader de Google Reader y en la función de elementos compartidos entre amigos[1]
Para quienes usaban elementos compartidos, la parte de lector RSS de Reader era otra forma de generar elementos compartidos
La lista de elementos compartidos podía ser pública y la participación positiva estaba ampliamente abierta, pero los comentarios sobre esos elementos compartidos estaban restringidos a amigos designados y a los amigos de esos amigos
Esta estructura hizo que la función de compartir tuviera persistencia
Al compartir elementos y comentar, la lista de amigos se ampliaba, se veían más elementos compartidos y podía convertirse en un canal de agregación para hacer llegar elementos únicos a personas más allá del muro de amigos
Incluso los elementos sin feed correspondiente podían capturarse con el bookmarklet y compartirse
Estos grupos crecían de forma orgánica y estaban socialmente aislados del abuso
Por definición, todos los participantes se conocían entre sí o debían avalarse mutuamente, incluso sin nombres reales
Además de bloquear a usuarios individuales, si rompías los vínculos de amistad mutua quedaban, en la práctica, bloqueados de las rutas por las que otros podían verlos
Fue realmente excelente[2]
1: https://www.searchenginejournal.com/google-readers-gets-more...
2: https://www.buzzfeed.com/robf4/googles-lost-social-network
Hice exactamente eso de “haz y publica una lista de marcadores que apunten a sitios web interesantes” con share-links
Es una herramienta para guardar y compartir fácilmente enlaces a cosas que te gustan en la web
El repositorio con más información está aquí, y si quieres desplegar una instancia en la web, consulta el archivo DEPLOY.md: https://gitlab.com/sodimel/share-links
Mi instancia, con más de 4000 enlaces, está aquí: https://links.l3m.in/
Si quieres sorprenderte, abre este enlace en una pestaña nueva: https://links.l3m.in/en/random/