La crisis de descubribilidad de los sitios web pequeños (2021)

Amplias partes de la “web pequeña” independiente son cada vez más invisibles detrás de resultados de búsqueda dominados por unas pocas plataformas grandes y optimizadas para SEO. Los comentaristas intercambian ideas sobre cómo dar visibilidad a sitios personales y proyectos de nicho: reviviendo blogrolls, webrings, marcadores sociales, boletines curados y motores de búsqueda de la “web pequeña”, al tiempo que señalan que la mayoría de los usuarios descubre contenido ahora dentro de jardines amurallados como TikTok, Instagram y Reddit. Hay un amplio acuerdo en que la curación manual no escala con facilidad y que los incentivos de Google, el spam y los enlaces rotos agravan el problema, pero algunos argumentan que las pequeñas comunidades superpuestas y el intercambio humano de enlaces pueden ser la única vía sostenible para el descubrimiento.

¿Existe realmente una crisis de descubribilidad de la “web pequeña”?

  • Muchos comentaristas sienten que los sitios pequeños e interesantes son difíciles o imposibles de encontrar a través de los principales motores de búsqueda y las plataformas sociales.
  • Otros sostienen que el problema refleja los hábitos de los usuarios: si vives dentro de jardines amurallados (YouTube, TikTok, Instagram), rara vez te encontrarás con sitios independientes.
  • Algunos dicen que para los “usuarios promedio” la web pequeña, en la práctica, no existe; para los usuarios avanzados que navegan perfiles, repositorios, RSS y HN, ya hay más contenido que tiempo.
  • Varios piden datos: tendencias de tráfico, cobertura del índice u otras medidas objetivas brillan por su ausencia.

Motores de búsqueda, SEO e IA

  • A Google se le culpa ampliamente:
    • Sobrerrepresentar la recencia y los sitios grandes, muy cargados de SEO.
    • Subindexar o desindexar sitios pequeños y antiguos (“descubierto – actualmente no indexado”, “Google jail”).
    • Tratar las páginas con muchos enlaces como spam, desincentivando los blogrolls/páginas de enlaces.
  • El contenido impulsado por IA y los asistentes de IA pueden empeorar el problema al inundar la web con páginas autogeneradas y mantener a los usuarios dentro de cajas de respuestas, reduciendo el incentivo para crear sitios originales.
  • Algunos ven un conflicto entre la búsqueda financiada por publicidad y la visibilización de contenido de nicho, no monetizado.

Curación humana: blogrolls, webrings, marcadores

  • Fuerte nostalgia por los blogrolls, las páginas de enlaces, los webrings, StumbleUpon, del.icio.us y el Reddit/Digg temprano como capas de descubrimiento.
  • Muchos respaldan la propuesta del artículo: listas públicas de marcadores, idealmente pequeñas, anotadas y a veces compartibles como OPML/JSON/RSS.
  • Preocupaciones: enlaces rotos, spam/astroturfing, el riesgo social de “respaldar” sitios, y el hecho de que la curación manual no escala.

Herramientas existentes y propuestas

  • Se mencionan motores de búsqueda para la “web pequeña”, exploradores aleatorios de sitios, herramientas de marcadores, híbridos de alojamiento+directorio al estilo Neocities y lectores basados en RSS.
  • Ideas planteadas: marcadores federados mediante ActivityPub, extensiones de navegador para publicar listas curadas, compartir marcadores P2P, listas “awesome small web” y búsqueda basada en redes neuronales/embeddings centrada en contenido de cola larga.

Barreras para los creadores de sitios pequeños

  • Es difícil ganar tracción sin comprar anuncios o jugar con las plataformas; las reglas de autopromoción en las grandes comunidades a menudo castigan los proyectos genuinos.
  • Tensión entre construir por placer personal y perseguir audiencia y estética moderna.
  • Algunos cuestionan si la descubribilidad masiva es siquiera posible o necesaria; otros ven valor cultural y de preservación en llegar a más gente.