Rastreadores IA

Los Rastreadores de IA Sobrecargan el Ancho de Banda de Wikimedia, Amenazando el Acceso del Usuario

Tecnología

Wikimedia se enfrenta a un desafío significativo: un aumento masivo en el uso de ancho de banda impulsado por rastreadores de IA. La Fundación Wikimedia informa un aumento del 50% desde enero de 2024, no de lectores humanos, sino de programas automatizados que extraen datos para entrenar modelos generativos de IA. Esta afluencia inesperada amenaza la accesibilidad y el rendimiento de los recursos de Wikimedia para los usuarios habituales.

El Aumento del Tráfico de IA

A diferencia de los lectores humanos que a menudo acceden a temas similares y de tendencia, los rastreadores de IA escanean sistemáticamente una amplia gama de páginas, incluidas las más oscuras. Esto ejerce presión sobre la infraestructura de Wikimedia, ya que estas páginas a las que se accede con menos frecuencia deben servirse desde el centro de datos principal, consumiendo más recursos y aumentando los costos. Wikimedia revela que un asombroso 65% de su tráfico que consume más recursos se origina en estos bots.

Este tráfico impulsado por bots puede causar interrupciones, lo que podría ralentizar los tiempos de carga de las páginas, especialmente durante eventos de alto tráfico. El equipo de Fiabilidad del Sitio de la fundación trabaja constantemente para bloquear estos rastreadores para mantener un rendimiento óptimo para los usuarios humanos.

Atribución y Sostenibilidad

Wikimedia enfatiza que la principal preocupación no es solo el consumo de ancho de banda, sino la falta de atribución adecuada. Como organización sin fines de lucro que depende de las donaciones, Wikimedia necesita atraer nuevos usuarios y mantener su comunidad. La fundación subraya que, si bien su contenido es gratuito, la infraestructura necesaria para entregarlo no lo es.

De cara al futuro, Wikimedia planea establecer métodos de acceso sostenibles para desarrolladores y reutilizadores. Dado que el tráfico relacionado con la IA no muestra signos de desaceleración, encontrar un equilibrio entre el acceso abierto y la gestión de recursos es crucial para el futuro de la fundación.

Fuente: Engadget