ByteDance tiene un 'bot' que extrae datos de Internet y lo hace 25 veces más rápido que el de OpenAI

ByteDance lleva meses extrayendo datos de Internet con un 'bot' llamado Bytespider, una actividad que hace a mayor velocidad que los 'bots' de otras empresas líderes en el mercado de los grandes modelos de lenguaje (LLM, por sus siglas en inglés).

Image description

   Los grandes modelos de lenguaje necesitan enormes cantidades de datos para su entrenamiento y estas solo se encuentran en internet, donde ya operan varios 'bots' para 'raspar' o extraer información de sitios web.

    Firmas como Google, Meta, Amazon, OpenAI y Anthropic utilizan sus propios 'bots', pero no son los únicos, ya que ByteDance también tiene el suyo, llamado Bytespider, que apareció en algún momento de abril, como han confirmado las firmas especializadas en este tipo de automatizaciones Kasada y Dark Visitors a Fortune.

   Bytespider tiene la particularidad de que en poco tiempo se ha vuelto muy agresivo en la recopilación de datos, como se desprenden de los informes de Kasada. Según el director ejecutivo de esta firma, Sam Crowther, extrae datos a una velocidad 25 superior a la de GPTbot (OpenAI) y 300 veces superior a la de ClaudeBot (Anthropic).

   El 'bot' de ByteDance, además, no respeta la línea de código robots.txt, que los editores de medios de comunicación pueden incorporar a su sitio web para indicar a los 'bots' que no extraigan datos. Tampoco lo respetan GPTbot y ClaudeBot.

   Detrás de esta extracción masiva de datos parece estar el desarrollo de un nuevo LLM por parte de ByteDance, según ha compartido una fuente familiarizada con el asunto con Fortune, que se usaría para la función de búsqueda de TikTok, según otra fuente.

Tu opinión enriquece este artículo:

La mitad de los millennials considera que las pymes españolas necesitarán a las fintech para sobrevivir

La adopción de herramientas fintech no avanza de forma homogénea en el tejido empresarial español. Mientras la mitad de los empresarios de entre 35 y 44 años abraza el cambio y considera que el futuro de las pymes estará determinado por la integración de este tipo de soluciones, solo el 36 % de los empresarios pertenecientes a generadores mayores de 55 años, comparte esta visión. Estos datos provienen del estudio “Radiografía económica y bancaria de la micro y pequeña empresa en España 2025”, elaborado por Qonto, que por primera vez evidencia las diferencias generacionales de los empresarios españoles ante temáticas como: la digitalización, la banca tradicional o las nuevas regulaciones. 

Toyota anuncia la producción en Europa de un nuevo vehículo eléctrico de batería

En una ceremonia celebrada en la oficina del gobierno de la República Checa, Petr Fiala, primer ministro checo, Lukáš Vlček, ministro de Industria y Comercio, y Yoshihiro Nakata, Presidente y Consejero Delegado de Toyota Motor Europe (TME), han anunciado la producción de un nuevo vehículo eléctrico de batería —BEV, Battery Electric Vehicle— en Toyota Motor Manufacturing Czech Republic (TMMCZ). El nuevo BEV, el primero fabricado en una de las plantas europeas de Toyota (1), supone un importante hito tanto para la compañía como la República Checa. 

Siete de cada diez CEOs en Barcelona reconocen no han logrado este verano una “desconexión total” del trabajo

El verano, tradicionalmente sinónimo de pausa, no lo es tanto para quienes dirigen las empresas. Según un análisis realizado por Catenon, siete de cada diez directores generales en Barcelona reconocen no haber conseguido desconectar totalmente durante sus vacaciones. La mayoría admite que, aunque redujo el ritmo, dedicó entre una y dos horas diarias a revisar correos, atender llamadas o tomar decisiones que no han podido esperar.

A New Bear in Town: TOUS aterriza en Berlín con un concepto único en el corazón de Mitte

TOUS, una de las mayores compañías globales de joyería de lujo accesible, marca un nuevo hito en su presencia global con la apertura de su primera tienda en Berlín. Bajo el claim A New Bear in Town, la compañía rinde homenaje a la ciudad con un innovador espacio ubicado en el número 6 de Neue Schönhauser Str., en el dinámico barrio de Mitte, reconocido por su efervescencia cultural, artística y vanguardista.

Mango Teen sigue creciendo con una veintena de aperturas este 2025, incluyendo nuevas localidades internacionales en Reino Unido, Francia y Portugal

Mango, una de las principales firmas de moda internacionales, continúa impulsando la expansión internacional de su línea juvenil, Mango Teen, con una veintena de nuevas aperturas este 2025. En el mercado español, la marca ha abierto tiendas en Sevilla, Córdoba, Badajoz y Vigo y prevé reforzar su presencia en el territorio con nuevas aperturas en Galicia, Andalucía y Madrid.

La competición internacional de startups de VDS ya tiene a sus 10 finalistas

La competición internacional de startups de VDS ya tiene finalistas. TaxDown, SPHERICAL, Arkadia Space, Kreios Space, Spendbase, Latitudo 40, Zibra AI, Altum Sequencing, Spacebackend y CETO Innovation son las 10 startups seleccionadas entre las 1.246 candidaturas recibidas de 84 países. Todas ellas participarán en la final el próximo 22 y 23 de octubre en el escenario principal de VDS 2025, que se celebrará en la Ciudad de las Artes y las Ciencias de Valencia.

PreZero se une al ecosistema de innovación de PATIO Campus para impulsar la economía circular

PreZero se incorpora como nuevo miembro estratégico a PATIO Corporate Open Innovation & Startup Campus, ecosistema referente en emprendimiento e innovación, para liderar el impulso de la economía circular y promover la transformación de los residuos en nuevos recursos de valor dentro del tejido empresarial. Esta colaboración refuerza el compromiso de ambas entidades con un modelo de desarrollo más sostenible, impulsando la colaboración entre startups y grandes corporaciones para acelerar soluciones innovadoras en el ámbito medioambiental.

Éste sitio web usa cookies, si permanece aquí acepta su uso. Puede leer más sobre el uso de cookies en nuestra política de cookies.