En esta historia
Mientras ByteDance desarrolla modelos de inteligencia artificial para competir en chinase informa que el robot que utiliza para extraer datos para entrenar esos modelos está aumentando en actividad.
El dueño de TikTok lanzó su propio raspador webBytespider, en abril, y ahora está extrayendo datos varias veces más rápido que los bots de otras empresas, informó Fortune, citando una investigación de Kasada, una empresa de gestión de bots, y Dark Visitantes, un monitor de robots raspadores. Empresas que desarrollan modelos de IA, como Google (GOOGLE) y Meta (META), utilice robots raspadores para recopilar datos para entrenar y mejorar el modelos de lenguaje grandes (LLM) y modelos multimodales que impulsan los servicios de IA de las empresas.
Bytespider está recopilando datos web aproximadamente 25 veces más rápido que el web scraper de OpenAI, GPTbot, dijo a Fortune Sam Crowther, director ejecutivo de Kasada. En comparación con ClaudeBot de Anthropic, Bytespider es 3000 más rápido.
Al igual que los bots de OpenAI y Anthropic, Bytespider ignora instrucciones de robots.txtuna línea de código no vinculante legalmente que le dice a los web scrapers a qué datos pueden y no pueden acceder en un sitio web, informó Fortune. Según los datos de Kasada, Bytespider ha tenido picos en la actividad de scraping en las últimas seis semanas.
“Es como si estuvieran tratando desesperadamente de ponerse al día”, dijo Crowther a Fortune.
ByteDance no respondió de inmediato a una solicitud de comentarios.
La empresa con sede en China lanzó su Chatbot impulsado por IA, Doubaoen agosto pasado, y está demostrando ser un duro competidor para su rival local Baidu (BIDU) Ernie Bot. En mayo, ByteDance lanzó una serie de LLM de Doubao para empresas, que cuestan menos que los modelos de los competidores chinos de la compañía.
Ahora, ByteDance planea construye un nuevo modelo de IA usando chips de Huawei de Chinainformó Reuters, citando a tres personas anónimas familiarizadas con el asunto. Sin embargo, un portavoz de ByteDance le dijo anteriormente a Quartz que la compañía está no desarrollar un nuevo modelo de IA.
La empresa también ha diseñó dos chips de IA con Taiwan Semiconductor Manufacturing Company (TSM) que ByteDance planea producir en masa para 2026, informó The Information, citando personas anónimas familiarizadas con el asunto. Al producir sus propios chips, la empresa podría volverse menos dependiente de los de Nvidia (NVDA) caro unidades de procesamiento de gráficos o GPUque están sujetos a controles de exportación de Estados Unidos, dijo la gente a The Information.
