OpenAI presenta su primer chip personalizado, fabricado por Broadcom
Propósito y posicionamiento del chip
- Jalapeño se presenta como un acelerador solo para inferencia, no para entrenamiento.
- El objetivo es lograr un rendimiento por vatio sustancialmente mejor y un coste ~50% inferior frente a las “GPUs de IA típicas”, con el primer despliegue previsto para finales de 2026.
- Muchos comentaristas señalan que hoy la inferencia domina el gasto total; optimizar los costes continuos por token se considera más estratégico que la velocidad de entrenamiento.
Broadcom, TSMC y la estructura de la industria
- Los chips se fabrican en TSMC y se co-diseñan con Broadcom, que ya colabora con Google en las TPUs y con otros hyperscalers en ASICs personalizados.
- Broadcom se describe como un gigante en ASIC e IP de interconexión, con sólidos acuerdos de asignación en fundiciones y proveedores de memoria.
- Algunos advierten a OpenAI de que Broadcom es un operador agresivo y poco amistoso con el cliente (citando experiencias con VMware/CA/Symantec).
Impacto en Nvidia y otros aceleradores
- Muchos ven esto como parte de un movimiento más amplio: TPUs de Google, Trainium de Amazon/Anthropic, Maia de Microsoft, ASICs de Meta/Broadcom.
- El consenso: Nvidia probablemente siga dominando el entrenamiento de propósito general, pero pierda cuota en la inferencia de los hyperscalers.
- Debate sobre cuánto amenaza esto a Cerebras: algunos creen que el chip propio de OpenAI los dejará fuera; otros señalan que Cerebras apunta a nichos/entrenamiento y ya tiene una साझेदारी con OpenAI.
Debates técnicos
- Gran foco en el ancho de banda de memoria y la arquitectura: SoCs unificados (Apple), LPDDR frente a HBM, y las compensaciones entre latencia de prefill y ancho de banda bruto.
- Aclaración de que la foto del comunicado muestra una oblea con 50–60 dies, no un motor a escala de oblea como Cerebras.
- Extensa discusión paralela sobre “hornear pesos en silicio” (p. ej. Taalas): enorme potencial de velocidad/eficiencia, pero inflexible y limitado por la KV-cache; se ve como mejor opción para modelos estables y pequeños o para usos en edge/robótica.
Reclamación sobre diseño de chips asistido por IA
- El lenguaje de prensa dice que los modelos de OpenAI “aceleraron” el diseño y la optimización.
- Algunos piensan que solo significa que los ingenieros usaron LLMs para HDL, testbenches, scripts, correo, etc.
- Otros señalan que OpenAI está contratando para diseño de chips con IA, pero varios siguen siendo escépticos de que nueve meses basen para un chip de 3 nm diseñado desde cero por IA.
Estrategia de negocio, riesgo y fosos competitivos
- Se considera necesario para reducir los enormes costes de inferencia de OpenAI y su dependencia de Nvidia, y para justificar una futura salida a bolsa.
- Escepticismo sobre métricas vagas (“sustancialmente mejor”, “GPUs típicas”) y la falta de especificaciones concretas.
- Algunos argumentan que el verdadero foso de Nvidia es el software; para una única familia interna de modelos, eso importa menos.
- Se plantean preocupaciones sobre la concentración de hardware ultrarrápido y personalizado dentro de unos pocos laboratorios, dejando a las empresas más pequeñas con APIs más lentas y con tarificación por uso.
Reacciones culturales y misceláneas
- El nombre “Jalapeño” provoca reacciones mixtas (cringe, cliché regional o simplemente otro nombre en clave arbitrario).
- Algunos culpan a las enormes compras de RAM y a los chips personalizados del alza de los precios de la memoria.
- Algunos lo ven como algo inevitable: “si te importa el software, construye hardware”; otros lo ven como expansión de alcance y hype pre-IPO.